[기고 소식] 구글 컴퓨터 비전 강화학습 특허 분석, AI는 왜 ‘정답’보다 ‘보상’을 배워야 할까?

아이피렉스 특허법률사무소 김용덕 대표변리사의 인공지능(AI) 특허 관련 칼럼이 국내 AI 전문 매체인 인공지능신문(AI Times)에 게재되었습니다.

이번 칼럼에서는 구글(Google)의 미국 특허 제12,731,392호를 중심으로, 컴퓨터 비전 분야에 적용되는 강화학습 기반 미세 조정 기술을 살펴봅니다. 지금까지 컴퓨터 비전 AI는 사람이 마련한 정답 데이터를 얼마나 정확하게 예측하는지를 중심으로 학습해 왔습니다. 그러나 실제 산업 현장에서는 학습 데이터의 정답을 잘 맞히는 것만으로 충분하지 않습니다. AI가 실제 업무에서 얼마나 효과적으로 목표를 달성하는지가 더욱 중요하기 때문입니다.

구글의 해당 특허는 이러한 차이에 주목합니다. 사전학습된 컴퓨터 비전 모델을 먼저 구축한 후, 실제 작업에서 중요한 성능 지표를 ‘태스크 보상(Task Reward)’으로 설정하고 강화학습을 통해 모델을 다시 미세 조정하는 방식입니다. 예를 들어 객체 탐지에서는 재현율(Recall)이나 평균 정밀도(mAP)와 같은 실제 성능 지표를 보상으로 활용할 수 있으며, 이미지 분할이나 이미지 컬러화 등 다양한 컴퓨터 비전 작업에도 이러한 방식을 적용할 수 있도록 제안합니다.

칼럼에서는 특히 정답 데이터와 실제 업무 성과 사이의 차이에 주목합니다. 기존 방식에서는 모델이 학습 데이터의 정답과 유사한 결과를 만드는 것이 중요한 목표였다면, 강화학습을 적용하면 실제 시스템에서 중요하게 평가되는 목표를 직접 학습에 반영할 수 있습니다. 또한 반드시 미분 가능한 손실함수만을 이용하지 않고, 복잡하거나 직접적인 계산이 어려운 평가 기준도 보상으로 활용할 수 있다는 점에서 기존 컴퓨터 비전 학습 방식과 차별화됩니다.

이러한 기술은 자율주행, 로봇, 스마트팩토리, 의료영상 등 AI가 실제 환경에서 판단하고 행동하는 분야에서 더욱 중요한 의미를 가질 수 있습니다. 특히 피지컬 AI 시대에는 단순히 이미지 속 객체를 정확하게 인식하는 것보다, 인식 결과를 바탕으로 실제 작업을 얼마나 안정적으로 수행하는지가 중요해질 수 있습니다. 구글의 이번 특허는 생성형 AI를 중심으로 발전해 온 강화학습 기술이 컴퓨터 비전과 피지컬 AI 영역으로 확장되는 흐름을 보여주는 사례라고 할 수 있습니다.

이번 칼럼을 통해 AI 학습 기술의 변화와 함께 이러한 기술이 어떠한 방식으로 특허로 보호되고 있는지 살펴보시기 바랍니다.

기사 전문은 아래 링크에서 확인하실 수 있습니다.