기술 혁신 연구소(TII) 연구팀이 최근 ‘Falcon Perception’이라는 새로운 변환기를 발표했다. 이 변환기는 0.6B 매개변수를 갖춘 초기 융합 변환기로, 자연어 프롬프트를 기반으로 오픈 어휘 그라운딩 및 세분화를 지원한다. 현재 컴퓨터 비전 분야에서는 일반적으로 모듈식 ‘레고 블록’ 접근 방식이 사용되고 있으며, 이는 사전 훈련된 비전 인코더와 별도의 디코더를 결합하여 작업 예측을 수행하는 방식이다. 이러한 구조적 분리는 확장성을 복잡하게 만들고 언어와 비전 간의 상호작용에 병목 현상을 초래한다. TII는 이러한 문제를 해결하기 위해 새로운 접근 방식을 제안하고 있으며, Falcon Perception은 이러한 혁신의 일환으로 주목받고 있다.

<Mark Tech Post 뉴스 본문 전체읽기>