카카오브레인, 이미지 인식 MLLM 오픈소스 ‘허니비’ 공개

카카오의 AI 솔루션 계열사 카카오브레인이 자사가 개발한 멀티모달(MLLM) 언어모델 오픈소스 ‘허니비’를 공유 플랫폼 ‘깃허브’에 공개했다고 19일 밝혔다.

카카오브레인은 해당 오픈소스를 통해 이미지와 대규모 언어모델을 연결할 수 있는 새로운 모듈을 제공할 수 있을 것으로 기대했다.

또 현재 멀티모달 언어모델은 공개된 모델의 수가 적고 학습 방법도 알려지지 않아 개발이 어려운 상황이다.

이에 카카오브레인은 멀티모달 언어모델의 발전에 기여하고자 자체 개발한 ‘허니비’의 소스코드를 공개하기로 했다고 전했다.

MLLM은 기존 대규모 언어모델(LLM)에서 확장된 형태로, 이미지만 입력해도 이미지 속에서 정보를 추출해 정보를 저장하거나 텍스트로 문답을 진행할 수 있는 것이 특징이다.

예를 들어 허니비에 농구 경기 중인 선수의 이미지를 올리고 해당 선수의 우승 경력 등을 질문하면 AI가 이미지 분석을 통해 선수 정보를 자동으로 검색하고 질문에 대한 답변을 주는 식이다.

카카오브레인의 이미지 인식 멀티모달 언어모델 오픈소스 ‘허니비’ [카카오브레인 제공]

한편 카카오브레인의 허니비는 ‘MME’나 ‘SEED-Bench’와 같은 AI 성능 실험에서 다른 MLLM 경쟁자를 제치고 최고 평가를 달성한 바 있다.

특히 특히 지각 능력과 인지 능력을 평가하는 ‘MME’ 벤치마크에서는 2800점 만점 중 1977점을 받았다.

카카오브레인은 향후 허니비가 이미지를 입력하고 텍스트를 통한 문답 형식의 상호작용을 통한 효과적인 교육 및 학습 보조 도구로서의 가치가 높아질 것으로 기대했다.

카카오브레인 김일두 대표는 “허니비의 추론 코드도 깃허브에 공개했으며, 향후 허니비를 활용한 각종 서비스 확장을 고려 중”이라고 밝혔다.

이어 “앞으로도 더욱 발전된 AI 모델 확보를 위해 끊임없이 연구⋅개발할 것”이라고 강조했다.