이미지: perplexity 생성
카카오가 국내에서 처음으로 경량 멀티모달 언어 모델과 전문 기반 혼합(MoE) 모델을 오픈 소스로 표시하며 국내 AI 서비스의 자립성 강화에 문을 열었다. 카카오는 24일 허깅페이스를 통해 이미지 정보를 이해할 수 있을 만큼 가능성이 있는 멀티모달 언어 모델 '카나나-1.5-v-3b'와 MoE 언어 모델 '카나나-1.5-15.7b-a3b'를 오픈소스로 공개했다.
프롬 스크래치 방식으로 개발한 독자적인 AI 모델이번 공개는 5월 표시한 표시한 모델-1.5 4종에 이어 두 달 만의 추가 모델 표시로, 카카오의 기술 개발 능력을 재차 입증하는 결과다. 카나나 1.5 시리즈는 모델 개발의 처음부터 마지막 단계까지 카카오의 자체 기술을 기반으로 구축하는 '프롬 스크래치(From Scratch)' 방식으로 개발되었다. 카카오는 정부가 확장하는 '독자 AI 파운데이션 모델 프로젝트'에 컨소시엄 규모사로 참여하는 만큼, 자체 모델 개발 능력과 카카오톡 등의 서비스 운영 환경을 거의 전 국민을 대상으로 국가 AI 경쟁력을 강화하는 데에 기여한다는 의미를 강조했다.
GPT-4o 고급 성능을 보인 다양한 모델 카나나-1.5-v-3b는 이벤트뿐만 아니라 이미지 정보도 처리할 수 있는 멀티모달 언어 모델로, 질문 요구를 정확히 이해하는 높은 가변(지시 따르기) 성능과 반복 한국어·영어 이미지를 이해하는 것이 특징이다 . 카카오는 한국어 벤치마크에서 유사 사이즈의 국내외 공개 모델과 비교한 결과 최고 점수를 기록했고, 다양한 영어 벤치마크에서 해외 오픈소스 공개모델과 비교했을 때도 유사한 수준의 성능을 보였다며 GPT-4o와 견줄 수 있다고 설명했다. 지시 이행 능력 벤치마크는 국내 공개 유사 멀티모달 언어모델 대비 128% 수준 성능을 기록했다.
카카오 카나나-1.5-v-3b 모델의 잠재력 AI 모델 성능 비교
다양한 셀 활용 분야 카카오는 모델의 성능에 집중하는 단계를 넘어 AI가 사람처럼 생각하고 행동할 수 있는 멀티모달 이해 능력, 사용자 지시 수행 능력, 추론 능력을 갖추도록 발전시키는 데 주력하고 있다. 하반기 중에는 에이전트형 AI 구현에 필수적인 추론 모델의 성과도 공개할 예정이다.
예를 들어, 장소 사진과 함께 "이 사진이 있는 장소에 대해 간단히 설명해주세요"라고 질문하면 "이 사진은 서울 청계천을 배경으로 하고 있습니다"와 같이 국내에 대한 높은 인식력을 바닥으로 답변을 제공한다. 이미지 검색, 콘텐츠를 분류하여 성과를 인정받는 분야에서 활용이 가능하다 .
국내 최초 MoE 보험으로 보호 카카오는 기존 모델과 분리되는 MoE(Mixture of Experts) 구조의 언어 모델을 국내 오픈 소스로 함께 표시했다. MoE는 입력 데이터 처리 시 모든 파라미터가 함께 참여하는 기존 모델과 동작, 특정 작업에 최적화된 일부 전문가 모델만 활성화되는 방식으로 효율적인 컴퓨팅을 활용하고 있기 때문에 효율적인 컴퓨팅 자원 활용과 비용 절감이 가능해 글로벌 시장에서는 AI 모델 개발 트렌드로 자리를 잡고 있다는 설명이다.
국내 AI 자산 자립 성능 기술 경쟁력 강화 김병학 카 카카오나나 성능리더는 "이번 오픈소스 공개는 비용 효율성과 성능이라는 유의미한 기술 개발의 성과를 거둔 것으로 단순한 모델 아키텍처의 진보를 넘어 서비스 적용과 기술 자립이라는 두 가지 측면의 목표에 부합하는 결과물 "이라고 말했다.
|
카카오가 국내에서 처음으로 경량 멀티모달 언어 모델과 전문 기반 혼합(MoE) 모델을 오픈 소스로 표시하며 국내 AI 서비스의 자립성 강화에 문을 열었다. 카카오는 24일 허깅페이스를 통해 이미지 정보를 이해할 수 있을 만큼 가능성이 있는 멀티모달 언어 모델 '카나나-1.5-v-3b'와 MoE 언어 모델 '카나나-1.5-15.7b-a3b'를 오픈소스로 공개했다.
프롬 스크래치 방식으로 개발한 독자적인 AI 모델
이번 공개는 5월 표시한 표시한 모델-1.5 4종에 이어 두 달 만의 추가 모델 표시로, 카카오의 기술 개발 능력을 재차 입증하는 결과다. 카나나 1.5 시리즈는 모델 개발의 처음부터 마지막 단계까지 카카오의 자체 기술을 기반으로 구축하는 '프롬 스크래치(From Scratch)' 방식으로 개발되었다.
카카오는 정부가 확장하는 '독자 AI 파운데이션 모델 프로젝트'에 컨소시엄 규모사로 참여하는 만큼, 자체 모델 개발 능력과 카카오톡 등의 서비스 운영 환경을 거의 전 국민을 대상으로 국가 AI 경쟁력을 강화하는 데에 기여한다는 의미를 강조했다.
GPT-4o 고급 성능을 보인 다양한 모델
카나나-1.5-v-3b는 이벤트뿐만 아니라 이미지 정보도 처리할 수 있는 멀티모달 언어 모델로, 질문 요구를 정확히 이해하는 높은 가변(지시 따르기) 성능과 반복 한국어·영어 이미지를 이해하는 것이 특징이다 .
카카오는 한국어 벤치마크에서 유사 사이즈의 국내외 공개 모델과 비교한 결과 최고 점수를 기록했고, 다양한 영어 벤치마크에서 해외 오픈소스 공개모델과 비교했을 때도 유사한 수준의 성능을 보였다며 GPT-4o와 견줄 수 있다고 설명했다. 지시 이행 능력 벤치마크는 국내 공개 유사 멀티모달 언어모델 대비 128% 수준 성능을 기록했다.
다양한 셀 활용 분야
카카오는 모델의 성능에 집중하는 단계를 넘어 AI가 사람처럼 생각하고 행동할 수 있는 멀티모달 이해 능력, 사용자 지시 수행 능력, 추론 능력을 갖추도록 발전시키는 데 주력하고 있다. 하반기 중에는 에이전트형 AI 구현에 필수적인 추론 모델의 성과도 공개할 예정이다.
예를 들어, 장소 사진과 함께 "이 사진이 있는 장소에 대해 간단히 설명해주세요"라고 질문하면 "이 사진은 서울 청계천을 배경으로 하고 있습니다"와 같이 국내에 대한 높은 인식력을 바닥으로 답변을 제공한다. 이미지 검색, 콘텐츠를 분류하여 성과를 인정받는 분야에서 활용이 가능하다 .
국내 최초 MoE 보험으로 보호
카카오는 기존 모델과 분리되는 MoE(Mixture of Experts) 구조의 언어 모델을 국내 오픈 소스로 함께 표시했다. MoE는 입력 데이터 처리 시 모든 파라미터가 함께 참여하는 기존 모델과 동작, 특정 작업에 최적화된 일부 전문가 모델만 활성화되는 방식으로 효율적인 컴퓨팅을 활용하고 있기 때문에 효율적인 컴퓨팅 자원 활용과 비용 절감이 가능해 글로벌 시장에서는 AI 모델 개발 트렌드로 자리를 잡고 있다는 설명이다.
김병학 카 카카오나나 성능리더는 "이번 오픈소스 공개는 비용 효율성과 성능이라는 유의미한 기술 개발의 성과를 거둔 것으로 단순한 모델 아키텍처의 진보를 넘어 서비스 적용과 기술 자립이라는 두 가지 측면의 목표에 부합하는 결과물 "이라고 말했다.