음성 지원 LLM, 실시간 음성 대화 모델, TTS, 비전 인코더 공개
[서울=뉴시스]이주영 기자 = 크래프톤이 인공지능(AI) 모델 브랜드 '라온(Raon)'을 출범했다고 2일 밝혔다.
라온은 '즐거움'을 뜻하는 순우리말 '라온'에서 착안한 이름이다. AI 기술을 통해 게임의 본질적인 즐거움을 창출하고자 하는 크래프톤의 철학을 반영했다.
크래프톤은 라온을 출시 직후 음성 지원 거대언어모델(LLM), 실시간 음성 대화 모델, 텍스트-음성 변환(TTS) 모델 및 비전 인코더를 글로벌 플랫폼 허깅페이스에 오픈소스로 공개했다. 이를 통해 데이터 수집부터 모델 학습, 성능 평가까지 파운데이션 모델 개발 전 과정을 자체적으로 수행할 수 있는 기술 역량을 입증했다.
이번에 공개된 모델은 라온 스피치, 라온 스피치챗, 라온 오픈TTS, 라온 비전인코더 총 4종이다.
라온 스피치는 텍스트 중심 언어 모델을 확장해 음성 이해와 생성이 가능한 음성 언어 모델이다. 10억(1B) 파라미터 이하급 공개 음성 언어 모델 중 영어와 한국어 모두 글로벌 1위 성능을 기록했다.
라온 스피치챗은 사용자와 모델이 대화 중 자유롭게 끼어들 수 있는 실시간 양방향 통신 기술을 적용한 음성 언어 모델이다. 양방향 통신 모델 평가 벤치마크 3종에서 맞장구, 끼어들기 처리, 응답 지연 시간 등 주요 13개 태스크 평균 순위 기준 글로벌 최상위권 성능을 기록했다.
라온 오픈TTS는 공개 음성 데이터만으로 학습된 텍스트-음성 변환 모델이다. 기존에 활용이 어려웠던 일부 데이터는 직접 수집 및 정제해 공개했으며, 전체 학습 데이터도 공개해 누구나 동일한 환경에서 학습을 재현할 수 있도록 했다. 두 음성의 자연스러움을 사람이 비교하는 블라인드 평가에서 비공개 데이터 기반 글로벌 연구용 TTS 모델들과 비교해 최상위 수준의 성능을 보였다.
라온 비전인코더는 이미지를 AI가 이해 가능한 정보로 바꿔준다. 비전 인코더를 언어 모델과 결합할 경우 시각 정보를 처리할 수 있으며, 공개 데이터만 활용해 사전 학습된 모델을 쓰지 않고 처음부터 자체 학습했다. 해당 기술은 '독자 AI 파운데이션 모델' 프로젝트에서도 활용될 예정이다.
이강욱 크래프톤 CAIO는 "이번 라온 모델 시리즈 공개는 AI 기술 역량을 축적해 나가는 과정의 중요한 이정표"라며 "대규모 학습 데이터와 핵심 모델을 오픈소스로 공유해 연구자와 개발자들이 자유롭게 활용할 수 있도록 하고, 멀티모달 기술 발전과 국내 AI 생태계의 성장에 기여하기를 기대한다"고 밝혔다.
한편 크래프톤은 파운데이션 모델 설계부터 AI 에이전트, 새로운 게임성을 위한 CPC(Co-Playable Character) 기술의 게임 적용까지 전 주기에 걸친 AI 기술 역량을 보유하고 있다. 이를 바탕으로 지난해 개인용 AI 비서 키라(KIRA)를 선보였다. 지난달에는 AI 에이전트 성능을 개선하는 '터미너스-키라' 기술을 오픈소스로 공개하며 기술 경쟁력을 강화했다.
◎공감언론 뉴시스 zoo@newsis.com