게임에서 축적한 데이터로 멀티모달 AI 개발
기업들의 신기술 개발은 지속 가능한 경영의 핵심입니다. 이 순간에도 수많은 기업들은 신기술 개발에 여념이 없습니다. 기술의 진화는 결국 인간 삶을 바꿀 혁신적인 제품의 탄생을 의미합니다. 기술을 알면 우리 일상의 미래를 예측해 볼 수 있습니다. 각종 미디어에 등장하지만 독자들에게 아직은 낯선 기술 용어들. 그래서 뉴스핌에서는 'Tech 스토리'라는 고정 꼭지를 만들었습니다. 산업부 기자들이 기업들의 '힙(hip)한' 기술 이야기를 술술 풀어 독자들에게 전달합니다.
[서울=뉴스핌] 이성화 기자 = 정부가 추진하는 '독자 인공지능(AI) 파운데이션 모델' 프로젝트에 참여할 5개의 정예팀 가운데 국내 게임사 두 곳이 이름을 올렸습니다. 바로 엔씨소프트의 AI 전문기업 'NC AI'와 '크래프톤'입니다.
NC AI는 산학연 기업·기관과 수요기업을 포함해 총 54개 기관을 이끄는 NC AI 컨소시엄의 주관사로, 크래프톤은 SK텔레콤 컨소시엄의 참여사로 이번 국가대표 AI 개발 사업에 뛰어들었습니다.
독자 AI 파운데이션 모델 프로젝트는 한국형 AI 기초 모형을 개발하고 국내 AI 생태계를 확장해 궁극적으로는 글로벌 시장에서의 '소버린(주권) AI' 실현을 목표로 합니다. 기존 AI 모델이 특정 작업에만 최적화됐다면 AI 파운데이션 모델은 광범위한 데이터를 사전 학습해 다양한 작업에 두루 사용할 수 있도록 설계된 초거대 AI 모델을 의미합니다.
그래서 어느 한 기업의 힘으로 개발하기보다는 산업체와 대학, 연구기관 등이 뭉쳐 각 분야에서 글로벌 최고 수준의 AI 기술을 확보하는 것이 중요합니다.
게임산업은 유행에 민감하고 기술 혁신 속도가 빨라 꾸준히 개발하고 업데이트하지 않으면 이용자들의 외면을 받습니다. 국내 게임사들은 일찌감치 AI 기술을 게임 개발의 핵심 경쟁력으로 인식하고 내부 전담 조직을 꾸려 기술 개발에 힘써왔습니다. 또 AI 기술을 게임 개발에만 활용하지 않고 다양한 분야로 확장해 온 결과 이번 사업에 동참할 수 있었습니다.
◆엔씨소프트 내부 조직에서 AI 전문 자회사로…자체 개발 결실
NC AI는 국내에서 가장 오랜 기간 AI를 전담해 연구해 온 기업이라 자부합니다. 2011년 2월 엔씨소프트의 AI 태스크포스(TF)로 출발해 올해 2월 독립법인으로 분사했고 독립 6개월 만에 컨소시엄 주관사로 선정되며 14년간 쌓아온 내공을 보여줬습니다.
대표 모델은 대형언어모델(LLM, Large Language Model) 바르코(VARCO)와 바르코 비전 2.0(VARCO Vision 2.0)입니다. 바르코는 NC AI가 자체 개발해 2023년 8월 공개한 LLM입니다. ▲텍스트나 이미지를 기반으로 3D 에셋(Asset)을 만드는 '3D' ▲AI 기반 편집 작업을 지원하는 '애니메이션' ▲대사와 음성 데이터를 기반으로 표정과 얼굴 움직임을 자동 생성하는 '싱크 페이스' ▲생성형 AI 기반 소리 생성·편집·변조·검색 서비스인 '사운드' ▲고품질 AI 보이스 생성 서비스 '보이스 라운지' ▲실시간 번역 시스템 '챗 트랜스' ▲게임 문체 번역 시스템 '미디어 트랜스' 등 다양한 바르코 모델을 다중접속역할수행게임(MMORPG) '리니지'와 '아이온' 등 엔씨소프트 게임에 적용하고 있습니다.
NC AI는 바르코를 개발해 업데이트나 업그레이드가 가능한 비전언어모델(VLM, Vision Language Model)로도 선보였습니다.
텍스트·이미지·오디오·영상 등 각종 데이터를 복합적으로 처리하는 '멀티모달' AI 모델인 바르코 비전 2.0은 복잡한 표나 차트를 효과적으로 처리할 수 있습니다. 140억(14B)과 17억(1.7B) 파라미터로 구성된 경량 멀티모달 모델로, 글로벌 동급 최고 수준 모델을 뛰어넘는 성능을 보이며 여러 벤치마크에서 최상위 성적을 기록했습니다. 이미 패션, 게임, 스마트시티, 제조 현장 등에서 실증을 마쳤고 스마트폰과 PC에서 실시간으로 처리할 수 있는 온디바이스 AI 환경까지 지원합니다.
◆딥러닝 본부에 투자…엔비디아·SKT 등 공동개발 기술 주목
크래프톤은 2021년부터 딥러닝과 AI의 성장 가능성에 주목해 연구와 투자를 본격화했습니다. 이듬해인 2022년 딥러닝 본부를 신설해 기술 개발과 전문 인력 확보에 주력했습니다. 국내 시총 1위 게임사답게 공격적인 투자를 단행했으며 현재까지 AI 누적 투자액은 1000억원이 넘습니다.
딥러닝 본부는 사내 업무 효율화를 위한 AI 기술과 게임에 직접 적용할 수 있는 딥러닝 기술을 동시에 개발합니다. 크래프톤 산하 크리에이티브 스튜디오 렐루게임즈는 딥러닝 기술을 이용한 재미있는 게임 개발에 주력해 지난해 음성인식을 이용한 시뮬레이션 게임 '마법소녀 루루핑', 챗GPT를 기반으로 플레이가 불가능한 캐릭터(NPC, Non Player Character)와 상호작용이 가능한 대화형 추리게임 '언커버 더 스모킹 건'을 출시한 바 있습니다.
크래프톤은 자체 개발에서 나아가 인생 시뮬레이션 게임 '인조이'에는 엔비디아와 공동 개발한 이용자와 상호작용할 수 있는 캐릭터(CPC, Co-Playable Character)를 도입해 기술력을 입증했습니다. CPC는 엔비디아 에이스 기술로 구축된 게임에 특화된 온디바이스 소형언어모델(SLM, Small Language Model)을 기반으로 한 새로운 개념의 AI 캐릭터로, 게임 플레이 과정에서 자율적 판단과 추론이 가능하고 이용자와 음성 및 텍스트로 실시간 소통할 수 있습니다.
지난 6월에는 LLM을 기반으로 AI 에이전트의 게임 수행 능력을 평가하는 벤치마크 '오락(Orak)'을 공개했습니다. 게임 환경에서 AI의 상황 인식과 판단, 행동 결정 과정을 정량적으로 분석할 수 있는 평가 체계로 엔비디아와 공동 개발한 CPC를 통해 축적한 AI 설계 경험을 반영했습니다.
크래프톤은 최근 SK텔레콤과 공동으로 개발한 70억(7B) 파라미터 규모의 추론 특화 언어 모델 3종도 선보였습니다. 수학 문제 해결과 코드 개발에 특화된 SLM이며 크래프톤이 독자적으로 개발한 오답 복기 학습 기법을 적용해 추론 정확도와 효율성을 동시에 높였습니다.
게임사들은 게임을 직접 만들고 이용자와 소통하면서 게임 내 텍스트, 이미지, 오디오, 영상 등 다양한 데이터를 축적해왔기 때문에 이를 바탕으로 한 멀티모달 AI 모델 개발에 유리하다는 평가를 받습니다.
정부는 각 정예팀이 개발·확보한 AI 파운데이션 모델 등을 기반으로 오는 12월 말 1차 단계평가를 거쳐 4개팀으로 압축합니다. 이후 6개월마다 1개팀씩 떨어지는 서바이벌 방식의 평가를 통해 2027년 최종 2개팀을 선발할 예정입니다.
평가 방식에는 정예팀이 개발한 서비스를 국민이 직접 체험할 수 있는 대국민 컨테스트와 전문가 평가 등이 논의되고 있습니다. 과연 어떤 팀이 최종적으로 살아남을지 관심을 가지고 지켜봐야겠습니다.
shl22@newspim.com
