엔씨, 한국어 특화 비전 언어 모델 및 멀티모달 벤치마크 5종 공개

게임와이

2024.12.04 21:20:47

조회 93 추천 0 댓글 0

엔씨소프트가 뛰어난 한국어 성능을 자랑하는 중소형 오픈소스 VLM(Vision Language Model) 모델 'VARCO-VISION'과 한국어 멀티모달 벤치마크 5종을 4일 공개했다.

이연수 NC Research 본부장은 "엔씨소프트가 VARCO-VISION과 한국어 벤치마크 5종 공개를 통해 멀티모달 AI 분야에서 선도적인 위치를 확보하고 있다는 점을 증명했다"며 "앞으로 VLM의 접목 분야를 오디오, 비디오까지 확대하고 콘텐츠 제작 지원 기능을 강화하는 등 다양한 산업에서 활용할 수 있도록 성능을 끌어 올릴 것"이라고 밝혔다.

VLM은 자연어와 이미지를 함께 활용해 입력 값을 넣을 수 있는 언어모델이다. 최근 모달리티 확장 연구에 관심이 높아지며 VLM이 주목을 받고 있다. 현재 오픈소스로 공개된 대부분의 VLM은 영어와 중국어 기반이며 한국어 지원 모델은 소수에 불과해 국내 기업들은 GPT 혹은 클로드(Claude) 같은 빅테크 기업의 API에 의존하고 있다.

엔씨(NC)가 공개한 오픈소스 VLM 모델 VARCO-VISION은 한글, 영어 프롬프트와 함께 이미지 입력 값을 이해할 수 있는 중소형 모델이다. LLM과 유사한 수준의 언어 능력을 보유하고 있어 애플리케이션에서 LLM과 VLM 두개의 모델을 운용하지 않고 VARCO-VISION 단일 모델 만으로 이미지-텍스트 작업과 텍스트 전용 작업을 모두 처리할 수 있을 전망이다.

특히 VARCO-VISION은 한국어 부문에서 동종 크기 모델 중 1위 성능을 보인다. ▲OCR ▲그라운딩 ▲레퍼링 등 이미지를 인식하고 추론하는 비전 태스크에서도 뛰어난 결과값을 제공한다. VARCO-VISION을 활용하면 AI 서비스 개발 기업은 ▲이미지 인식 및 질의응답 ▲이미지 설명 ▲글자인식(OCR) ▲사물 위치 검출(그라운딩) 기능을 활용한 각종 멀티모달 AI 서비스를 개발할 수 있다.

콘텐츠 제작 기업은 이미지 상세 설명을 자동 생성해 콘텐츠 제작 시간을 아끼거나, 이미지 내 텍스트 인식을 통해 보다 많은 자료를 빠르게 수집하는 등 기획 업무에 도움을 받을 수 있다. 멀티모달 AI모델은 엔씨(NC)가 개발 중인 '바르코 스튜디오(VARCO Studio)'에도 적용될 예정이다.

비전언어모델 작동 예시 참고자료 / 엔씨소프트

엔씨는 이날 한국어 AI 모델 연구 발전에 기여하기 위한 벤치마크 5종도 공개했다. 일반적으로 언어모델의 성능을 평가하기 위해서는 수행능력 판별의 기준점이 되는 벤치마크가 필요하다. 반면 한국어의 경우 멀티모달 벤치마크가 거의 없어 올바른 성능 평가가 어려운 상황이었다.

엔씨는 영미권에서 대표적으로 사용되고 있는 객관식 벤치마크 3종(MMBench, SEED-Bench, MMStar)과 주관식 벤치마크 1종(LLava-in-the-wild)을 기반으로 새로운 한국어 벤치마크 4종을 구축했다. 더불어 한국어 문서, 표, 차트에 대한 이해능력을 검증할 수 있는 'K-DTCBench' 벤치마크 1종을 새롭게 더했다.

▶ [기획] 11월의 게임 뉴스 TOP 5 "대한민국 게임대상 논란"▶ 엔씨 기대작 '저니 오브 모나크', 예약 800만 돌파하며 기대감↑▶ TLㆍLLLㆍ택탄만 남았다...엔씨, 독립 개발사 4개 체제 출범 ▶ [금주의 게임 순위] '리니지2M' 구글 매출 순위 10위권 진입...메이플X귀멸의 칼날 순위 상승 ▶ [기획] 리니지도 키운다...'저니 오브 모나크'는 'AFK'가 될까?▶ 다시 달릴 시간...리니지M, 'OASIS 4: ADVENTURE' 업데이트 ▶ 엔씨 'TL'에 '창' 등장...출시 1주년 맞이 신서버 오픈

고정닉 0

원본 첨부파일 3본문 이미지 다운로드

전체 댓글 0개

등록순

본문 보기

타인의 권리를 침해하거나 명예를 훼손하는 댓글은 운영원칙 및 관련 법률에 제재를 받을 수 있습니다.
Shift+Enter 키를 동시에 누르면 줄바꿈이 됩니다.

갤러리 리스트
번호	제목	글쓴이	작성일	조회	추천
설문	연예인 말고 매니저 했어도 잘했을 것 같은 계획형 스타는?	운영자	25/01/13	-	-
공지	글쓰기 에디터 개선 안내	운영자	25/01/13	-	-
9082	"미쳤다 X예쁘다" 별되2 '아나이스' 전투 영상이 없다고? [1]	게임와이	24.12.27	575	0
9081	가디언테일즈·퍼즐앤드래곤·라테일, 게임X만화 콜라보...	게임와이	24.12.27	6774	2
9080	스팀 베스트 2024 휩쓴 엔씨 'TL'이 스팀에서 안 보이는 이유	게임와이	24.12.27	309	0
9079	넷마블 '마블 퓨처파이트', '웨이스트랜더스' 테마 업데이트	게임와이	24.12.27	290	0
9078	'콜라보 콜라보' 하는 이유 있었다. 게이머 절반 이상 '복귀'	게임와이	24.12.27	310	0
9077	[결산] 게임와이가 선정한 2024 e스포츠 10대 뉴스 [5]	게임와이	24.12.27	7009	3
9076	펄어비스, '검은사막 10년의 기록' 인포그래픽 공개	게임와이	24.12.27	258	0
9075	라이엇게임즈, 12년간 93억 기부...한국 문화유산 지켰다	게임와이	24.12.27	256	0
9074	넥슨 '퍼스트 디센던트'가 디아4, 철권8보다 더 대작?	게임와이	24.12.27	278	0
9073	소녀의 피를 빨아먹는 PC게임 등장...평점은 "최악" [13]	게임와이	24.12.27	3904	3
9072	일루미네이션, 'VR 그녀' 전체 이용가 대신 성인 등급으로 출시 결정	게임와이	24.12.27	253	0
9071	'페이커, 쵸비, 제카' 삼파전...2024 LCK 어워드 세부 내용 공개 [11]	게임와이	24.12.26	2526	1
9070	넷마블과 함께 마지막 연말을...모바일 게임 3종 신규 콘텐츠 추가	게임와이	24.12.26	255	0
9069	엔씨소프트, 연말 맞아 모바일 게임 2종 신규 콘텐츠 업데이트	게임와이	24.12.26	241	0
9068	로스트아크, 신규 클래스 '환수사' 사전등록 이벤트 시작	게임와이	24.12.26	231	0
9067	스마일게이트, 中 저장성 문화관광발전 유한공사 감사장 수상	게임와이	24.12.26	212	0
9066	호연·니케 등 연말연시 신규 캐릭터 업데이트로 분위기 UP↑	게임와이	24.12.26	219	0
9065	게임 이용자 절반이 사전 예약 안 한다! [6]	게임와이	24.12.26	384	0
9064	[금주의 신작] 사이코데믹·샌드 오브 살자르 출시 [1]	게임와이	24.12.26	1294	0
9063	크레더 "한일 양국 실물연계자산(RWA) 시장 확장시킬 것"	게임와이	24.12.26	205	0
9062	[금주의 게임 순위] 리니지·오딘·라스트워, 구글 매출 1위 싸움 '치열'	게임와이	24.12.26	195	0
9061	연말 보너스? K-게임 3종, 중국 판호 획득 [1]	게임와이	24.12.26	670	0
9060	[리뷰] 2D 슈팅 게임 전성기 시절의 재미를 잘 살린 '언더 디피트'	게임와이	24.12.26	199	0
9059	[결산] 메타크리틱이 선정한 올해 워스트 게임 탑 10	게임와이	24.12.25	241	0
9058	스마일게이트, 오픈월드 전략 액션 RPG '샌드 오브 살자르' 정식 한글화 버전 출시	게임와이	24.12.24	334	0
9057	크리스마스는 엔씨와 함께...성탄절 기념 이벤트 진행 [17]	게임와이	24.12.24	7014	1
9056	'블루 아카이브' 경찰학교 학생이 수영장 구조요원을 맡는다면?	게임와이	24.12.24	315	0
9055	스마일게이트, 내년 사우디 달군다...'크로스파이어' EWC 정식 종목 채택	게임와이	24.12.24	286	0
9054	[전망25] 게임사 탑15 2025년 기상도(3)-엔씨소프트	게임와이	24.12.24	272	0
9053	[전망25] 게임사 탑15 2025년 기상도(2)-넷마블	게임와이	24.12.24	237	0
9052	[전망25] 게임사 탑 15 2025년 기상도(1)-넥슨	게임와이	24.12.24	231	0
9051	'오딘' 매출 1위, 'POE2' 급상승...카카오게임즈 잔치집 분위기 [1]	게임와이	24.12.24	426	0
9050	검은사막 최초 샷건 '데드아이' 출시...갓레이드도 신규 캐릭터 출격	게임와이	24.12.24	231	0
9049	게임 DNA 확산...'NHN 게임스 위크' 성료	게임와이	24.12.24	217	0
9048	패스오브엑자일 2 치지직 드롭스 이벤트 진행	게임와이	24.12.24	257	0
9047	'발할라 서바이벌' 예약 500만 간다...예상 출시일은 1월 22일	게임와이	24.12.24	204	0
9046	포켓몬 카드게임 韓 대표 선수 뽑는다	게임와이	24.12.24	208	0
9045	[전망] 소니가 추천하는 2025년 가장 기대되는 PS5 게임 4종은? [8]	게임와이	24.12.24	5516	2
9044	아이언메이스 '닥닥' 전설 계정 4만원→ 0원	게임와이	24.12.24	196	0
9043	"에바는 에바?", "라피 예쁘다"...니케 커뮤니티 '후끈' [14]	게임와이	24.12.24	8220	18
9042	[프리뷰] 이제 또 다시 문명할 시간이다…'문명 7'	게임와이	24.12.23	534	0
9041	'검은신화: 오공' 인기에 편승한 모방 게임 등장!	게임와이	24.12.23	232	1
9040	'PGC 2024' 성료...베트남 '디 익스펜더블스' APAC지역 최초 우승 [2]	게임와이	24.12.23	5567	3
9039	넥슨 신작 '슈퍼바이브' 첫 시즌 '아크 1' 사전등록 시작	게임와이	24.12.23	218	0
9038	게임은 추억을 남기고...'2024 넥슨 클래식 어워즈' 수상자는?	게임와이	24.12.23	188	0
9037	'로드나인 세트' 드셔보세요?...로드나인 디저트 나왔다	게임와이	24.12.23	191	0
9036	PC방이 던전...'패오엑 2', PC방 오프라인 이벤트 진행	게임와이	24.12.23	189	0
9035	열혈강호 30년 팬덤, 취약 계층 아동에게 환원됐다	게임와이	24.12.23	156	0
9034	일본에 진심인 웹젠, '테르비스' 2회 연속 코미케 출전	게임와이	24.12.23	150	0
9033	국내 1위 '모바일 한게임포커' 10주년 맞았다	게임와이	24.12.23	146	0
뉴스	‘누적 조회수 40억뷰’ 차다빈 ‘오르트구름’ 포함 3곡, '언더커버' 음원 오늘 13일 발매	디시트렌드	01.13