백스킨
백스킨
백스킨
백스킨
  • ⠀유진호
  • ⠀유진호 등록일(수정) : 2024-12-04 16:39:31
  • [기타]

    엔씨, 한국어 특화 비전언어모델 및 멀티모달 벤치마크 5종 공개

    영어 번역 아이콘 중국어 번역 아이콘 일본어 번역 아이콘
주소복사
https://www.hungryapp.co.kr/news/news_view.php?du...
신고





엔씨소프트(이하 엔씨(NC))가 뛰어난 한국어 성능을 자랑하는 중소형 오픈소스 VLM(Vision Language Model) 모델 ‘VARCO-VISION’과 한국어 멀티모달 벤치마크 5종을 4일 공개했다.

VLM은 자연어와 이미지를 함께 활용해 입력 값을 넣을 수 있는 언어모델이다. 최근 모달리티 확장 연구에 관심이 높아지며 VLM이 주목을 받고 있다. 현재 오픈소스로 공개된 대부분의 VLM은 영어와 중국어 기반이며 한국어 지원 모델은 소수에 불과해 국내 기업들은 GPT 혹은 클로드(Claude) 같은 빅테크 기업의 API에 의존하고 있다.

엔씨(NC)가 공개한 오픈소스 VLM 모델 VARCO-VISION은 한글, 영어 프롬프트와 함께 이미지 입력 값을 이해할 수 있는 중소형 모델이다. LLM과 유사한 수준의 언어 능력을 보유하고 있어 애플리케이션에서 LLM과 VLM 두개의 모델을 운용하지 않고 VARCO-VISION 단일 모델 만으로 이미지-텍스트 작업과 텍스트 전용 작업을 모두 처리할 수 있을 전망이다.


특히 VARCO-VISION은 한국어 부문에서 동종 크기 모델 중 1위 성능을 보인다. ▲OCR ▲그라운딩 ▲레퍼링 등 이미지를 인식하고 추론하는 비전 태스크에서도 뛰어난 결과값을 제공한다. VARCO-VISION을 활용하면 AI 서비스 개발 기업은 ▲이미지 인식 및 질의응답 ▲이미지 설명 ▲글자인식(OCR) ▲사물 위치 검출(그라운딩) 기능을 활용한 각종 멀티모달 AI 서비스를 개발할 수 있다. 



콘텐츠 제작 기업은 이미지 상세 설명을 자동 생성해 콘텐츠 제작 시간을 아끼거나, 이미지 내 텍스트 인식을 통해 보다 많은 자료를 빠르게 수집하는 등 기획 업무에 도움을 받을 수 있다. 멀티모달 AI모델은 엔씨(NC)가 개발 중인 ‘바르코 스튜디오(VARCO Studio)’에도 적용될 예정이다.


엔씨(NC)는 이날 한국어 AI 모델 연구 발전에 기여하기 위한 벤치마크 5종도 공개했다. 일반적으로 언어모델의 성능을 평가하기 위해서는 수행능력 판별의 기준점이 되는 벤치마크가 필요하다. 반면 한국어의 경우 멀티모달 벤치마크가 거의 없어 올바른 성능 평가가 어려운 상황이었다.

엔씨(NC)는 영미권에서 대표적으로 사용되고 있는 객관식 벤치마크 3종(MMBench, SEED-Bench, MMStar)과 주관식 벤치마크 1종(LLava-in-the-wild)을 기반으로 새로운 한국어 벤치마크 4종을 구축했다. 더불어 한국어 문서, 표, 차트에 대한 이해능력을 검증할 수 있는 ‘K-DTCBench’ 벤치마크 1종을 새롭게 더했다.

NC Research 이연수 본부장은 “엔씨소프트가 VARCO-VISION과 한국어 벤치마크 5종 공개를 통해 멀티모달 AI 분야에서 선도적인 위치를 확보하고 있다는 점을 증명했다”며 “앞으로 VLM의 접목 분야를 오디오, 비디오까지 확대하고 콘텐츠 제작 지원 기능을 강화하는 등 다양한 산업에서 활용할 수 있도록 성능을 끌어 올릴 것”이라고 밝혔다.



유진호 기자 (desk@hungryapp.co.kr)

글 내용 잠시 숨기기

헝그리앱 이벤트 이전으로 가기 다음으로 가기 진행중인 이벤트 6더보기 버튼
  • 이벤트 배너
  • 이벤트 배너
  • 이벤트 배너
기사를읽고
평가를 해주시면
밥알 +5 지급
기사 평가 1번째 이모티콘
21
기사 평가 2번째 이모티콘
16
기사 평가 3번째 이모티콘
11
기사 평가 4번째 이모티콘
12
기사 평가 5번째 이모티콘
0
기사 평가 6번째 이모티콘
2
하트독
A
D
  • 댓글 56
  • 댓글 쓰기

등록순 최신순 댓글순

리플

56건 | 1/2 페이지
  • 기본 프로필 사진
    베이식 Level 42   +5 신고 16:48:05 기사 잘 보았습니다.
    0
  • 기본 프로필 사진
    토끼냥냥이 Level 49   +5 신고 16:48:48 보고갑니다
    0
  • 기본 프로필 사진
    디에고b Level 26   +5 신고 16:53:29 잘보고갑니다
    0
  • 사과맛눈물 프로필 사진
    사과맛눈물 Level 46   +5 신고 16:55:13 잘 보고 가요
    0
  • 광포한날다람쥐 프로필 사진
    광포한날다람쥐 Level 50   +5 신고 16:58:16 엔씨 잘보고가요
    0
  • 기본 프로필 사진
    minazukee Level 24   +5 신고 17:00:32 공개 잘 보고 가요
    0
  • 기본 프로필 사진
    와이에이치s Level 37   +5 신고 17:07:43 잘보고가요
    0
  • ssadi 프로필 사진
    ssadi Level 34   +5 신고 17:15:01 잘봤습니다
    0
  • 리케르트 프로필 사진
    리케르트 Level 45   +5 신고 17:16:52 잘 봤어요.
    0
  • 초신성의꿈 프로필 사진
    초신성의꿈 Level 50   +5 신고 17:21:32 잘 보고 갑니다.~
    0
  • 청결 프로필 사진
    청결 Level 40   +5 신고 17:22:54 잘보고갑니다
    0
  • 티탸 프로필 사진
    티탸 Level 49   +5 신고 17:25:47 보고갑니다
    0
  • 기본 프로필 사진
    어기여디어차 Level 45   +5 신고 17:45:39 잘보고가요
    0
  • 기본 프로필 사진
    궁극의미로 Level 44   +5 신고 17:45:40 잘봤습니다
    0
  • 기본 프로필 사진
    챠니혀니 Level 44   +5 신고 17:45:48 잘보고갑니다
    0
  • 엘브 프로필 사진
    엘브 Level 40   +5 신고 18:02:08 잘봤습니다
    0
  • 너를만나다 프로필 사진
    너를만나다 Level 37   +5 신고 18:24:26 보고 갑니다]
    0
  • 기본 프로필 사진
    Antares1234 Level 29   +5 신고 18:36:07 잘봤습니다
    0
  • 령의꽃 프로필 사진
    령의꽃 Level 40   +5 신고 18:56:48 잘 보고갑니다
    0
  • 기본 프로필 사진
    우와좋다 Level 41   +5 신고 19:05:49 잘보고갑니다ㅋ
    0
  • 빅냥 프로필 사진
    빅냥 Level 50   +5 신고 19:36:14 잘보고갑니다
    0
  • 지존신투 프로필 사진
    지존신투 Level 38   +5 신고 19:44:53 잘봤습니다
    0
  • Rozelia 프로필 사진
    Rozelia Level 41   +5 신고 19:48:59 공개 기대기대
    0
  • 하울론 프로필 사진
    하울론 Level 39   +5 신고 20:06:46 잘보고 갑니다.
    0
  • 볼섭화룡 프로필 사진
    볼섭화룡 Level 34   +5 신고 20:26:07 잘보고갑니다
    0
  • 기본 프로필 사진
    우리랑랑 Level 36   +5 신고 20:32:12 잘보고갑니다~~
    0
  • 기본 프로필 사진
    자유로의발광 Level 42   +5 신고 20:41:36 잘 보고갑니다
    0
  • こんのあんな 프로필 사진
    こんのあんな Level 37   +5 신고 20:46:12 잘 보고 가요
    0
  • 진O휘O석 프로필 사진
    진O휘O석 Level 45   +5 신고 20:46:13 잘 보고 갑니다....^^@
    0
  • 기본 프로필 사진
    ㅇ큰고래ㅇ Level 27   +5 신고 21:19:06 잘보고갑니다
    0
  • 너를갖고싶어♥︎ 프로필 사진
    너를갖고싶어♥︎ Level 33   +5 신고 21:19:18 보고 갑니다
    0
  • 기본 프로필 사진
    새로운 건빵 Level 34   +5 신고 21:21:32 보고갑니다.
    0
  • 아벤타도르GT 프로필 사진
    아벤타도르GT Level 39   +5 신고 21:29:43 정보 잘 보구 갑니다
    0
  • 기본 프로필 사진
    qwerty9573 Level 49   +5 신고 21:32:24 잘보고갑니다
    0
  • 기본 프로필 사진
    9회말역전홈런 Level 42   +5 신고 21:35:30 멀티모달 벤치마크
    0
  • 기본 프로필 사진
    baroni Level 35   +5 신고 21:50:59 잘 보고 가요
    0
  • jekllze 프로필 사진
    jekllze Level 50   +5 신고 21:51:12 보고갑니다
    0
  • 기본 프로필 사진
    해질녘사진 Level 33   +5 신고 21:55:36 보고갑니다
    0
  • 까칠한설이 프로필 사진
    까칠한설이 Level 49   +5 신고 22:09:48 보고갑니다!..
    0
  • 기본 프로필 사진
    민경훈남 Level 35   +5 신고 22:12:19 잘봤습니다
    0
  • 하마뱀 프로필 사진
    하마뱀 Level 34   +5 신고 22:14:39 잘보고갑니더
    0
  • EIEF 프로필 사진
    EIEF Level 39   +5 신고 22:20:29 보고갑니다.
    0
  • 펭수귀여워 프로필 사진
    펭수귀여워 Level 40   +5 신고 22:33:01 잘보고갑니다ㅎ
    0
  • 기본 프로필 사진
    대길운 Level 34   +5 신고 22:42:22 보고갑니다 ㅋ
    0
  • 기본 프로필 사진
    서머너즈워리어 Level 31   +5 신고 22:44:32 보고갑니다
    0
  • 기본 프로필 사진
    일루시에이트 Level 31   +5 신고 22:53:28 잘보앗습니다
    0
  • 기본 프로필 사진
    전기폰트 Level 43   +5 신고 22:56:28 보고갑니다!!!
    0
  • 향긋페퍼민트 프로필 사진
    향긋페퍼민트 Level 43   +5 신고 23:08:30 잘 보고 갑니다ㅋㅋ
    0
  • 갤럭시s3 프로필 사진
    갤럭시s3 Level 39   +5 신고 23:18:18 벤치마크 5종 공개
    0
  • 기본 프로필 사진
    정마나 Level 34   +5 신고 23:28:01 잘보고갑니다 ~
    0
새로고침   리플 페이지 이동  1 2  

리플쓰기

닉네임
이모티콘 아이콘 이모티콘
비밀리플로 남기기

star즐겨찾기

  • 즐겨찾기 없음

link추천 퀵 링크

  • 1 번째 퀵링크 원스휴먼
  • 2 번째 퀵링크 냥코대전쟁
  • 3 번째 퀵링크 페이트 그랜드 오더
  • 4 번째 퀵링크 원피스 트레저 크루즈
  • 5 번째 퀵링크 점프 어셈블
  • 6 번째 퀵링크 우마무스메 PRETTY DERBY
  • 7 번째 퀵링크 리니지2 레볼루션

redeem헝앱 경품

헝앱 경품

구글 플레이 기프트카드 5,000원 (추첨)
100밥알

헝앱 경품

문화상품권 5000원 (추첨)
100밥알

헝앱 경품

구글 플레이 기프트카드 15,000원 (추첨)
100밥알

헝앱 경품

문화상품권 10000원 (추첨)
100밥알

shopping_cart헝앱 쇼핑

헝앱 쇼핑

문화상품권 5,000원
5,500밥알

헝앱 쇼핑

구글 플레이 기프트카드 30,000원
33,000밥알

헝앱 쇼핑

구글 플레이 기프트카드 5,000원
5,500밥알

헝앱 쇼핑

구글 플레이 기프트카드 10,000원
11,000밥알