-
업스테이지, 한국어 AI 모델 평가판 ‘클루 리더보드’ 공개
[한경잡앤조이=강홍민 기자] AI 전문 스타트업 업스테이지가 한국어 AI 모델을 평가받을 수 있는 클루(KLUE) 리더보드를 공식 오픈한다. 클루는 업스테이지가 한국어 자연어 처리 관련 산학계의 전문가들과 함께 7개월에 걸쳐 개발한 최초의 한국어 자연어 이해 평가 관련한 공개 데이터셋이다. 그동안 자연어 이해 연구의 기반이 되는 데이터셋과 리더보드는 영어 기반으로 이루어져 있고, 이용 제약이 많아 연구 진행이 쉽지 않았다. AI의 한국어 이해 능력을 평가할 수 있는 클루는 재배포, 재가공, 영리적 활용이 가능해 한국어 자연어 처리 분야의 발전을 이끌 것으로 기대되고 있다.업스테이지가 공개한 클루 리더보드는 데이터셋을 다운받고 테스트하고 싶은 AI 모델을 학습시킨 후 리더보드에 제출하면 모델의 성능 수준을 종합적인 점수로 평가받을 수 있다. 평가 항목은 8가지 부문(△문장 주제 분류 △문장 유사도 비교 △자연어 추론 △개체명 인식 △관계 추출 △형태소 및 의존 구문 분석 △기계 독해 이해 △대화 상태 추적)으로 구분했다. AI 모델 개발자는 자신이 만든 모델이 한국어의 정확한 이해와 추론 능력을 갖추고 있는지 객관적인 지표로 평가받게 된다. 특히 공개 토론방을 중심으로 참여자 간 정보와 의견 교환이 가능해 AI 언어 모델을 업그레이드해 나갈 수 있다. 김성훈 업스테이지 대표는 “클루 리더보드 오픈으로 다양한 한국어 AI 모델의 평가 및 연구를 위한 활발한 교류의 장이 펼쳐지길 기대한다”며 “앞으로도 업스테이지만의 독보적인 기술력을 바탕으로 한국어 AI 연구 생태계를 넓히고, 국내 AI 산업 발전에 보탬이 되기 위해 힘쓸 계획”이라고 말
2021.08.02 17:34:28
-
업스테이지,아이스크림에듀와 AI 학습 기술 고도화 위해 손 잡았다
[한경잡앤조이=강홍민 기자] 전세계 인공지능 경진대회 캐글(Kaggle) 1위 수상 등 최고의 기술력을 인정받고 있는 AI 전문 스타트업 업스테이지가 에듀테크 기업 아이스크림에듀와 교육 AI 서비스 고도화를 위해 손을 잡는다.업스테이지는 9일, 서울 삼성동 아이스크림에듀 본사에서 열린 착수보고회를 시작으로 고도의 학습 역량 진단 모델(교과 지식 추적 AI모델)을 제공할 예정이다. 해당 모델은 학습자의 다양한 데이터를 AI로 분석해 모델링한 후 이를 토대로 개인에 맞춘 학습 처방을 제공하는 것을 목표로 한다. 이를 통해 학생 개인별 학습 단계에서 어려움을 겪고 있는 원인을 진단하고, 그에 맞는 학습 처방까지 제시해 자기 주도 학습 역량이 성장할 수 있도록 돕는다.이번 업무 협업은 코로나 19 장기화로 원격 교육에 대한 필요성이 높아진 가운데 업스테이지의 비전인 ‘AI 기술로 세상을 이롭게 한다(Making AI beneficial)’를 실천하고자 학생 교육 시스템에 우선 적용했다고 회사 측은 설명했다. 아이스크림에듀 측이 맞춤형 교육 추천 서비스를 통해 좀 더 집중적으로 학생들과 정서적 코칭을 진행할 수 있도록 업스테이지가 AI 기술력 강화를 도와줄 계획이다.업스테이지는 아이스크림에듀와의 업무 협업을 통해 교육산업의 AI 고도화에 앞장설 뿐만 아니라 금융 등 다양한 분야로 빠르게 확대해 누구나 쉽게 쓸 수 있는 AI 기술 개발과 적용을 선도해 나갈 예정이다. 업스테이지는 네이버 뿐만 아니라 카카오, 엔비디아, 이베이 등 글로벌 IT 기업에서 실제 AI 서비스를 운영해 본 경험이 있는 전문가들로 구성돼 있다. 특히 다수의 컴퓨터 비전, 자연어처리, 추천시스템 전문가를 보유해 관련 분야에
2021.07.13 13:19:26
-
스타트업 업스테이지, 한국어 AI모델 평가 시스템 'KLUE' 24일 공개···자연어 추론 등 8개 종류 데이터셋
[한경잡앤조이=강홍민 기자] 기업의 AI(인공지능) 트랜스포메이션을 돕는 스타트업 업스테이지가 KAIST, NYU, 네이버, 구글 등 국내 10개 기관과 함께 한국어 기반 AI모델의 공정한 평가를 위한 ‘KLUE(한국어 자연어 이해 평가 데이터셋)’를 구축해 공개한다. KLUE는 한국어 언어모델의 공정한 평가를 위한 목적으로 8개 종류(▲뉴스 헤드라인 분류 ▲문장 유사도 비교 ▲자연어 추론 ▲개체명 인식 ▲관계 추출 ▲형...
2021.05.17 16:53:30
