와이즈넛, 텍스트 데이터 요약을 위한 AI 학습데이터 구축 사업 선정 | |||||
---|---|---|---|---|---|
등록일 | 2021-08-10 | 조회수 | 7489 | 이름 | 홍보팀 |
▲ 와이즈넛 주관의 ‘요약 텍스트 데이터 과제’ 구성도
- 기존 단순 추출 요약을 넘어 새로운 요약문 생성 등 정확도 높은 요약 모델 구축 예정 - AI Hub에 요약 모델 및 학습용 데이터 오픈하여 누구나 활용 가능 인공지능(AI) 및 빅데이터 활용, 플랫폼 및 모바일 기술 확산 등으로 각종 문서, 기사를 통한 방대한 양의 텍스트 데이터가 기하급수적으로 늘고 있다. 이에 따라, 문서 내용을 쉽게 이해할 수 있는 자동 요약 기술이 본격 요구되면서 텍스트 요약 분야가 새로운 비즈니스 승부처로 자리매김하고 있다. 이러한 상황 속, 인공지능 챗봇 및 빅데이터SW 전문기업 와이즈넛(대표 강용성)은 과학기술정보통신부가 주관하고 한국지능정보사회진흥원(NIA)이 지원하는 2021년 인공지능 학습용 데이터 구축 사업에서 ‘요약 텍스트 데이터’ 과제의 주관기관으로 선정되었다고 9일 밝혔다.
와이즈넛은 유클리드소프트, 딥네츄럴, 포티투마루와 함께 컨소시엄을 구축해 텍스트 요약을 위한 인공지능 학습데이터 구축 사업을 진행한다. 총 사업비는 42억 5000만원 규모다.
금년 내 완료 예정인 본 과제는 뉴스, 보도자료, 회의록과 방송 다큐멘터리, 드라마, 예능 방송 등 주요 내용을 간결하게 정리∙요약하여, 양질의 학습데이터 확보 및 요약 모델 구축을 목표로 하고 있다.
현재 시장에서 볼 수 있는 문서 요약서비스는 본문에서 중요한 내용을 그대로 가져오는 추출요약기술을 적용한 부분이 대부분이다. 금번 과제에서는 ▲추출 요약을 포함하여, 원문에서 중요한 문장을 하나의 새로운 요약문으로 만드는 ▲생성 요약을 위한 데이터셋을 구축하고 실제 모델을 구축한다.
와이즈넛은 지난 20여년간 자연어 이해 및 처리 기술을 자체 개발하며 보유해 온 한국어 기반 BART, T5 등 Transformer기반의 최신 사전학습 언어모델을 토대로 요약 모델을 개발할 예정이다.
또한, 요약 데이터의 다양성 확보를 위해 중앙일보의 뉴스데이터와 KBS의 드라마, 시사교양, 예능, 다큐멘터리 등의 데이터를 활용할 예정이다. 그간 저작권 이슈로 활용할 수 없었던 방송 대본 및 뉴스 데이터를 확보하여 양질의 학습데이터로 가공하고, 이를 기반으로 요약 모델을 구축하게 되는 것이다.
이러한 일련의 과정을 통해 최종적으로 구축된 학습데이터와 요약 모델은 모두 AI Hub를 통해 공개되며, 관련 분야 전문가 및 일반인 누구나 활용 가능하다. 각 비즈니스 활용 목적에 맞는 양질의 요약 데이터를 누구나 쉽게 확보하고 활용할 수 있어 국내 중소∙벤처기업의 시간 및 비용적 어려움을 최소화 할 것으로 기대된다.
강용성 와이즈넛 대표는 “이번 요약 텍스트 데이터 기술을 통해 양질의 학습데이터를 확보하고, 이를 공공 기술 및 데이터로 개방하는 과정에서 향후 AI 요약 기술 분야의 자생적 생태계를 조성하는 마중물이 될 것으로 기대한다”며 “와이즈넛은 인공지능 학습용 데이터 마련을 통해 빅데이터 산업 활성화에 기여할 수 있도록 지속 노력할 것”이라고 말했다. |
WISE iChat