KT-ETRI-카이스트-한양대, ‘초거대 AI’ 개발 맞손

18일 협약식에 참여한 AI 원팀의 KT, ETRI, KAIST, 한양대학교 관계자들이 온라인으로 진행된 공동 연구협약식을 마치고 기념사진을 촬영하고 있다. (왼쪽 위부터 시계방향으로) KAIST 김기응 교수, KAIST 서민준 교수, 한양대학교 백은옥 교수, 한양대학교 노영균 교수, ETRI 임준호 박사, ETRI 민옥기 본부장, ETRI 이윤근 소장, ETRI 김영길 실장, KT AI 원팀 KT AI/Bigdata기획담당 이홍철 상무, KT 송재호 AI/DX융합사업부문장, KT 최준기 AI/DigData사업본부장, KT 융합기술원 AI Core2담당 장두성 상무, KT 홍경표 융합기술원장, KT 융합기술원 플랫폼연구소 김봉기 소장이다. KT제공

KT(030200) ‘AI 원팀’이 다자간 공동연구를 통해 초거대 AI 모델 개발에 나선다.

초거대 AI란, 대용량의 연산이 가능한 인프라를 바탕으로 대규모 데이터를 학습해 사람처럼 스스로 사고할 수 있도록 설계된 인공지능을 의미한다.

초거대 AI 언어모델은 매우 빠르게 발전하고 있으며, 데이터 정제, 학습 알고리즘, 분산/병렬학습, 경량화, 응용모델 발굴 등 다양한 분야의 연구가 필요하기 때문에 단일 기업이 혼자 추진하기는 어렵다. 학교와 연구기관에서는 AI 연구를 위한 대규모의 GPU 인프라에 접근하는 게 쉽지 않다.

이에 KT AI 원팀에서는 기업의 대규모 투자를 통해 GPU 인프라를 구축하고, 학교와 연구기관은 최신의 연구 동향을 반영한 기술을 제공하는 이상적인 산·학·연 협력 모델을 적용하기로 했다.

KT(대표이사 구현모)는 AI원팀 참여기관인 한국전자통신연구원(ETRI), KAIST, 한양대와 함께 ‘초거대 AI 모델’을 개발하기 위한 공동 연구 협약을 체결했다고 18일 밝혔다.

각 기관에서 자연어 처리 분야를 대표하는 국내 최고의 연구진으로 구성됐으며, KT의 오랜 사업 경험과 풍부한 데이터를 활용해 초거대 AI 모델을 개발하게 된다.

AI 원팀에서는 초거대 AI 모델 확보를 대한민국 AI 경쟁력 확보를 위한 핵심 의제로 설정하고 약 6개월 이상 실무 논의와 협력을 지속해 왔으며, 이번 협약 체결로 기관별 역할을 정의하고 본격적 프로젝트 수행에 나선다는 계획이다.

KT는 다른 참여기관들과 힘을 모아 대규모 GPU 인프라 구축, 데이터 수집/분석, 모델 학습, 응용태스크 적용 등 R&D 및 상용화 관련 업무를 총괄적으로 수행한다.

KAIST는 머신러닝 알고리즘 최적화 및 어플리케이션 파트를 맡게 되며, 한양대는 데이터 정제/필터링 알고리즘 개발, 분산/병렬 알고리즘 및 모델 최적화 분야에서 힘을 보탤 예정이다.

한국전자통신연구원(ETRI)은 대형 모델학습 및 모델개발 분야에 참여하게 된다.

내년 상반기에 초거대 AI 모델 상용화

AI 원팀은 ‘21년 말까지 1차로 초거대 AI의 학습을 완료하고, ’22년 상반기 내 초거대 AI모델을 상용화 한다는 계획이다.

대규모 AI 연산 인프라를 구축하고, 향후 2,000억 파라미터(매개변수) 이상의 모델까지 가능하도록 인프라 규모를 점진적으로 확대할 예정이다.

AI 원팀 연구진은 학습데이터 필터링 강화, 데이터 간 균형 조정 등을 통해 AI의 편향성을 우선 제거하는 한편, 유해 콘텐츠(Toxic Content) 필터링 기술 등 다양한 딥러닝 기반 탐지 기술을 적극 활용해 AI 윤리 이슈도 사전에 차단한다는 계획이다.

과제지향적 횽태로 설계..KT 기가지니 서비스 고도화에 활용

이번에 개발하는 초거대 언어모델은 즉시 상용화가 가능한 ‘과제 지향적(Task-Oriented)’ 형태로 설계된다.

초거대 언어모델을 통해 향상된 STT(음성인식), TTS(음성합성), TA(텍스트 분석), 대화 등 요소기술은 먼저 KT 기가지니와 AICC 서비스 고도화를 위해 활용되며, 나아가 제조/금융/물류/유통 등 AI 원팀 참여기업들의 다양한 사업 분야에 적용할 예정이다.

향후 AI 원팀은 영상/로봇 등의 복합인지, 이미지 기반 해석, 휴머니스틱 AI(인간중심 AI) 등에서 초거대 AI 모델로 영역을 확장해 나간다.

특히 이번 연구로 개발되는 초거대 AI 모델은 ‘AI 1등 대한민국’이라는 AI 원팀의 취지에 따라 국내외 많은 기업들과 학교, 연구기관들이 AI 원팀의 초거대 모델을 활용해 한국어 언어지능에 대한 손쉽게 접근하고, 이를 다양한 산업분야에 활용하도록 지원할 계획이다.

이윤근 ETRI 인공지능연구소장은 “ETRI가 보유한 한국어 AI기술인 엑소브레인 원천기술을 보다 발전시켜 초거대 언어모델 프로젝트에 적용함으로써 한국어처리 분야의 AI기술주권 확보에 기여하겠다”고 밝혔다.

홍경표 KT 융합기술원장은 “이번 프로젝트를 통해 대한민국의 국가 AI 산업 경쟁력 강화에 크게 기여하고, 산업전반의 디지털 트랜스포메이션(Digital Transformation, 디지털 전환)과 고객 라이프스타일 변화를 선도하겠다”고 밝혔다.

지난해 2월 ‘대한민국 AI 1등 국가’를 목표로 출범한 AI 원팀(AI One Team)은 KT를 비롯해 ▲한국전자통신연구원(ETRI) ▲카이스트 ▲한양대 ▲현대중공업그룹 ▲LG전자 ▲LGU+ ▲한국투자증권 ▲동원그룹 ▲우리은행 등 총 10개 산·학·연 기업과 기관이 참여하고 있다.