KT, 초거대 AI '믿음' 론칭... B2B에 특화
KT, 초거대 AI '믿음' 론칭... B2B에 특화
2023.10.31 13:47 by 유선이
사진=KT
사진=KT

 

KT는 31일 서울 서초구 KT 연구개발센터에서 기자설명회를 열고, 초거대 AI ‘믿음(Mi:dm)’의 출시를 발표했다.

출시하는 모델은 총 4종으로, 경량 모델부터 초대형 모델에 이르기까지 기업의규모와 사용 목적에 맞게 완전 맞춤형(Full Fine-Tuning)으로 사용할 수 있도록 했다. 또한 AI 풀스택을 통해 KT클라우드와 함께 믿음의 기업전용 AI 클라우드팜(Mi:dm CloudFarm)을 패키지로 제공해, 별도 개발 및 학습 인프라가 없더라도 누구나 합리적인 비용으로 초거대 AI를 활용한 서비스를 개발할 수 있다.

KT는 초거대 AI를 활용하고 학습하고자 하는 모든 기업에게 믿음의 파운데이션 모델(Foundation Model)을 개방한다. 이를 위해 ‘KT 믿음 스튜디오(KT Mi:dm Studio)’라는 전용 포털을 오픈해 고객에게 편리한 개발 환경을 제공할 예정이다. 여기선 KT 믿음의 파운데이션 모델을 직접 선택, 학습, 서빙 할 수 있는 맞춤형 환경이 구성된다.

파운데이션 모델이란, 방대한 데이터셋으로 학습한 초거대 AI 핵심 기반 모델을 말한다. 오픈 AI사의 자연어 처리 모델 GPT가 대표적이다. 보다 복잡한 기술의 구현이나 시스템의 구축을 위해 기업에서 원하는 형태로 미세조정(Fine-Tuning: 파인 튜닝)을 거쳐 다양한 AI 응용서비스를 만들 수 있다.

초거대 AI를 사용하고 싶지만 수십억에서 수천억에 달하는 파라미터 모델을 직접 만들 여력이 없는 대다수 기업들의 경우, 기존에 공개된 파운데이션 모델을 튜닝해 활용하는 방법이 가능하다. 하지만 데이터 자주권(Sovereign AI) 차원에서 빅테크에 데이터가 종속될 수 있다는 보안 우려가 있고, 무엇보다 기존 상업용 파운데이션 모델은 풀 파인 튜닝(FFT)을 제공하지 못한다는 한계가 있었다.

KT는 이러한 기업고객들의 갈증을 해결하고자 이번에 국내 업계 최초로 조(兆)단위 데이터의 사전 학습을 완료한 자체 파운데이션 모델 믿음을 개방한 것이다. 이를 통해 LLM(거대언어모델)의 B2B 사업화를 가속하고, 궁극적으로 기업들이 원하는 AI 사업 모델과 응용 서비스의 폭발적 확산을 이끌어낸다는 계획이다.

아울러 기존 대비 약 27% 가까운 GPU 학습 비용 절감이 가능한 KT Cloud의 HAC(Hyperscale AI Computing) 서비스, 추론 비용을 기존 대비 50% 절감한 리벨리온의 NPU 인프라 등 ‘AI 풀스택’을 효율적인 AI 개발 환경을 위한 맞춤형 통합 패키지로 함께 제공할 예정이다.

KT는 믿음 출시와 함께 수요 기업들이 사용 신청을 할 수 있도록 초거대 AI 믿음 공식 웹사이트를 31일 오픈했다. 신청 기업들은 전문 컨설팅을 통해 사용 협의를 진행하게 된다.
 
KT 믿음의 또 하나의 장점은 강력한 신뢰 패키지(Reliable Package)를 제공한다는 것이다.

그간 생성형 AI가 산업현장에서 폭넓게 사용되는데 가장 큰 장애물로 여겨진 문제점은 바로 ‘AI의 환각 답변(Hallucination: 이하 할루시네이션)’이었다. KT는 이를 해결하기 위해 검색과 추론, 답변 모든 단계에서 신뢰성을 높일 세 가지 기술을 개발해 믿음에 적용했다.
 
▲다큐먼트 AI(Document AI)는 도식화된 복잡한 문서도 모델이 정확히 이해할 수 있도록 변환하는 기술이다. ▲서치 AI(Search AI)는 목표 도메인과 문서에 최적화된 최신 정보를 찾아내는 딥러닝 기술이다. ▲팩트가드 AI(FactGuard AI)는 원문에 근거한 응답만 생성하도록 강화학습을 적용했다. KT는 이로 인해 생성형 AI의 가장 큰 문제점인 할루시네이션 현상을 일반 생성형 AI 서비스 대비 최대 70% 가까이 줄일 수 있다고 설명했다.

또한 KT가 공개한 ‘믿음’의 4종 모델 중 외부에 완전히 개방하는 70억 파라미터 규모의 경량 모델은 한국어 LLM 평가 리더보드인 ‘Open Ko LLM’에서 최상위를 기록하며 압도적 성능을 입증하기도 했다.

특히 ‘Open Ko-LLM’은 역사 왜곡이나 형태소 오류, 환각, 혐오 표현 등 광범위한 항목을 평가하고 AI가 주어진 조건에 대해 생성해 낸 결과물이 한국어 사용자의 일반 상식에 부합하는지를 평가한다. 여기서 최상위를 기록한 KT 믿음은 신뢰성과 성능 면에서 공식적으로 인정을 받게 된 것이다.

한편 한국지능정보사회진흥원(NIA)이 국내 AI 스타트업 및 고려대 연구진과 함께 만든 ‘Open Ko-LLM’은 누구나 자신이 개발한 한국어 LLM을 등록해 성능을 평가하고 경쟁할 수 있는 공개 플랫폼이다. 이를 통해 다양한 기업과 기관에서 개발한 한국어 LLM 모델들이 성능을 개선하며 한국 초거대 AI 생태계의 기반을 다지고 있다는 평가를 받는다.

 KT는 이번 믿음 출시를 계기로 기업전용 LLM 사업화, 새로운 AI 혁신 사업 발굴 등 우선 B2B 시장에 집중한다. 이후 글로벌, 제조, 금융, 공공, 교육의 5대 영역으로 초거대 AI 사업 영역을 확장하고, 스타트업 개방 생태계를 통해 초거대 AI 기반 비즈니스 혁신에 나선다는 계획이다.

KT는 기업전용 LLM 사업화에 ‘업스테이지’, Math-GPT를 비롯한 교육 영역에선 ‘콴다’와 ‘에누마’, 기업용 업무 개인비서 영역에는 ‘비아이매트릭스’ 등 다양한 AI 스타트업들과 ‘믿음’을 활용한 AI 사업모델을 공동으로 개발하고, 국내 및 글로벌 시장을 공략한다.

한편 KT는 AICC와 지니TV, AI통화비서 등 기존 AI 사업들의 인공지능을 ‘믿음’으로 고도화하고, KT의 무선서비스, IVI, 로봇 등에도 초거대 AI를 적용한 사업화를 계획하고 있다. 기존 서비스가 룰베이스(Rule Based) 모델을 통해 정해진 답변만을 제공하는 한계가 있었지만, 앞으로는 생성형 AI의 창의적 답변에 신뢰성 있는 정보를 더해 제공하게 된 것이다.

아울러 믿음을 적용해 내부 업무 프로세스와 고객서비스도 대폭 개선한다. 실제로 믿음을 시범 적용한 KT 콜센터에선 봇 인식률 5% 개선, 후처리 속도 20% 및 지식 구축 속도 30% 향상 등 다양한 부분에서 성능 개선 효과를 보였다. 앞으로 금융과 통신영역, 지니TV 마케팅, 시니어와 육아상담 등의 영역에서도 믿음을 적용한 업무 프로세스 개선이 진행될 예정이다.

업스테이지 김성훈 대표는 “KT의 모델을 사용해 보니 KT 인프라를 활용한 비용절감과 최적화 측면에서 B2B 확장에 경쟁력이 있음을 경험했다”며, “KT와 함께 기업 전용 LLM시장을 개척하겠다”고 말했다.

콴다를 운영하는 매스프레소의 이용재 대표는 “KT와 함께라면 글로벌 확장에 자신이 있다”며, “매스 지피티(Math-GPT) 구축을 통해 글로벌 교육 생태계를 주도하겠다”고 밝혔다.

KT AI/DX융합사업부문장 송재호 부사장은 “초거대 AI 시장은 세계적 빅테크 기업부터 스타트업까지 참여하며 급격한 디지털 혁신이 진행되고 있다”며, “KT는 차별화된 초거대 AI 모델을 개방하고 대한민국이 디지털 전환을 주도할 수 있도록 모든 역량을 집중하겠다”고 말했다.
 

필자소개
유선이

안녕하세요. 유선이 기자입니다. 많이 듣고, 열심히 쓰겠습니다.


The First 추천 콘텐츠 더보기
  • ‘성장의 상징, 상장’…스타트업들의 도전사는 계속된다
    ‘성장의 상징, 상장’…스타트업들의 도전사는 계속된다

    자본과 인력, 인지도 부족으로 애를 먹는 스타트업에게 기업공개는 가장 확실한 대안이다. 단숨에 대규모 자본과 주목도를 얻을 수 있기 때문이다. 거래 파트너와 고객은 물론, 내부 이...

  • “24주 연속 1위 브랜드의 저력으로”…‘나르카’ 운영사 ‘언커먼홈’, 매쉬업벤처스 등으로부터 후속 투자 유치
    “24주 연속 1위 브랜드의 저력으로”…‘나르카’ 운영사 ‘언커먼홈’, 매쉬업벤처스 등으로부터 후속 투자 유치

    이제 헤어 케어도 브랜딩이다!

  • “최근 가장 눈에 띄는 창업팀은?”…유망 초기 스타트업 뽑는 ‘혁신의 숲 어워즈’ 막 올랐다
    “최근 가장 눈에 띄는 창업팀은?”…유망 초기 스타트업 뽑는 ‘혁신의 숲 어워즈’ 막 올랐다

    현시점에서 가장 기대되는 스타트업 30개 사는 어디일까?

  • “Only for you”…대세는 초개인화 서비스
    “Only for you”…대세는 초개인화 서비스

    초개인화의 기치를 내건 스타트업들이 존재감이 점점 커지고 있다.

  • 타 산업과 연계, 핵심 기술 접목…“관광에 새로운 가치를 부여하라”
    타 산업과 연계, 핵심 기술 접목…“관광에 새로운 가치를 부여하라”

    '관광 액셀러레이팅 프로그램', 틈새에 대한 혁신적인 시도 돋보였다!

  • “생산성, 효율성 쑥쑥 올리는 솔루션”…매쉬업벤처스, 스타트업 ‘마일 코퍼레이션’에 초기 투자
    “생산성, 효율성 쑥쑥 올리는 솔루션”…매쉬업벤처스, 스타트업 ‘마일 코퍼레이션’에 초기 투자

    기업의 공간, 자산 관리를 디지털 전환시킬 창업팀!

  • “당신에겐 더 큰 무대가 필요하다”…스타트업의 해외진출을 지원하는 스타트업
    “당신에겐 더 큰 무대가 필요하다”…스타트업의 해외진출을 지원하는 스타트업

    스타트업의 해외 진출을 지원하는 스타트업의 등장!

  • “국내 기업의 글로벌 성장 발판 마련”…한국액셀러레이터협회, 뉴저지 진출 전략 웨비나 개최
    “국내 기업의 글로벌 성장 발판 마련”…한국액셀러레이터협회, 뉴저지 진출 전략 웨비나 개최

    국내 유망 스타트업의 미국 진출, 맞춤형으로 지원한다!