 |
브레이크뉴스 정민우 기자= KT가 31일 서울 서초구 KT 연구개발센터에서 기자설명회를 열고, 초거대 AI ‘믿음(Mi:dm)’의 출시를 발표했다.
출시하는 모델은 총 4종으로, 경량 모델부터 초대형 모델에 이르기까지 기업의규모와 사용 목적에 맞게 완전 맞춤형(Full Fine-Tuning)으로 사용할 수 있도록 했다.
또한, AI 풀스택을 통해 KT클라우드와 함께 믿음의 기업전용 AI 클라우드팜(Mi:dm CloudFarm)을 패키지로 제공, 별도 개발 및 학습 인프라가 없더라도 누구나 합리적인 비용으로 초거대 AI를 활용한 서비스를 개발할 수 있다.
KT는 초거대 AI를 활용하고 학습하고자 하는 모든 기업에게 믿음의 파운데이션 모델(Foundation Model)을 개방한다. 이를 위해 ‘KT 믿음 스튜디오(KT Mi:dm Studio)’라는 전용 포털을 오픈해 고객에게 편리한 개발 환경을 제공할 예정이다. 여기에서는 KT 믿음의 파운데이션 모델을 직접 선택, 학습, 서빙 할 수 있는 맞춤형 환경이 구성된다.
파운데이션 모델이란 방대한 데이터셋으로 학습한 초거대 AI 핵심 기반 모델을 말한다. 오픈 AI사의 자연어 처리 모델 GPT가 대표적이다. 보다 복잡한 기술의 구현이나 시스템의 구축을 위해 기업에서 원하는 형태로 미세조정(Fine-Tuning: 파인 튜닝)을 거쳐 다양한 AI 응용서비스를 만들 수 있다.
초거대 AI를 사용하고 싶지만 수십억에서 수천억에 달하는 파라미터 모델을 직접 만들 여력이 없는 대다수 기업들의 경우, 기존에 공개된 파운데이션 모델을 튜닝해 활용하는 방법이 가능하다.
하지만, 데이터 자주권(Sovereign AI) 차원에서 빅테크에 데이터가 종속될 수 있다는 보안 우려가 있고, 무엇보다 기존 상업용 파운데이션 모델은 풀 파인 튜닝(FFT)을 제공하지 못한다는 한계가 있었다.
KT는 이러한 기업고객들의 갈증을 해결하고자 이번에 국내 업계 최초로 조(兆)단위 데이터의 사전 학습을 완료한 자체 파운데이션 모델 믿음을 개방한 것이다. 이를 통해 LLM(거대언어모델)의 B2B 사업화를 가속하고, 궁극적으로 기업들이 원하는 AI 사업 모델과 응용 서비스의 폭발적 확산을 이끌어낸다는 계획이다.
아울러 기존 대비 약 27% 가까운 GPU 학습 비용 절감이 가능한 KT Cloud의 HAC(Hyperscale AI Computing) 서비스, 추론 비용을 기존 대비 50% 절감한 리벨리온의 NPU 인프라 등 ‘AI 풀스택’을 효율적인 AI 개발 환경을 위한 맞춤형 통합 패키지로 함께 제공할 예정이다.
KT는 믿음 출시와 함께 수요 기업들이 사용 신청을 할 수 있도록 초거대 AI 믿음 공식 웹사이트를 31일 오픈했다. 신청 기업들은 전문 컨설팅을 통해 사용 협의를 진행하게 된다.
KT 믿음의 또 하나의 장점은 강력한 신뢰 패키지(Reliable Package)를 제공한다는 것이다.
그동안 생성형 AI가 산업현장에서 폭넓게 사용되는데 가장 큰 장애물로 여겨진 문제점은 바로 ‘AI의 환각 답변(Hallucination)’이었다. KT는 이를 해결하기 위해 검색과 추론, 답변 모든 단계에서 신뢰성을 높일 세 가지 기술을 개발해 믿음에 적용했다.
p다큐먼트 AI(Document AI)는 도식화된 복잡한 문서도 모델이 정확히 이해할 수 있도록 변환하는 기술이다. p서치 AI(Search AI)는 목표 도메인과 문서에 최적화된 최신 정보를 찾아내는 딥러닝 기술이다. p팩트가드 AI(FactGuard AI)는 원문에 근거한 응답만 생성하도록 강화학습을 적용했다. KT는 이로 인해 생성형 AI의 가장 큰 문제점인 할루시네이션 현상을 일반 생성형 AI 서비스 대비 최대 70% 가까이 줄일 수 있다고 설명했다.
또한, KT가 공개한 ‘믿음’의 4종 모델 중 외부에 완전히 개방하는 70억 파라미터 규모의 경량 모델은 한국어 LLM 평가 리더보드인 ‘Open Ko LLM’에서 최상위를 기록하며 압도적 성능을 입증하기도 했다.
특히, ‘Open Ko-LLM’은 역사 왜곡이나 형태소 오류, 환각, 혐오 표현 등 광범위한 항목을 평가하고 AI가 주어진 조건에 대해 생성해 낸 결과물이 한국어 사용자의 일반 상식에 부합하는지를 평가한다. 여기서 최상위를 기록한 KT 믿음은 신뢰성과 성능 면에서 공식적으로 인정을 받게 된 것이다.
KT는 이번 믿음 출시를 계기로 기업전용 LLM 사업화, 새로운 AI 혁신 사업 발굴 등 우선 B2B 시장에 집중한다. 이후 글로벌, 제조, 금융, 공공, 교육의 5대 영역으로 초거대 AI 사업 영역을 확장하고, 스타트업 개방 생태계를 통해 초거대 AI 기반 비즈니스 혁신에 나선다는 계획이다.
KT는 기업전용 LLM 사업화에 ‘업스테이지’, Math-GPT를 비롯한 교육 영역에선 ‘콴다’와 ‘에누마’, 기업용 업무 개인비서 영역에는 ‘비아이매트릭스’ 등 다양한 AI 스타트업들과 ‘믿음’을 활용한 AI 사업모델을 공동으로 개발하고, 국내 및 글로벌 시장을 공략할 예정이다.
실제, 출시 이전부터 금융권, 지자체, 기업솔루션 등 100개 이상의 기업과 기관에서 믿음을 활용하기 위해 KT와 사전에 논의를 진행 중이며, 이날 설명회에선 KT가 기업은행에 믿음을 적용해 만든 신뢰도 높은 전문 상품지식 제공 서비스를 선보이기도 했다.
특히, 지난 22일에는 태국 자스민 그룹과 함께 국산 초거대 AI 믿음을 활용한 태국어 대형언어모델 구축 및 동남아 공동 사업화 협력 추진을 밝히며 글로벌 시장 확장 가능성을 증명했다.
KT는 AICC와 지니TV, AI통화비서 등 기존 AI 사업들의 인공지능을 ‘믿음’으로 고도화하고, KT의 무선서비스, IVI, 로봇 등에도 초거대 AI를 적용한 사업화를 계획하고 있다. 기존 서비스가 룰베이스(Rule Based) 모델을 통해 정해진 답변만을 제공하는 한계가 있었지만, 앞으로는 생성형 AI의 창의적 답변에 신뢰성 있는 정보를 더해 제공하게 된 것이다.
믿음을 적용해 내부 업무 프로세스와 고객서비스도 대폭 개선한다. 실제로 믿음을 시범 적용한 KT 콜센터에선 봇 인식률 5% 개선, 후처리 속도 20% 및 지식 구축 속도 30% 향상 등 다양한 부분에서 성능 개선 효과를 보였다. 앞으로 금융과 통신영역, 지니TV 마케팅, 시니어와 육아상담 등의 영역에서도 믿음을 적용한 업무 프로세스 개선이 진행될 예정이다.
KT AI/DX융합사업부문장 송재호 부사장은 “초거대 AI 시장은 세계적 빅테크 기업부터 스타트업까지 참여하며 급격한 디지털 혁신이 진행되고 있다”며, “KT는 차별화된 초거대 AI 모델을 개방하고 대한민국이 디지털 전환을 주도할 수 있도록 모든 역량을 집중하겠다”고 말했다.
break9874@naver.com
*아래는 위 기사를 '구글 번역'으로 번역한 영문 기사의 [전문]입니다. '구글번역'은 이해도 높이기를 위해 노력하고 있습니다. 영문 번역에 오류가 있을 수 있음을 전제로 합니다.<*The following is [the full text] of the English article translated by 'Google Translate'. 'Google Translate' is working hard to improve understanding. It is assumed that there may be errors in the English translation.>
KT opens super AI ‘trust’…AI B2B business in full swing
Break News Reporter Jeong Min-woo= On the 31st, KT held a press briefing at the KT Research and Development Center in Seocho-gu, Seoul and announced the launch of the mega AI ‘Mi:dm’.
There are a total of four models being released, ranging from lightweight models to extra-large models, allowing for full fine-tuning to suit the size and purpose of use of the company.
In addition, through AI full stack, we provide AI cloud farm (Mi:dm CloudFarm) exclusively for trustworthy companies as a package with KT Cloud, allowing anyone to develop services utilizing super-large AI at a reasonable cost even without separate development and learning infrastructure. there is.
KT opens its Foundation Model of Faith to all companies that want to utilize and learn from super-large AI. To this end, we plan to open a dedicated portal called ‘KT Mi:dm Studio’ to provide a convenient development environment to customers. Here, a customized environment is created where you can directly select, learn, and serve the KT Faith Foundation model.
A foundation model refers to a super-large AI core-based model learned from massive datasets. Open AI's natural language processing model GPT is a representative example. In order to implement more complex technologies or build systems, various AI application services can be created through fine-tuning into the form desired by the company.
For most companies that want to use super-large AI but cannot afford to create their own parameter models worth billions to hundreds of billions, it is possible to tune and utilize existing foundation models.
However, there are security concerns that data may be subordinated to Big Tech in terms of data sovereignty (Sovereign AI), and above all, the existing commercial foundation model has a limitation in that it cannot provide full fine tuning (FFT).
In order to satisfy this thirst of corporate customers, KT has opened its own foundation model, which has completed pre-learning of trillion-level data for the first time in the domestic industry. Through this, the plan is to accelerate the B2B commercialization of LLM (Large Language Model) and ultimately lead to the explosive spread of AI business models and application services desired by companies.
In addition, KT Cloud's HAC (Hyperscale AI Computing) service, which can reduce GPU learning costs by about 27% compared to existing products, and Rebellion's NPU infrastructure, which reduces inference costs by 50% compared to existing products, provide an 'AI full stack' for an efficient AI development environment. It will be provided together as a customized integrated package.
Along with the launch of Faith, KT opened the official website of the mega AI Faith on the 31st so that companies in demand can apply to use it. Applicant companies will negotiate usage through professional consulting.
Another advantage of KT Trust is that it provides a strong Reliable Package.
Until now, the problem that was considered the biggest obstacle to the widespread use of generative AI in industrial settings was ‘AI’s hallucination.’ To solve this problem, KT developed three technologies to increase reliability in all stages of search, reasoning, and answering and applied them to beliefs.
Document AI is a technology that converts even schematic, complex documents so that the model can accurately understand them. Search AI is a deep learning technology that finds the latest information optimized for target domains and documents. pFactGuard AI applied reinforcement learning to generate only responses based on the original text. KT explained that this can reduce the hallucination phenomenon, the biggest problem with generative AI, by up to 70% compared to general generative AI services.
In addition, among the four models of ‘Faith’ released by KT, the lightweight model with 7 billion parameters that is completely open to the outside world ranked highest in ‘Open Ko LLM’, the Korean LLM evaluation leaderboard, proving its overwhelming performance.
In particular, ‘Open Ko-LLM’ evaluates a wide range of items such as historical distortion, morphological errors, hallucinations, and hate expressions, and evaluates whether the results generated by AI for given conditions comply with the general knowledge of Korean users. KT's faith, which ranked highest here, has been officially recognized in terms of reliability and performance.
With the launch of this faith, KT will first focus on the B2B market, including commercializing LLM for companies and discovering new AI innovation businesses. Afterwards, the plan is to expand the ultra-large AI business area into five major areas: global, manufacturing, finance, public, and education, and initiate ultra-large AI-based business innovation through an open startup ecosystem.
KT is 'trusting' with various AI startups such as 'Upstage' in the commercialization of LLM for companies, 'Qanda' and 'Enuma' in the education field including Math-GPT, and 'BIMatrix' in the corporate personal assistant field. We plan to jointly develop an AI business model using , and target domestic and global markets.
In fact, even before the launch, more than 100 companies and institutions, including the financial sector, local governments, and corporate solutions, are in advanced discussions with KT to utilize trust. A knowledge provision service was also introduced.
In particular, on the 22nd, together with Thailand's Jasmine Group, they announced plans to build a large-scale Thai language model using Korea's largest AI trust and promote joint commercialization cooperation in Southeast Asia, proving the possibility of expanding the global market.
KT is planning to upgrade the artificial intelligence of existing AI businesses such as AICC, Genie TV, and AI call assistants to 'trust', and to commercialize KT's wireless services, IVI, robots, etc. by applying ultra-large AI. Although the existing service had the limitation of providing only fixed answers through a rule-based model, in the future, reliable information will be provided in addition to the creative answers of generative AI.
By applying faith, we are also significantly improving internal business processes and customer service. In fact, the KT call center where Faith was applied on a pilot basis showed performance improvement in various areas, including a 5% improvement in bot recognition rate, 20% improvement in post-processing speed, and 30% improvement in knowledge building speed. In the future, work process improvements that apply faith will also be carried out in areas such as finance and communications, Genie TV marketing, and senior and child care counseling.
Jae-ho Song, vice president and head of KT's AI/DX convergence business division, said, “The ultra-large AI market is undergoing rapid digital innovation with participation from global big tech companies to startups.” He added, “KT is opening a differentiated ultra-large AI model and helping Korea “We will focus all our capabilities to lead digital transformation,” he said.
