KT, 국산 NPU·AI 모델 결합한 기업용 ‘소버린 AI’ 출시

‘KT NPU LLM 스테이션’ 선봬 공공·금융·제조 등 산업 AX 겨냥 KT는 국산 인공지능(AI) 반도체와 국산 대형언어모델(LLM)을 하나의 서버에 통합한 기업용 소버린 AI 어플라이언스를 출시했다고 19일 밝혔다. ‘KT NPU LLM Station’은 국내 AI 반도체 기업 리벨리온의 신경망처리장치(NPU) ‘ATOM-MAX’에 KT의 독자 개발 LLM ‘믿음 K 2.5 Pro’, 운영 응용 프로그램 인터페이스(API) 플랫폼을 탑재한 일체형 제품이다. ATOM-MAX는 추론에 특화된 국산 NPU로, 공인 시험을 통해 동급 그래픽처리장치(GPU) 대비 높은 처리 성능과 전력 효율을 검증받았다. 믿음 K 2.5 Pro는 고난도 추론과 에이전트 활용에 강점을 가진 KT 독자 모델이다. AI 반도체부터 모델, 운영 플랫폼에 이르는 핵심 기술을 국내 기술로 구성해 정부가 추진하는 소버린 AI 정책 방향을 기업 현장에서 바로 구현할 수 있도록 했다. 가장 큰 특징은 보안이다. 이 제품은 고객사 내부에 설치되며 모든 데이터와 AI 연산을 사내에서만 처리한다. 망분리 등 관련 규제와 보안 수준이 높아 해외 생성형 AI를 도입하지 못했던 공공·국방·제약·제조·금융 등 규제 산업의 AI 전환(AX)을 촉진할 것으로 회사 측은 기대하고 있다. 도입 부담도 낮췄다. 서버, AI 모델, 플랫폼이 통합된 완제품형 장치여서 별도 구축 과정 없이 설치 당일부터 사내 문서 기반 질의응답(RAG) 등 AI 기능을 사용할 수 있다. 추론 특화 NPU를 채택해 동급 GPU 서버 대비 전력 효율을 높였으며, 업계 표준 API를 제공해 기업이 기존에 쓰던 AI 서비스의 접속 정보만 바꾸면 코드 수정 없이 호환할 수 있다. KT는 향후 회의록 작성, 코딩 지원, 업무 자동화 에이전트 ‘K-Claw’(가칭) 등 KT가 개발한 AI 에이전트를 순차 탑재하고, 에이전트 전문 개발사와 협력해 고객 맞춤형 구축 사업으로 확장할 계획이다. 나아가 KT NPU LLM 스테이션의 활용 영역을 피지컬 AI를 위한 엣지 데이터센터(Edge DC)로 확대해 저전력·저지연 AI 인프라 구현에도 나설 예정이다.