• ZDNet USA
  • ZDNet China
  • ZDNet Japan
  • English
  • 지디넷 웨비나
뉴스
  • 최신뉴스
  • 방송/통신
  • 컴퓨팅
  • 홈&모바일
  • 인터넷
  • 반도체/디스플레이
  • 카테크
  • 헬스케어
  • 게임
  • 중기&스타트업
  • 유통
  • 금융
  • 과학
  • 디지털경제
  • 취업/HR/교육
  • 생활/문화
  • 인사•부음
  • 글로벌뉴스
  • AI의 눈
ZDPick
반도체
인공지능
IT'sight
칼럼•연재
포토•영상

ZDNet 검색 페이지

'옵트에이아이'통합검색 결과 입니다. (2건)

  • 태그
    • 제목
    • 제목 + 내용
    • 작성자
    • 태그
  • 기간
    • 3개월
    • 1년
    • 1년 이전

LGU+, AI 토큰 처리량 4배 높였다...GPU·전력 효율화

LG유플러스가 같은 GPU에서 AI가 처리할 수 있는 토큰량을 최대 4배까지 높이는 기술을 개발했다. AI 서비스 확대로 GPU와 전력 비용이 늘어나는 가운데 모델 성능을 유지하면서 인프라 운영비를 줄이는 기술 확보에 나선다. LG유플러스는 AI 모델 최적화 전문기업 옵트에이아이와 '토큰 최적화' 기술을 공동 연구한다고 2일 밝혔다. 토큰은 AI가 질문을 이해하고 답변을 만드는 과정에서 처리하는 데이터의 기본 단위다. 양사는 AI 모델의 연산 구조를 실제 서비스 환경에 맞게 개선해 동일한 GPU에서 처리할 수 있는 토큰량을 기존 대비 최대 4배 높이는 초기 성과를 확보했다. 앞으로 같은 GPU 자원으로 더 많은 이용자 요청을 처리하는 데 초점을 맞춰 기술을 고도화한다. LG유플러스는 실제 AI 서비스 환경에서 기술을 검증하고 적용하는 역할을 맡는다. 옵트에이아이는 모델 경량화와 연산 효율을 높이는 기술 개발을 담당한다. GPU와 전력 사용량을 낮추면서 AI 응답 속도와 서비스 품질을 유지하는 것이 목표다. 양사는 앞서 온디바이스 AI 분야에서도 협력했다. '엑사원(EXAONE)' 기반 소형언어모델(sLM)을 스마트폰의 AI 전용 반도체인 NPU에서 구동하도록 최적화해 기존 중앙처리장치(CPU) 방식과 같은 수준의 성능을 유지하면서 전력 소모를 78%, 모델 크기를 82% 줄였다. 공동 연구 범위는 스마트폰에서 서버 GPU 환경으로 넓어진다. 양사는 지난 1일 'Efficient AI 테크 세미나'를 열고 퓨리오사AI, 베슬에이아이, 한국전자기술연구원(KETI), 한양대학교 등과 AI 모델 최적화와 AI 반도체, 서비스 적용 사례를 공유했다. LG유플러스는 공동 연구를 통해 확보한 기술을 자사 AI 서비스와 대규모 AI 인프라에 단계적으로 적용할 계획이다. 이상엽 LG유플러스 최고기술책임자는 “AI 경쟁력은 단순히 성능을 높이는 것을 넘어 같은 자원으로 얼마나 많은 토큰을 효율적으로 처리할 수 있느냐에 달려 있다”며 “옵트에이아이를 비롯한 다양한 파트너들과 협력해 토큰 최적화 기술 연구를 확대하고 실제 서비스에 적용할 수 있는 성과를 만들어 나가겠다”고 말했다. 이재호 옵트에이아이 대표는 “생성형 AI 시대에는 높은 성능만큼이나 운영 효율을 확보하는 것이 중요해지고 있다”며 “LG유플러스와 실제 서비스 환경에서 검증 가능한 AI 최적화 기술을 고도화하겠다”고 말했다.

2026.10.02 12:28박수형 기자

LGU+, '엑사원 3.5' 기반 온디바이스 sLM 개발

LG유플러스가 LG AI연구원, 옵트에이아이와 손잡고 대규모 언어 모델(LLM) '엑사원 3.5' 기반 온디바이스 소형 언어 모델(sLM)을 개발했다고 25일 밝혔다. 이 모델은 AI 통화 앱 '익시오'에 적용해 서비스를 고도화할 방침이다. 이번 온디바이스 sLM 개발은 LG AI연구원이 지난해 12월 선보인 '엑사원 3.5 2.4B' 모델을 기반으로 이뤄졌다. LG유플러스와 LG AI연구원, 온디바이스 AI 솔루션 업체인 옵트에이아이는 약 6개월에 걸친 연구를 통해 개발에 성공했다. AI 모델을 경량화하는 '온디바이스' 기술은 AI 서비스 확산 및 보안성 향상에 필수적이다. 네트워크와 서버를 거쳐야 구동되는 LLM과 달리, 온디바이스 sLM은 이용자의 스마트폰 내에서 바로 서비스를 이용할 수 있어 보안성이 강화된다. 또한 스마트폰 내 신경망처리장치(NPU)를 통해 답변을 제공하는 만큼 빠른 응답이 가능하고, 다양한 단말에서 사용할 수 있다는 장점이 있다. LG유플러스는 새로 개발한 sLM을 통해 AI 에이전트 '익시오'에 적용해 서비스를 고도화할 계획이다. ▲한 줄 요약 ▲상세 요약 ▲키워드 추출 ▲AI Task 제안 등 기능을 오는 10월 베타 테스트를 통해 안정성 및 품질 검증을 완료하고, 이르면 내년 상반기 상용화에 나설 계획이다. 엑사원 기반 온디바이스 sLM은 퀄컴의 '스냅드래곤8' 칩셋 기반 스마트폰에 탑재된다. 내년에는 iOS 운영체제가 적용된 스마트폰까지 적용 범위를 확대할 예정이다. 나아가 LG유플러스와 LG AI연구원, 옵트에이아이는 지속적인 온디바이스 AI 기술 개발을 통해 지난 7월 출시된 '엑사원 4.0'도 온디바이스 sLM으로 구현할 방침이다. 이를 통해 온디바이스 sLM 기반의 익시오가 제공하는 서비스도 개인별 맞춤형으로 발전시킨다는 전략이다. 송대원 LG유플러스 기술개발그룹장은 “온디바이스 AI 기술 고도화를 지속해 초개인화된 온디바이스 에이전트를 선보이며 시장 내 선도 사업자로서의 입지를 한층 더 강화하고 차별화된 사용자 경험을 제공할 것”이라고 말했다.

2025.09.25 09:53진성우 기자

  Prev 1 Next  

지금 뜨는 기사

이시각 헤드라인

"사막에 지어야 할지도"…데이터센터 전략 다시 짜는 美 AI 기업들

TSMC, 3D D램 진출설에 "핵심 파운드리 사업 집중" 부인

[현장] 기록보다 다함께 완주…넥슨의 특별한 달리기

매디슨 황 방한 취소…'엔비디아 AI 데이'는 예정대로

ZDNet Power Center

Connect with us

ZDNET Korea is operated by Money Today Group under license from Ziff Davis. Global family site >>    CNET.com | ZDNet.com
  • 회사소개
  • 광고문의
  • DB마케팅문의
  • 제휴문의
  • 개인정보취급방침
  • 이용약관
  • 청소년 보호정책
  • 회사명 : (주)메가뉴스
  • 제호 : 지디넷코리아
  • 등록번호 : 서울아00665
  • 등록연월일 : 2008년 9월 23일
  • 사업자 등록번호 : 220-8-44355
  • 주호 : 서울시 마포구 양화로111 지은빌딩 3층
  • 대표전화 : (02)330-0100
  • 발행인 : 김경묵
  • 편집인 : 김태진
  • 개인정보관리 책임자·청소년보호책입자 : 김익현
  • COPYRIGHT © ZDNETKOREA ALL RIGHTS RESERVED.