• ZDNet USA
  • ZDNet China
  • ZDNet Japan
  • English
  • 지디넷 웨비나
뉴스
  • 최신뉴스
  • 방송/통신
  • 컴퓨팅
  • 홈&모바일
  • 인터넷
  • 반도체/디스플레이
  • 카테크
  • 헬스케어
  • 게임
  • 중기&스타트업
  • 유통
  • 금융
  • 과학
  • 디지털경제
  • 취업/HR/교육
  • 생활/문화
  • 인사•부음
  • 글로벌뉴스
인공지능
배터리
양자컴퓨팅
IT'sight
칼럼•연재
포토•영상

ZDNet 검색 페이지

'LLM'통합검색 결과 입니다. (331건)

  • 태그
    • 제목
    • 제목 + 내용
    • 작성자
    • 태그
  • 기간
    • 3개월
    • 1년
    • 1년 이전

딥네츄럴, '랭노드 엔터프라이즈' STK 2024서알린다

딥네츄럴(대표 박상원)이 19일부터 21일까지 서울 삼성동 코엑스에서 열리는 제13회 스마트테크코리아 2024(STK 2024)에 참가해 자사의 최신 랭노트 엔터프라이즈(LangNode Enterprise) 솔루션을 선보인다. 스마트테크코리아는 미래 선도기술 전문 전시회다. 인공지능 기술을 중심으로 상품, 서비스의 제조 생산부터 유통과 물류, 소비의 과정에 적용되는 빅데이터와 클라우드, 로봇, 메타버스 등 최첨단 기술과 솔루션을 집중 조명하며 국내외 많은 참관객과 바이어가 참석한다. 딥네츄럴은 비즈니스 환경에 최적화된 LLMOps(Large Language Model Operations) 솔루션을 제공하는 인공지능 스타트업이다. 고품질 언어 데이터 구축부터 파인튜닝, 양자화를 통한 성능 최적화, 빠르고 효율적인 어플리케이션 개발 및 운영까지, LLM 적용의 전 과정을 지원한다. 올해 2월 MWC 2024에서 처음 선보인 LangNode는 LLM RAG(Retrieval Augmented Generation) 기반 AI 에이전트를 노코드로 개발, 테스트, 배포할 수 있는 솔루션이다. 개발자와 기획자가 함께 협업하며 LLM 기반 에이전트를 제작하고 빠르게 비즈니스에 적용할 수 있어 LLM을 도입하려는 기업에게는 유용할 수 있다. 특히, 이번 전시에서 선보이는 LangNode Enterprise는 데이터 보안이 중요한 은행, 증권사, 공공기관 등의 사내 온프레미스 환경에 설치 가능하다. 기존에 퍼블릭 클라우드 환경에서 이용 가능했던 LangNode를 기업 내 프라이빗 인프라 안에서 이용할 수 있게 됐다는 설명이다. 기존에 운영 중인 쿠버네티스 기반 MLOps 플랫폼에도 간편히 설치해 LLMOps 기능을 강화할 수 있다. 박상원 딥네츄럴 대표는 “이제 LangNode Enterprise를 통해 보안이 철저한 프라이빗 네트워크 환경에서도 LLM을 보다 쉽게 활용할 수 있게 됐다”며 “앞으로 온프레미스 인프라를 운영해야 하는 국내외 금융 기업 및 공공 기관들도 LLM 도입을 통해 혁신을 가속화할 수 있도록 적극 지원하겠다”고 밝혔다.

2024.06.19 17:55백봉삼

KAIST, 챗GPT4.0 정답률보다 32.5% 더 나은 'PlanRAG' 첫 공개

KAIST가 거대언어모델(LLM)을 이용해 챗GPT4.0의 기업 의사결정 정답률을 32.5% 개선한 '플랜래그'(Plan RAG)를 처음 공개했다. 오픈AI의 최신모델인 챗GPT 4.0은 의사결정 구조에서 통상 40~50%의 정답률을 보인다. 이를 30% 이상 개선했다. KAIST는 전산학부 김민수 교수 연구팀이 ▲의사결정 문제 ▲기업 데이터베이스 ▲비즈니스 규칙 집합 등 3 가지를 기반으로 비즈니스 규칙에 부합하는 최적의 의사결정을 내릴 수 있는 '플랜래그(PlanRAG)'을 개발했다고 19일 밝혔다. 김 교수는 엔비디아 GPU 연구센터장과 IBM 알마덴 연구센터 연구원을 지냈다. 지난 2021년부터 KAIST 전산학부 교수로 재직 중이다. 연구팀은 기업 의사결정 문제를 푸는데 있어 GPT-3.5 터보에서 반복적 RAG 기술을 사용하더라도 정답률이 10% 미만이라는데 착안해 대안을 모색했다. 최근 AI분야에서는 LLM이 학습된 내용만으로 답변하는 것 대신, 데이터베이스를 검색해 답변을 생성하는 검색 증강 생성(Retrieval-Augmented Generation; 이하 RAG) 기술이 각광받고 있다. 연구팀은 여기에서 한 단계 더 나아갔다. 반복적 RAG를 이용하기 전에 먼저 어떤 데이터 분석이 필요한지에 대한 거시적 차원의 계획을 먼저 생성했다. 마치 기업의 의사결정권자가 어떤 데이터 분석이 필요한지 먼저 계획을 세우면, 그 계획에 따라 데이터 분석팀이 데이터베이스 솔루션들을 이용해 분석하는 형태와 유사한 구조다. 연구팀은 "다만 이러한 과정을 모두 사람이 아닌 거대언어모델이 수행하도록 한 것이커다란 차이"라며 "'플랜래그' 기술은 계획에 따른 데이터 분석 결과로 적절한 답변을 도출하지 못하면, 다시 계획을 수립하고 데이터 분석을 수행하는 과정을 반복한다"고 설명했다. 김민수 교수는 “지금까지 LLM 기반으로 의사결정 문제를 푼 연구가 없었다"며 "기업 의사결정 성능을 평가할 수 있는 의사결정 질의응답(DQA) 벤치마크를 새롭게 만들었다"고 말했다. 실제 이 벤치마크에서 GPT-4.0을 사용할 때 종래의 반복적 'RAG'의 의사결정 정답률에 비해 '플랜래그'는 최대 32.5%까지 정답률을 개선했다. 김 교수는 "기업 CEO가 '플랜래그'를 실제 활용하기 까지는 1~2년이 더 걸릴 것으로 예상한다"며 "기존 챗GPT 4.0의 의사결정 정답률을 획기적으로 끌어올려 문제의 3분의 2가량을 맞출 수 있다는데 큰 의미를 부여한다"고 덧붙였다. 이 연구에는 KAIST 전산학부 이명화 박사과정과 안선호 석사과정이 공동 제1 저자, 김민수 교수가 교신 저자로 참여했다. 연구 결과는 자연어처리 분야 최고 학회(top conference)인 'NAACL' 에 지난 17일 발표됐다.

2024.06.19 09:14박희범

LG디스플레이, 업계 최초로 자체 '생성형 AI' 도입

LG디스플레이가 기술 및 정보 유출 우려 없이 사내 지식을 고도화할 수 있는 '생성형 AI'를 자체 개발했다. LG디스플레이는 업계 최초로 자체 생성형 AI를 개발해 도입했다고 17일 밝혔다. 문제 검토 및 해결에 길게는 수개월 소요되던 시간을 생성형 AI를 통해 초 단위로 획기적으로 단축해 임직원이 고객가치 창출에 더 많은 시간을 몰입할 수 있게 됐다. LG디스플레이의 생성형 AI는 LG디스플레이에 특화된 지식을 학습해 최적화된 결과물을 도출해 낸다. AI 시스템에 제품 품질과 관련된 질문을 입력하면 축적된 사내 특화 지식을 분석해 최적의 답변을 제시해 준다. 예를 들어 “OO 품질 강화 방법 알려줘”라는 질문을 입력하면 이에 해당하는 데이터를 분석해 즉각 답변해 주는 형식이다. 생성형 AI의 도입으로 임직원들은 업무 전문 지식이 필요할 때 담당자에게 문의하거나 과거 자료를 찾아보지 않고도 손쉽게 문제를 해결할 수 있게 됐다. 생성형 AI를 이용하면 데이터로 자산화된 선배들의 노하우를 수 초 내에 획득할 수 있게 돼 업무 지식의 상향평준화도 가능하다. 업무 효율이 높아진 만큼 임직원이 고객가치 혁신 활동 등 핵심 업무에 더욱 매진할 수 있다. LG디스플레이는 생성형 AI의 핵심이 되는 LLM(대형언어모델)을 사내에 구축해 기술의 외부 유출을 원천 차단했다. 생성형 AI의 등장 이후, 기업의 기술 정보를 외부 AI 시스템에 입력해 민감 데이터가 사외로 유출되는 보안 문제가 꾸준히 제기돼 왔다. 그러나 LG디스플레이의 생성형 AI의 경우, 사내 지식이 외부로 누설되지 않도록 LG디스플레이에 특화된 지식정보를 사내 LLM을 통해 탐색하도록 설계돼 보안 안정성을 확보했다. 자체 생성형 AI 개발을 위해 LG디스플레이와 LG AI연구원, LG CNS이 협업했다. 학습과 분석을 위한 LLM으로 LG AI연구원의 초거대 AI인 '엑사원(EXAONE)'을 활용한다. 사용자의 특정 질문에 맞춰, 사내문서 30만여 건에서 답변을 찾아내는 역할은 LG CNS가 자체 개발한 검색엔진 '키룩(KeyLook)'이 담당한다. LG디스플레이와 LG CNS는 사내 문서 약 91%가 PPT 형식이라는 점에서 PPT 전처리 알고리즘을 개발했다. LG CNS는 키룩이 문자뿐만 아니라 테이블, 도표 등 비정형적 텍스트도 정확히 인식할 수 있도록 키룩에 15개 전처리 알고리즘도 적용했다. LG디스플레이는 임직원들의 사용 내역을 지속 학습시켜 하반기에 더욱 고도화된 생성형 AI를 선보일 예정이다. 올해 안에 검색 영역도 품질과 더불어 특허, 안전, 장비, 구매 등 타 영역까지 확대해 나갈 방침이다. 이병승 LG디스플레이 DX그룹장(상무)은 “독자적인 생성형 AI 도입으로 정보의 외부 유출은 원천 차단하고 임직원 개개인의 업무 역량은 강화할 수 있게 됐다”며 “디지털 트랜스포메이션으로 업무혁신을 가속해 갈 것”이라고 말했다.

2024.06.17 10:00장경윤

'온디바이스AI' 노린 업스테이지, 인텔 고성능 프로세서에 '솔라' 탑재

업스테이지가 개발한 거대언어모델(LLM) 솔라가 인텔 프로세서에 최적화된다. 업스테이지는 솔라의 경량화 버전인 '솔라 미니(Solar Mini)'와 솔라 기반 LLM 문서 작업용 앱 '라이트업(writeUp)'을 '인텔 코어 울트라(Ultra) 프로세서'에 최적화한다고 7일 밝혔다. 이는 최근 화두로 떠오른 '온디바이스 AI'에 대응하기 위해서다. '온디바이스 AI'는 외부 외부 클라우드 연결 없이 기기 자체에서 AI 처리가 가능한 것을 뜻한다. 이에 맞춰 단말에 내장된 칩에 직접 LLM을 설치하는 AI PC는 높은 접근성, 생산성 뿐만 아니라 정보 유출을 원천 차단해 보안성을 극대화하는 분위기다. 업스테이지와 인텔은 앞으로 인텔의 해당 프로세서를 장착한 윈도우 PC 제품군에서 솔라를 온디바이스 AI로 활용할 수 있도록 할 예정이다. 솔라는 업스테이지가 개발한 자체 사전학습 LLM이다. 솔라 미니는 매개변수(파라미터)를 경량화한 모델로, 작지만 강력한 성능으로 다양한 산업, 기업별 맞춤형 파인튜닝(미세조정)뿐만 아니라 온디바이스 AI 등 구축형에 특화됐다. 한국어와 영어, 일본어 등 다양한 언어를 지원한다. 라이트업은 솔라 기반의 문서 작업용 앱이다. 설치형으로 폐쇄망, 오프라인 환경에서도 동작해 솔라 LLM을 활용한 다양한 문서 작업이 가능하다. 문장 생성, 요약뿐만 아니라 문맥에 맞는 문장의 톤까지 다양하게 조절할 수 있는 점이 특징으로, 실시간 다국어 번역 기능까지 지원한다. 또 업스테이지는 이달 4일부터 7일까지 대만 타이베이에서 개최되는 아시아 최대 IT 박람회 '컴퓨텍스(COMPUTEX) 2024', 5일 서울에서 개최된 '인텔 AI 서밋(Intel AI Summit Seoul)'을 통해 인텔 칩셋에서 구동되는 솔라를 시연했다. 김성훈 업스테이지 대표는 "솔라 LLM을 인텔의 고성능 프로세서에 탑재하게 돼 매우 기쁘다"며 "높은 생산성과 보안성을 갖춘 온디바이스 AI에 특화된 솔라를 통해 인텔 기반의 윈도우 PC 사용자들은 생성형 AI 기술을 더욱 쉽고 빠르게 활용할 수 있을 것"이라고 밝혔다.

2024.06.07 10:31장유미

'컴퓨텍스 첫 출전' SK하이닉스, TSMC와 협업 5세대 HBM3E 실물 전시

[타이베이(대만)=권봉석 기자] SK하이닉스가 오는 7일(대만 현지시간)까지 진행되는 컴퓨텍스 타이베이 2024에 참여해 HBM3E, PCI 익스프레스 5.0 NVMe SSD 2종, GDDR7 메모리 등 고성능 메모리 반도체를 공개했다. SK하이닉스는 올해 처음 컴퓨텍스에 참가해 지난 3월 GTC 2024에서 공개한 PCI 익스프레스 5.0 기반 NVMe SSD '플래티넘 P51'과 PC 제조사에 공급될 제품인 'PCB01'을 전시했다. 또 컴퓨텍스 행사장인 난강전람관과 별개의 장소에서 HLDS(히타치-LG 데이터 스토리지)와 협업해 개발한 휴대용 SSD도 선보였다. 플래티넘 P51은 2022년 5월 출시된 PCI 익스프레스 4.0 기반 SSD '플래티넘 P41' 후속 제품이다. PCI 익스프레스 5.0 레인(lane, 데이터 전송 통로) 4개로 최대 속도 읽기 13.5GB/s, 쓰기 11.5GB/s를 구현했다. PCB01은 LLM(거대언어모델) 구동에 특화된 제품이며 최대 속도를 읽기 14GB/s, 쓰기 12GB/s까지 높였다. 두 제품 모두 SK하이닉스가 개발한 238단 3D TLC 낸드 플래시메모리와 SK하이닉스 자체 컨트롤러 칩 '알리스타'(ALISTAR)를 활용한다. 이외 구체적인 제원이나 출시 시기, 가격 등은 미정이다. SK하이닉스 관계자는 "퀄컴 스냅드래곤 X 엘리트·플러스는 아직 PCI 익스프레스 4.0 규격을 적용하고 있어 PCB01은 내년 이후 출시되는 2세대 제품에 적용 가능할 것"이라고 설명했다. LPCAMM은 기존 노트북에 사용되던 메모리 모듈 대비 성능과 용량, 전력 소모를 낮춘 차세대 규격이다. 이번에 전시된 LPCAMM2 모듈은 지난 해 11월 SK 서밋, 올 1월 CES 2024에 전시된 것과 같은 제품이다. 현재 엔비디아와 AMD 등 서버용 AI GPU에 필요한 HBM(고대역폭메모리)는 거의 전량 SK하이닉스가 공급하는 것으로 알려져 있다. SK하이닉스는 이날 대만 TSMC와 협업해 개발한 5세대 HBM인 HBM3E 단품 칩 실물을 전시했다. 개당 용량은 최대 36GB, 적층은 최대 12층까지 가능하며 대역폭은 1.18TB/s로 대용량 연산에 최적화됐다. SK하이닉스는 지난 2월 말 국제고체회로학회(ISSCC) 컨퍼런스에서 HBM3E 기술을 공개하고 3월부터 양산에 들어갔다.

2024.06.07 08:58권봉석

"기업 환경에 LLM 특화"…미스트랄AI, 미세조정 SDK 공개

미스트랄AI가 대규모언어모델(LLM)의 성능을 개선하거나 기업에 특화할 수 있도록 기술 지원을 제공한다. 미스트랄은 5일(현지시간) AI모델 미세 조정을 위한 소프트웨어 개발 키트(SDK)인 미스트랄 파인튠(Mistral-Finetune)을 출시했다. 깃허브를 통해 공개된 미스트랄 파인튠는 미스트랄의 AI 모델을 워크스테이션, 서버 및 소규모 데이터 센터 노드 등 다양한 인프라에 최적화할 수 있도록 지원한다. 공개된 내용에 따르면 해당 SDK는 다중 GPU 설정에 최적화되어 있지만 미스트랄 7B와 같은 소형 모델을 미세 조정하기 위해 엔비디아 A100 또는 H100 GPU 단일 모델로 설정을 변경하는 것도 가능하다. 예를 들어 오픈AI의 챗GPT를 사용한 140만 개의 대화 모음인 울트라챗과 같은 데이터 세트를 미세 조정하는 과정은 8개의 H100 GPU를 활용해 약 30분 만에 완료할 수 있다. 보다 효율적인 AI 개발을 위해 '라 플랫폼'과 같은 유로 개발 서비스와 연계한 작업도 가능하다. 라플랫폼을 활용하면 특정 요구 사항에 맞게 모델을 정의하거나 교육하는 API를 호출해효과적으로 AI를 개발할 수 있다. 미스트랄은 몇 주에 걸쳐 미세 조정 서비스에 새로운 모델을 추가할 예정이라고 밝혔다. 이와 함께 미스트랄은 SDK를 효율적으로 활용할 수 있도록 지원하기 위한 교육 서비스를 함께 제공한다. 교육서비스에는 기업의 자체 데이터를 사용해 미스트랄 AI 모델을 미세조정하는 커리큘럼이 포함돼 보다 효율적이고 전문적으로 AI를 활용할 수 있는 방법을 제시한다. 미스트랄 AI 팀은 "우리는 개발자에게 강력한 개방형 생성 모델을 제공하고 이를 효율적으로 사용할 수 있는 방법을 제공한다"고 강조했다.

2024.06.06 15:00남혁우

인텔 "가우디3, 납기·비용·성능 모두 뛰어난 엔비디아 대체재"

[타이베이(대만)=권봉석 기자] 인텔이 4일(이하 대만 현지시간) 오전 대만 타이베이 난강전시관에서 진행된 기조연설에서 AI 가속기 '가우디3'의 가격 대비 성능을 강조했다. 가우디3는 2022년 5월 출시된 가속기인 가우디2 후속 제품이며 TSMC 5나노급 공정에서 생산된다. 96MB S램과 128GB HBM2e 메모리를 이용해 최대 대역폭 3.7TB/s를 구현했다. 서버용 프로세서와 PCI 익스프레스 5.0 규격으로 연결되며 200Gbps 이더넷으로 서로 연결된다. 전세계 10개 이상의 글로벌 공급업체가 올 3분기부터 가우디3 기반 솔루션을 공급 계획중이다. ■ "네이버도 가우디 선택했다...TCO·TTM에서 엔비디아 대비 우위" 이날 팻 겔싱어 인텔 CEO는 "현재 클라우드 이용 현황을 보면 전체 워크로드 중 60%가 클라우드에서 실행되며 생성된 데이터 중 80%가 여전히 활용되지 않는 상황"이라고 설명했다. 이어 "LLM(거대언어모델)에 기업이나 기관의 데이터를 더한 검색증강생성(RAG)은 잠자는 데이터를 활용할 수 있는 기회를 줄 것이다. 6월부터 내년 1분기에 걸쳐 출시될 제온6 프로세서와 가우디 가속기는 이를 바꿀 수 있다"고 설명했다. 현재 AI용 GPU 시장은 엔비디아가 독식하고 있다. 팻 겔싱어 CEO는 "기업들은 대안과 개방형 구조를 원한다. 또 제품/서비스 출시 시간(TTM)을 단축하고 총소유비용을 낮추길 희망하고 있다"고 지적했다. 이어 "한국 네이버클라우드가 가우디를 쓰고 있다. 또 오픈소스 리눅스 재단과 기업용 AI 플랫폼 구축에 협업하고 있으며 제온6와 가우디가 기업 AI 워크로드에 도움을 줄 것"이라고 강조했다. ■ "가우디3, 덜 쓰고 더 얻을 수 있는 '가성비' 가속기" 팻 겔싱어 CEO는 올 3분기부터 공급될 차세대 가속기 가우디3에 대해 "같은 규모 클러스터 구성시 엔비디아 H100에서 추론 성능은 2배이며 H200 GPU 대비 경쟁력을 갖고 있다"고 설명했다. 인텔 자체 성능비교에 따르면 가우디3 8천192개 클러스터 구성시 같은 규모 엔비디아 H100 클러스터 대비 학습 시간은 40% 단축할 수 있다. 또 700억 개 매개변수로 구성된 LLM인 메타 라마2(Llama2) 구동시 가우디3 64개 클러스터는 엔비디아 H100 대비 최대 15% 빠른 학습 처리량을 제공할 예정이다. 팻 겔싱어 CEO는 "가우디3는 '덜 쓰고 더 얻을 수' 있는 AI 가속기"라며 가우디3의 개방성도 강조했다. 그는 "가우디3는 업계 표준 인터페이스인 이더넷으로 작동하며 파이토치 등 오픈소스 AI 프레임워크에 최적화됐고 수십만 개의 AI 모델을 지원한다"고 말했다. ■ 가우디3 솔루션 공급 업체 10개 이상으로 확대 가우디3는 서버용 OCP 가속화 모듈인 HL-325L, HL-325L을 8개 탑재한 UBB 표준 모듈인 HLB-325, 워크스테이션에 장착 가능한 확장 카드인 HL-338 등 3개 형태로 시장에 공급된다. 인텔은 이날 가우디3 기반 AI 서버 공급업체로 델테크놀로지스, HPe, 레노버, 슈퍼마이크로에 더해 폭스콘, 기가바이트, 인벤텍, 콴타, 위스트론 등 총 10개 이상 글로벌 업체가 참여하고 있다고 밝혔다.

2024.06.04 19:01권봉석

新 먹거리 발굴 나선 파수, 'AI 비서'로 고객 확보 노린다

파수가 기존 솔루션에 인공지능(AI) 기능을 확대해 사용자들이 손쉽게 AI로 업무 효율성과 생산성을 혁신할 수 있도록 돕는다. 파수는 문서관리 솔루션 '랩소디(Wrapsody)'와 외부 협업 플랫폼 '랩소디 에코(Wrapsody eCo)'의 신규 업데이트 버전을 통해 문서 요약과 시맨틱 검색 등이 가능한 'AI어시스턴트' 기능을 제공한다고 27일 밝혔다. 최근 기업용 거대언어모델(LLM) '엘름(Ellm)'을 출시한 파수는 올해 초 '고객들의 AI 활용을 돕는 AI 기업'으로의 변화를 선포하고 AI 비전 중 하나로 AI 기능을 접목하는 'AI 기반(AI-Powered) 애플리케이션'을 발표한 바 있다. 파수는 해당 전략의 일환으로 랩소디와 랩소디 에코의 신규 버전을 통해 AI가 제대로 적용된 문서중앙화 솔루션과 외부 협업 플랫폼의 기능을 제공한다. 새로워진 랩소디와 랩소디 에코는 'AI어시스턴트' 기능을 추가해 사용 편의성과 업무 효율성을 혁신한다. 상용 LLM과 연동된 AI어시스턴트를 통해 최대 5개의 문서를 한 번에 비교하거나 요약하고 문서 정보를 검색할 수 있다. 원하는 문서를 AI 채팅창에 끌어다 놓는 간편한 방식으로 대상 문서를 지정하고 '문서 요약' 등의 가이드 버튼을 클릭하거나 자유롭게 질문을 입력해 내용 요약은 물론, 문서 간 차이점이나 필요한 정보를 찾고 번역하거나 정리하도록 시킬 수 있다. 예를 들어 간단한 질문 입력으로 여러 개의 영문 보고서에서 언급된 특정 주제에 대해 한글로 요약 및 정리된 내용을 확인할 수 있다. AI 기능이 적용된 랩소디는 모든 문서를 암호화 처리 후 중복 없이 중앙저장하고 관리해 기존 문서중앙화를 대체하는 차세대 문서관리 플랫폼이다. 문서가상화 기술을 기반으로 다수 사용자가 분산 저장해도 하나의 문서로 관리돼 한 사용자가 문서 작업 후 저장만 하면 다른 사용자가 저장한 파일들도 최신 버전으로 자동 동기화된다. 문서자산화, 버전 관리, 권한 관리가 가능해 조직 내 생성형 AI 구축 시 AI를 학습하기 위한 내부 데이터 관리에도 최적이다. 또 이번 업데이트를 통해 AI 기능 외에도 드라이브 용량 제어 기능을 추가해 관리자가 개인이나 부서 단위로 드라이브의 용량을 일괄 혹은 각각 설정할 수 있도록 했다. 랩소디 에코는 문서가상화 기술을 기반으로 안전하고 효율적인 외부 협업 환경을 구축하는 플랫폼이다. 모든 문서는 암호화 공유되며, 언제든지 열람·편집 권한 제어는 물론, 구성원별로 세밀한 보안 단계를 적용할 수 있다. 다양한 협업 솔루션을 손쉽게 통합하고, 문서 공유나 채팅 등 모든 협업 이력을 한눈에 파악할 수 있으며 워크크룹 이력에서 채팅 이력까지 같이 확인할 수 있다. 조규곤 파수 대표는 "AI어시스턴트 기능을 추가한 랩소디와 랩소디 클라우드는 AI를 제대로 적용한 문서중앙화 솔루션과 협업 플랫폼으로, 사용자들이 실제로 편의성과 효율성을 크게 체험할 수 있을 것"이라며 "최근 출시한 기업용 sLLM 엘름(Ellm)과 이번에 선 뵌 랩소디, 랩소디 에코 외에도 파수는 고객들이 AI를 업무에 제대로 활용할 수 있도록 다양한 방면으로 AI를 접목해 나갈 것"이라고 말했다.

2024.05.27 10:32장유미

얀 르쿤 "현존하는 AI 뛰어넘는 새 모델 연구 중"

세계 4대 인공지능(AI) 학자로 꼽히는 얀 르쿤 메타 AI최고과학자가 오픈AI의 GPT 등 현존하는 AI를 능가하는 새 모델을 개발 중이라고 밝혔다. 23일 얀 르쿤 AI최고과학자는 파이낸셜타임스(FT)와 인터뷰에서 이같은 행보를 알렸다. 르쿤은 "앞으로 생성형 AI는 사람처럼 생각하고 추론하는 능력을 갖추지 못할 것"이라며 "대신 현존하는 AI에 '기계적 초지능'을 부여하는 것은 가능하다"며 연구 배경을 설명했다. 생성형 AI가 인간을 능가할 수 없는 이유도 알렸다. 그는 "거대언어모델(LLM)은 매우 제한된 논리적 이해를 갖춘 상태"라며 "물리적 세계에 대한 지식도 없고, 기억력을 지속적으로 가질 수 없다"고 설명했다. 그는 "사람보다 높은 수준으로 추론할 수도 없고 체계적인 계획도 만들 수 없다"고 덧붙였다. 예를 들어, 공이 바닥에 떨어지는 순간 사람은 이 공이 다시 튕겨 오를 것이라고 추론한다. 반면 LLM은 이조차도 데이터 훈련을 통해 알 수 있다는 것이다. 자연스런 추론과 물리적 세계에 대해 이해할 수 없기 때문이다. 르쿤은 현재 GPT를 능가하는 AI 개발 기간을 10년으로 봤다. 르쿤은 "인간 기능과 최대한 비슷한 AI를 개발하기 위해 연구 중"이라고 했다. 르쿤에 따르면 현재 메타는 이 연구에 수십억 달러를 투자하고 있다. 마이크로소프트와 오픈AI, 구글, 애플 등 생성형 AI 경쟁에서 우위를 선점하기 위한 노력이다. 그는 "메타 연구가 인간 수준의 지능을 달성하기 위해 다양한 실험을 테스트 중"이라며 "수많은 불확실성이 있기 때문에 어떤 방식이 채택될지 미지수"라고 했다.

2024.05.23 17:29김미정

"생성AI, 발전 무궁무진···통합 플랫폼 갖춰 추진해야"

투이컨설팅(대표 김인현)과 트러스트커텍터(대표 윤석빈)가 공동 주관하고 지디넷코리아가 후원한 '우리 조직에 맞는 엔터프라이즈 LLM 세미나'가 22일 서울 강남 뱅뱅사거리 인근 드림플러스에서 열려 성황리에 막을 내렸다. 생성AI 전문가 12명이 연사와 패널로 나와 엔터프라이즈 현장의 생성AI 도입 현황과 나아갈 방향, 법제도 문제를 진단했다. 유료 세미나임에도 좌석 120곳이 만석으로 치뤄질만큼 높은 호응을 받았다. 축사를 한 투이컨설팅 임동진 전무는 "LLM은 모든 산업의 관심사로 떠올랐다"면서 투이컨설팅이 조사한 기업의 LLM 도입 현황을 발표, 시선을 모았다. 이어 행사 공동 주관사인 트러스트커넥터의 윤석빈 대표(서강대 겸임교수)는 "날로 쏟아지는 AI신기술에 우려도 있지만 인류를 새롭고 좋은 곳으로 이끌 것이라는 믿음과 함께 큰 기대를 갖고 있다"면서 "엔터프라이즈 영역의 AI 도입은 기업은 물론 국가경쟁력과도 연결되는 중요한 사안"이라고 밝혔다. 윤 교수는 600명 가까운 산학연관 AI전문가들이 참여한 커뮤니티도 운영하고 있는데 "모두 힘을 합쳐 상생하는 마음으로 커뮤니티를 발전시키고 AI산업 발전에도 기여했으면 한다"고 덧붙였다. 해외 영상 축사도 소개됐다. 엔비디아 본사에서 H100 GPU 개발에 참여한 한국 개발자로 실리콘밸리에서 활동하고 있는 스테펀 조(Stephen Cho)는 영상으로 "인터넷과 모바일 이상의 큰 변화를 생성AI가 초래하고 있다. 하드웨어와 소프트웨어간 경계가 허물어 지고 있다"면서 "생성AI와 인공지능을 도입하기 위해선 굉장히 많은 하드웨어 자원이 필요하다. 비용도 굉장히 많이 들어간다. 이에, 소프트웨어개발 회사들이 하드웨어 도메인 안으로 들어오고 있다. 구글과 메타, 마이크로소프트가 그렇다"고 짚었다. 이어 그는 "하드웨어 회사들도 본인이 갖고 있는 하드웨어 기술 자원을 연동해 소프트웨어 영역안으로 뛰어들고 있다. 결국 두 영역에서 부딪힐수 밖에 없는 상황이다. 와중에 많은 비즈니스 기회가 생길 것"이라면서 "민첩하고 창의적인 마인드로 무장하면 기업도 국가도 더 많은 기회를 얻을 것이다. 기술 뿐 아니라 비즈니스 모델이 중요하며 AI 윤리 등에도 관심을 가져달라"고 말했다. ■이건복 한국MS 리드(상무) "조직이 AI투자로 수익 얻는 기간 평균 14개월" 첫번째 발표자로 나선 이건복 마이크로소프트 아시아 IoT팀 리드이자 한국마이크로소프트 NTO(National Technology Officer)는 "AI가 모든 산업을 변화시키고 있다"고 운을 떼며 데이터를 강조했다. 레시피도 중요하지만 음식의 맛은 재료라는 것이다. 특히 그는 과거 벽돌폰과 스마트폰을 비교하며 "지금은 생성AI의 아주 초기단계다. 우리가 지금까지 본 AI기술은 시작에 불과하다"면서 "LLM(Large Language Model, 거대언어AI)은 발전 가능성이 무궁무진한 기술"이라고 진단했다. 통계데이터 조사로 유명한 일렉트로닉스허브(Electronics Hub)의 최근 조사 결과도 인용했다. 이에 따르면, 세계에서 생성AI를 가장 활발히 사용하는 국가는 필리핀이다. 인구 10만명당 5288 건에 달했다. 싱가포르와 캐나다가 2위, 3위였다. 한국은 15위권에도 못 들었다. 이 NTO는 "LLM 등 생성AI를 보안을 이유로 사용을 차단하고 있기때문"이라고 해석했다. 생성AI는 국내외적으로 여러 종류가 있다. 미국 오픈AI가 내놓은 챗GPT가 대표적이다. 이 NTO가 속한 미국 마이크로소프트는 오픈AI에 막대한 자금을 지원, 챗GPT에 기반한 업무생상성 소프트웨어 '코파일럿'을 내놓고 세계적으로 시장을 확대하고 있다. 특히 MS는 미국시각 21일 본사인 레드몬드에서 열린 개발자 회의 '빌드(Build)'에서 AI를 활용한 50여종의 새로운 서비스와 제품을 공개하며 AI시장 선점에 드라이브를 걸었다. 이날 사티아 나델라 MS 최고경영자(CEO)는 "우리의 서비스들이 여러분 모두에게 새로운 기회를 제공할 것"이라고 강조했다. 1980년대 등장한 워드, 엑셀, 파워포인트처럼 AI가 개인과 직장인 업무에 새로운 편리함을 제공할 것이라는 것이다. MS의 '빌드' 행사에 앞서 구글과 오픈AI도 새로운 AI서비스를 선보인 바 있다. 이 NTO는 생성AI를 가장 많이 사용하는 두 곳으로 콜센터의 고객대응 보조와 정보 검색을 들었다. 또 본인이 직접 중견 보일러 회사에 강연차 간 경험을 들려주며 AI의 업무 생산성 확대 효과를 강조했다. 이 NTO는 보일러에 문외한이지만 강연 현장에서 텍스트를 넣어 보일러에 관한 파워포인트 12장을 1분여만에 제작, 생성AI의 유효성을 보여줬다. 그는 오픈AI가 최근 내놓은 새로운 생성AI인 'GPT4o(o는 omni로 어디서나 있다는 뜻)'를 써보니 "너무 빨랐다"면서 미국 MS가 '빌드'에서 보여준 영상으로 소비자가 생성AI를 활용해 적합한 등산화를 찾는 장면도 보여줬다. 특히 그는 데이터를 강조했다. 기업 입장에서는 데이터가 경쟁력이라면서 "LLM은 단순히도구에 불과하다. 지향점이 아니다"고 짚었다. 생성AI가 산업전반에서 성과를 창출하고 있는 사례도 소개했다. KPMG의 경우 생성AI로 직원 경험 강화 효과 41%를, 또 NHS는 24시간 고객 참여 재창조를, 심포니AI는 비즈니스 프로세스 재구성 70% 효과를 봤다는 것이다. 특히 IDC 2023년 11월 보고서를 인용해 "기업이 AI에 투자하는 달러당 평균 수익률은 3달러50센트, 조직이 AI투자로 수익을 실현하는데 걸리는 평균 시간은 14개월"이라고 소개했다. 생성AI에 대한 기업 지출도 늘고있다. 인프라보다 서비스와 플랫폼&앱 소프트웨어 부문이 그렇다. 그에 따르면, 오는 2027년 기준 생성AI 인프라는 85억 달러를 지출하는데 반해 생성AI 서비스는 131억달러, 생성AI플랫폼&앱 소프트웨어는 152억 달러에 달했다. 작년에 나온 '워크 트렌드 인덱스 스페설 리포트'도 인용했다. 얼리어답터 297명을 조사한 결과다. 이에 따르면 AI사용 만족도가 77%였다. 또 매주 1회 무료 점심 제공보다 코파일럿 사용을 선택하겠다고 답했다. 이 상무는 "(코파일럿이) 새로운 직원 복지"라면서 "실제 30%는 직장 선택시 코파일럿 사용 가능 여부가 중요하다"고 해석했다. 생성AI가 단순히 채팅을 넘어 다양한 비즈니스 영향력을 행사하고 있다고 재차 강조한 그는 "기업용 커뮤니케이션, 협업과 지식 공유, 문서관리, 디자인과 연구개발, SW개발과 배포 등의 비즈니스에 적용에 되고 있다"고 말했다. 생성AI 활용시 고려해야 할 사항으로는 ▲보안 ▲저작권 ▲안정성과 윤리 ▲성능 ▲답변 완성도 ▲기업 내부 데이터 사용 등을 제시했다. 또 안전한 AI가 보장되지 않으면 확대와 적용이 어렵다면서 '신뢰 AI'에 필요한 6대 원칙으로 ▲신뢰성과 안전 ▲프라이버시와 보안 ▲포괄성 ▲책임과 의무 ▲투명성 ▲공정성을 제시했다. 특히 그는 "생성AI는 앱(서비스)을 더욱 인텔리전트하게 업그레이드해준다. 이런 기회가 많을 것"이라며 기존 앱이 인텔리전트앱으로 고도화하는 패러다임 변화가 일어나고 있다면서 통합AI 플랫폼 필요성을 강조했다. 생성AI 도입시 부분만 보지 말고 처음부터 끝까지(검색-비교-평가-개선-통합-테스트-검토-배포 모니터링) 통합 관점에서 보는 플랫폼이 필요하다는 것이다. "기존 시스템은 파편화가 문제다. 지난 30년간 IT환경 구축의 문제점"이라면서 "수많은 앱을 바꾸려면 전사와 통합 관점이 아니면 안된다. 스팟(spot, 일시) 기술로 접근하면 업그레이드와 유지 등에 문제가 된다. (AI는) 빨리 변하고 영향력이 매우 크기 때문에 생태계 전체의 통합 플랫폼 관점에서 다뤄야 한다"고 강조했다. ■ 안무정 LG CNS "생성AI는 초코렛 박스...누구나 하나씩 가져야" LG CNS에서 신사업과 생성AI사업 개발을 맡고 있는 안무정 책임은 "나는 엔지니어지만 작가이기도 하다"며 본인을 소개하며 "생성AI는 개인이 친구처럼 지내야 할 대상이다"고 말했다. 안 책임은 '생성형 AI시대에 생존하라' 등 AI관련 책 4권을 저술한 바 있다. 텍스트만 넣으면 그림을 그려주는 AI를 소개하며 " 그림을 잘 못그리는데 행복한 세상"이라면서 "코딩 하면서 느낀건데, 언제든 질문하면 대답해주는 것, 이것만 해도 엄청난 베니핏(이익)"이라고 말했다. 작년 7월 LG AI연구원은 LG의 LLM인 '엑사원 2.0' 모델을 기반으로 ▲엑사원 유니버스(EXAONE Universe) ▲엑사원 디스커버리(EXAONE Discovery) ▲엑사원 아틀리에(EXAONE Atelier)를 발표한 바 있다. '엑사원 유니버스'(EXAONE Universe)는 도메인별 전문 문헌과 최신 데이터까지 학습한 플랫폼으로 각 분야 전문가들이 정보를 탐색하고 조합할 수 있게 해준다. 또 '엑사원 디스커버리'(EXAONE Discovery)는 다양한 실험 과정을 예측해 최적의 방법을 제안하는 생성형 AI다. '엑사원 아틀리에'(EXAONE Atelier)는 이미지 등을 생성해주는 AI다. 당시 LG AI연구원은 '아뜰리에'가 저작권을 확보한 이미지-텍스트 페어 데이터 3.5억장을 학습했다고 밝혔다. '아뜨리에'에 대해 그는 "누구나 디자이너가 될 수 있다"면서 "미드저니보다 질이 뒤질지 모르지만 데이터 저작권은 우리가 강점이 있다. 지금은 안하지만 종국에는 저작권을 이야기 할 것"이라고 짚었다. 이지스 군함을 소개하며 현업과의 소통 중요성도 강조했다. 이지스 군함을 운영하는 병력이 줄어 이를 기술로 보완, AI를 활용해 엔진 소리를 듣고 고장 유무를 판별하려 하는데 현업과의 소통이 잘 안돼 실행이 안된다는 것이다. 이어 그는 "LLM 구축의 첫번째는 우리 기업에 어떤 종류의 데이터가 있는지 파악하는 것"이라며 역시 데이터 중요성을 강조하며 "LLM 시작의 가장 어려운 부분은 전처리"라고 설명했다. 전처리가 쉽지않고 완전 노가다성 일이라는 것이다 ANN, CNN, RNN 같은 AI기술을 "아름다운 AI"라고 칭하며 "하지만 LLM을 하려면 고통이 따른다"고 덧붙였다. LLM 개발에 많은 돈이 들어간다면서 "도메인 특화 LLM을 만들어야 하는데 돈이 100억 이상은 들어간다"고 예상했다. 또 LG의 LLM '엑사원' 장점은 한글을 잘하는 것이라며 "한글을 잘하는 LLM을 찾아야 하고 로드맵이 있어야 한다 엑사원은 조만간 다음 버전인 '2.5'가 나온다. 엑사원은 파라미터가 3000억개 이지만 특정 영역을 커버하는게 장점"이라고 설명했다. 이어 그는 "생성AI는 쵸코렛 박스다. 하나씩 갖고 있으면 손해 보지 않는다"면서 "경험을 빨리 축적할 수 있는 알고리즘은 없다"며 경험을 강조했다. ■ 김세엽 셀렉트스타 대표 "국내 첫 LLM 평가기법 개발...여러 평가방법 함께 사용해야" LLM이 국내외적으로 쏟아져 나오면서 이를 평가하는 곳도 늘고 있다. 국내는 셀렉트스타가 대표적이다. 셀렉트스타를 창업한 김세엽 대표는 2021년 포브스가 선정한 '아시아 30대 미만 리더 30인'에 뽑히기도 했다. 현재 과기정통부가 주관하고 있는 AI윤리정책포럼위원으로 활동하고 있다. 국내 처음으로 LLM 평가 시스템을 개발했다. 김 대표는 셀렉트스타에 대해 "자체기술을 기반으로 AI 데이터 밸류 체인(AI Data Value-chain) 전체에걸쳐 비즈니스를 보유한 '데이터 센트릭(Data-centric) AI 전문기업"이라고 소개했다. 그가 언급한 '데이터 센트릭'은 AI석학으로 지금은 투자에 더 열중하고 있는 앤드류 응이 강조하는 개념이다. AI에서 데이터가 중요하다는 걸 상징한다. 이 회사의 비즈니스 모델은 크게 두 가지다. 하나는 '올 인 원 데이터 서비스'고 다른 하나는 'AI제품 비즈니스'다. 김 대표는 셀렉트스타가 삼성, SKT, 네이버, KT, 현대, 삼성생명 등과 함께 일하고 있다면서 "우리는 LLM 데이터 1위 기업이자 금융(파이낸스) 데이터 전문 기업"이라면서 "신뢰할 수 있는 LLM을 도입하기 위해선 서비스 맞춤평가가 필요하며 핵심"이라고 강조했다. 현재 셀렉트스타는 'AI 안전(AI Safety)' 분야에 힘을 기울이고 있다. 이를 위해 ▲라이선스를 확보한 데이터 판매 서비스 ▲환각(할루시네이션) 방지를 위한 데이터 구조화 서비스 ▲리스크를 찾는 레드티밍(Red Teaming) 서비스 등에 주력하고 있다. 셀렉트스타가 판매하는 데이터는 다양하다. 'Q-A 데이터셋'의 경우 230만 건 이상 질문과 전문가 답변을 담았다. '뉴스 데이터셋'과 '도서 데이터셋' '대화 데이터셋' '다국어 번역 데이터셋' '이미지 데이터셋' '3D 시뮬레이션 및 합성 데이터셋' 등도 공급한다. 데이터구조화서비스에 대해 김 대표는 "RAG 기반 LLM 도입을위한 최적 형태로 문서데이터의구조화 설계 및 수행을 한다"고 설명했다. '레드 티밍(Red Teaming)' 서비스는 의도적으로 AI의 잘못한 답변을 유도해 서비스 리스크를 찾는 것으로 '레드티밍' 설계 및 수행을 해주고 있다. 이외에 셀렉트스타는 AI 성능과신뢰성을 서비스목적에 맞게 평가하기 위한 데이터 설계 및 구축도 해주고 있다. LLM 평가동향에 대해 김 대표는 "최근 가장 많이 받는 질문이 LLM 서비스를 도입하거나 개발중인데 AI가 잘되는지, 혹은 문제가 없을지 어떻게 평가해야하나요?라는 것"이라면서 "LLM은 기술 특성상 의도하지 답변에 따른 리스크 및 신뢰성 담보 어려움이 발생한다"고 들려줬다. LLM 평가는 크게 ▲사람 개입 없이 하는 자동평가(Automatic evaluation)와 ▲생성결과를 사람이 직접 평가(Human evaluation. 예 Chatbot Arena)하는 것 두 가지가 있다. 이중 자동 평가는 ▲Multiple-choice evaluation(객관식 질의를 통해 자동정량 평가. 예가 MMLU, Open LLM Leaderboard) ▲LLM based evaluation(LLM을 통해 Human evaluation을 자동화. 예가 G-eval, MT-Bench)으로 또 나눠진다. 각 평가 방법마다 장단점이 있다. 예컨대 평가 일관성 유지, 소요 리소스, 실사용자와의 간극이라는 지표를 놓고 봤을때, 방법마다 장단점이 있다는 것이다. 김 대표는 "결국 트레이드 오프를 고려해 평가방법을 적절히 조합해 사용해야 한다"고 제안했다. 리스크가 큰 영역은 휴먼 평가를 해야 한다는 것이다. 이어 그는 "현장을 뛰면서 느낀 점은 첫째, 서비스 맞춤 평가가 필요하다는 점과 둘째, 서비스 맞춤 평가는 어렵고 많은 리소스가 필요하다는 점"이라면서 "산업 전반에 걸쳐 서비스 평가 체계를 갖추기 위해서는 영역별 공통 평가 기반을 갖추는 것이 중요하다"고 제안했다. 셀렉트스타는 한국지능정보사회진흥원(NIA)이 주관한 인공지능학습용 데이터 구축 사업에 주관 기업으로 참여해 KAIST, 네이버, LG AI연구원, SK텔레콤, LT 등과 협력해 글로벌 공통 평가를 참고해 국내 최초로 LLM 신뢰성 평가 데이터를 설계, 구축하기도 했다. 엔스로픽의 3H(Harmness Honesty Helpfulness) 프레임워크를 활용했다. 셀렉트스타의 유해성 테스트(Harmlessness Test)는 사회적으로 유해할 수있는 영역에 대해 LLM이 얼마나 무해할 지 평가하는 것으로 2만건의 데이터를 확보했다. 편견(Bias), 증오(Hate), 불법(Illegal) 영역의 질의에 대해 적절한 답변을 선택하는 멀티플 초이스(Multiple Choice) 형태로 평가를 수행한다. Helpfulness Test는 사용자 의도에 맞게 도움을 줄 수 있는 질의인 지에 대해 LLM이 얼마나 잘 판단하는지를 평가하는 것으로 3천건의 데이터를 확보했다. 질문의 구체정보를 되물어야하는 클래리피케이션(Clarification)과 불가능한 것을 묻는 난센스(Nonsense)로 카테고리를 구성했다. 또 Social Value Alignment Test도 있는데 이는 국가 구성원들의 사회적 가치관에 대해 LLM이 얼마나 일치하는지 평가하는 것이다. 이외에 Common Knowledge Alignment Test(Honesty Test)도 있다. 국가 구성원들의 공통 지식에 대해 LLM이 얼마나 잘 하는 지 평가하는 것이다. 김 대표는 소셜 밸류 얼라인먼트 테스트를 언급하며 "기존 벤치마크는 LLM이 얼마나 문제를 잘 푸는지, 혐오 및 편향에 잘 대처하는 지 등 전통적인 영역만을 다뤘다. 특정국가에 LLM을 서비스하기 위해서는 해당 국가 구성원들의 의견을 잘 반영하는 것이 필요하다"고 설명했다. 셀렉트스타는 올 하반기에 리더보드 챌린지를 시행, 연말에 AI허브에 공개할 예정이다. ■용혜림 10X AI클럽 대표 "GPT 래퍼 될 지 AI 네이티 프로덕트 될 지 고민을" 오후 세션의 첫 발표는 용혜림 10X AI클럽 설립자 겸 대표가 했다. 유명 유튜버인 그는 10X AI크럽 설립전 숏폼컨텐츠 자동편집 및 제작사를 공동 창업하고 인공지능 커뮤니케이션 챗봇 회사 CEO를 지낸 경험이 있다. 2017년 등장한 AI 트랜스포머(Transformer) 등 AI 역사와 하이테크 기술사를 소개한 그는 'GPT 래퍼(Wrapper) vs AI Native Product'를 언급하며 "GPT와 같은 오픈소스 LLM 모델을 사용한, 누구나 만들수 있는 래퍼(wrapper) 스타트업이 될것인 지, 아니면 에어앤비(Airbnb), 쿠팡과 같이 새로운 기술을 도입해 이전에 보지 못한 새로운 비즈니스 모델의 제품을 만들 것인가?" 물으며 "기존에 보지 못한 새로운 비즈니스모델을 세워야 한다"고 말했다. LLM 도입 장단점은 설명했다. 그가 장점으로 꼽은 건 ▲빠르고 퀄리티 높은 자연어처리 기술을 내 제품에탑재 시킬수 있음 ▲데이터 처리능력 및 학습능력이 뛰어남(시간소모, 개발인력단축) ▲실행력으로 빠른 시장점유율 높이기 등이다. 반면 그는 단점으로 ▲오픈AI 등 무한경쟁 ▲낮은 기술 장벽으로 차별점 얻기 어려움 등을 꼽았다. ■이학준 마드라스체크 대표 "직원 100명이 200명이 되는 마법...1인 1업무 비서 열어" 웹케시 계열사인 마드라스체크의 이학준 대표는 국내 리딩 협업툴 솔루션 '플로우'에 인공지능(AI)을 적용한 경험을 이야기했다. 앞서 이 회사는 지난 3월 '플로우 3.0'을 공개했다. 이 제품은 AI를 적용한 것이 특징으로 '똑똑한 AI 업무비서'를 지향한다. 주요 기능은 크게 △AI 프로젝트 템플릿 △AI 하위 업무 △AI 업무 일지 △AI 업무 필터 △AI 에디터 템플릿 △AI 담당자 추천 등 6가지다. 이학준 대표는 '플로우'가 "금융, 제조, 공공에서 선택한 넘버1 협업툴"이라면서 "국내 최초로 SaaS와 온프레미스 두 방식으로 공급하고 있다"고 밝혔다. 이 대표에 따르면 '플로우'를 온프레미스로 도입한 곳은 미래엣셋을 비롯해 DGB 대구은행 등 다양하다. 망 분리 환경에서 금감원 보안 지침을 따른 제품이다. '플로우'는 업무 추천도 해주는데 사용자가 특정 업무 내용을 입력하기만 하면 된다. 또 사용자는 업무 내역이나 진행상황을 검색할 수도 있다. 예를 들어 이용자가 '이번 주 우리 팀이 처리한 업무 알려줘'라고 입력하면, 관련 내용을 리스트 형식으로 받을 수 있다. 검색할 수 있는 업무도 다양하다. 처리 중이거나 보류된 업무, 다른 팀에 넘어간 업무 등을 확인할 수 있다. 이 대표는 "데이터 활용 혁신, 모두를 위한 인사이트가 AI다. 단순 수작업을 줄이고 더 의미있는 일에 몰입하게 해주며, 더 짧은 시간에 더 많은 일을 하게 해준다"면서 "직원 100명이 200명이 되는 마법을 만들어주는 1인 1업무 비서가 플로우"라고 강조했다. 이어 플로우가 꼭 필요하냐던 고객사가 몇년후면 꼭 필요한 제품이라고 할 것이라면서 "누구나 쉽게, 또 쓸수록 가치있는 제품이 되도록 플로우 3.0에 AI를 적용했다"고 밝혔다. ■ 배영근 바아이매트릭스 대표 "이제 분석은 AI비서에...G매트릭스 만나는 순간 혁신 일어나" 포스데이타 출신으로 2004년 비아이매트릭스를 설립한 배영근 대표는 AI가 전문직으로 진화중이라면서 "분석은 AI비서에게 시키고 의사결정 중심으로 업무로 전환해야 할 때"라고 강조했다. 현재 그는 노∙로우코드협의회회장과 한국SW산업협회빅데이터기업협의회(KBEC) 부회장도 맡고 있다. 비아이매트릭스는 데이터 분석, 시각화 등 비즈니스인텔리전스(BI) 업무에 특화한 로우코드 개발 플랫폼 기업이다. 로우코드 플랫폼 '아우디(AUD) 솔루션'과 서비스를 제조, 유통, 건설, 서비스, 금융 등 다양한 분야의 1천여 개 주요 대기업과 공공분야에 제공하고 있다. 작년 9월 출시한 'G-매트릭스'는 '아이-메타(i-META)' 모듈을 바탕으로 최소한의 정보만 학습해 AI 정확도를 극대화한 것이 특징이다. 우수한 성능뿐 아니라 보안성도 우수하다. 지난 20년간 BI 연구를 해왔는데 데이터가 연료인 AI 시대를 맞아 주목받고 있다. 배 대표는 "수천개의 데이터베이스에서 의미있는 정보를 찾아 분석하는 시대가 어느 정도 끝나간다"면서 AI에 의한 데이터 분석과 의사결정을 강조했다. 이어 "G매트릭스를 만나는 순간 혁신적으로 변한다. 의사 소통의 방향이 바뀐다"면서 "AI 업무비서가 질문 의도도 파악해 데이터 찾고 알려준다. 질문만 잘하면 10초 안에 결과물이 나온다. 기존엔 수시간 걸리던 일"이라고 들려줬다. 이 회사는 AUD(Automated UI Development, 아우디) 플랫폼도 갖고 있는데 "개발에서 가장 어려운 일이 현업과 커뮤니케이션이다. 요구 사항을 개발자에게 전달하는 일이 어렵다. 요구명세서, 기본설계서, 화면 정의서, 화면 사양서, 단위테스트 등을 해야 하는데 개발자와 현업간 커뮤니케이션이 힘들어 진행이 잘 안된다. 그래서 뭐든 집어 넣으면 나오는 게 만든게 아우디 플랫폼"이라면서 "AUD 플랫폼은 엑셀 요구 사항에 집어넣으면 자바로 분석해 표현해준다"고 설명했다. AI를 앞세운 혁신에 성공한 비아이매트릭스는 작년에 공공에서만 10개 넘는 시험테스트(PoC)를 했다. 올해는 카데고리별 매출 실적 달성률을 알려주는 기능도 구현, 제공한다. 이를 위해 올 3월 예측알고리즘을 적용해 추정 및 예측 분석이 가능하게 했고 시각화 플랫폼도 선보인다. ■ 장진영 유엔진솔루션즈 대표 "AI를 마법처럼 쓰려면 SW공학에 먼저 힘을 기울여야" 장진영 유엔진솔루션즈 대표는 'AI를 통한 민원시스템 구현'을 보여주며 "시스템에 들어가는 요구사항을 얼마나 잘 넣는냐가 중요하다. 그런데 자연어로 요구사항을 주는게 더 어렵다"면서 "그래서 SW공학이 있는 거다. AI를 마법처럼 쓰는 것 보다, 기존에 인류가 한 기법인 SW공학에 힘을 기울여야 한다. SW공학에는 현업과 개발자간 갭을 줄이는 수만가지가 있다"며 AI시대에도 SW공학이 중요함을 역설했다. 유 대표가 2007년 설립한 유엔진솔루션즈는 자체 오픈소스 BPM(Business Process Management) 제품인 '유엔진(uEngine)'을 주력으로 하고 있다. 금융, 공공, 제조, 통신 등 국내외에 100여개의 적용 레퍼런스를 보유했다. 마이크로서비스아키텍처(MSA) 설계 컨설팅과 교육으로 8000명 이상 교육생을 배출하기도 했다. 지난 3월에는 5년간 개발한 'MSA Easy'를 오픈소스로 공개했다. 'MSA Easy'는 사용자만의 프로그램을 만들거나 기존 프로그램을 개선하는 걸 돕는다. 자체 제품화나 사내 시스템 구축에 도움이 된다. 특히 클라우드 기반 애플리케이션 개발을 간소화해준다. 20년간 개발을 해오고 있다는 유 대표는 이날 LLM 기반 정보시스템 분석과 설계에 대해 발표했다. 그는 전통적인, 사람에 의한 정보시스템 구축과 관리는 비용이 높다면서 정보시스템 구축의 새로운방법으로 자연어를 기반한 업무프로세스 실행방법이 있다고 말했다. 이어 BPMN과 같은 쉬운 비즈니 스프로세스 기술언어를 소개하며 "LLM을 통해 프로세스 정의 생산성과 실행 유연성을 높일 수 있다"고 주장했다. 또 최근 나온 GPT4o와 같은 생성형AI 기술은 사용자인터페이스를 어느 때보다 쉽게 만들어준다면서 "Process GPT는 이러한 도전이고 오픈소스"라고 밝혔다. ■권혁성 포티투마루 AI사업 총괄 "목적에 맞는 학습데이터 모으는게 중요" 포티투마루에서 AI사업을 총괄하고 있는 권혁성 이사(BPO)는 RAG 필요성 등을 설명하며 회사의 사업 현황과 비전을 들려줬다. AI의 환각(그럴듯한 거짓말)을 막아주는 기술 중 하나인 RAG(Retrieval-Augmented Generation)는 대규모 언어 모델의 출력을 최적화, 응답을 생성하기 전 학습 데이터 소스 외부의 신뢰할 수 있는 지식 베이스를 참조하도록 한 프로세스다. 국내 중소AI기업중 선발적으로 RAG를 선보인 포티투마루는 특히 '앤서링 AI(Answering AI)' 기술력과 딥러닝 기술에 기반을 둔 딥 시맨틱 QA(Question Answering) 플랫폼을 개발, 기술력을 인정받고 있다. 자체 기업용 초거대 AI 경량화 모델인 'LLM42'를 출시, 생성 AI 및 대형언어모델(LLM)시장을 선도해 가고 있다. LG유플러스에서 투자 유치를 받았고 네이버클라우드와도 전략적으로 협력하고 있다. RAG 필요성에 대해 권 이사는 "챗GPT는 2023년 10월까지 지식을 기반으로 답한다"면서 자사의 핵심기술인 데이터 전처리와 기계독해(MRC)를 설명했다. MRC는 커버리지가 떨어지지만 정확성을 높여 주는 기술이다. 특히 팩트 기반 정보를 제공할때 유용하다. 권 이사는 파운데이션 모델 튜닝을 설명하며 "목적에 맞는 학습 데이터를 모으는게 상당히 중요하다"며 데이터 수집을 강조했다. 권 대표는 포니투마루 고객 사례로 지식검색서비스를 시범 구축한 CJ제일제당을 비롯해 RAG 연동 상품추천챗봇을 공급한 LG유플러스, 지식기반 생성AI를 시연한 DB손해보험, RAG 적용 PoC를 하고 있는 KAIST, 상담원 어드바이저 서비스를 하고 있는 금융권 등을 소개했다. 권 이사는 질의응답 시간에 "할루시네이션은 100% 해결이 안된다"면서 "RAG 외에 온톨로지 등을 사용하기도 한다"고 말했다. ■ 조원희 법무법인 디엘지 대표 "EU 법안 발효...내용 잘 알고 제대로 대처해야" 유럽연합(EU)이 세계에서 처음으로 포괄적인 인공지능(AI) 기술 규제법인 'AI법(AI Act)'을 21일(현지시각) 최종 승인했다. 이날 EU 교통·통신·에너지이사회는 “AI법을 최종 승인했다”고 밝혔다. 2021년 초안이 발의된 지 3년 만이다. 올 3월 EU 의회에서 압도적 찬성으로 AI법을 통과시킨 뒤 법안 수정 등 절차를 거쳐 이날 확정했다. 이로써 오는 11월부터 EU 27개 회원국에선 실시간 안면 인식을 한 뒤 프로파일링을 하는 등의 인권침해적 요소를 지닌 AI 서비스가 모두 금지된다. 내년엔 인간 수준의 사고력을 지닌 범용인공지능(AGI·Artificial General Intelligence)에 대한 규제도 시행된다. 조원희 법무법인 디엘지(DLG, 구 디라이트)대표변호사는 EU와 미국의 AI법을 소개하며 국내AI 기업들의 대응방안을 조언했다. 조 변호사는 한국과학기술원(KAIST) 겸임교수와 과학기술정보통신부고문변호사로도 활동하고 있다. 조 변호사에 따르면, 이번에 EU가 승인한 AI법은 네 가지 원칙을 갖고 있다. 첫째, 인간 자동화 존중( Respect for human autonomy)으로 AI 시스템이 인간을 부당하게 종속, 강요, 기만, 조작, 통제또 는 집단화하지 않고 오히려 인간의 인지적, 사회적, 문화적 기술을 보완한다는 것이다. 둘째, 손상 방지(Prevention of harm)로 인간의 존엄성, 정신적, 신체적 완전성을 보호하고 기술적으로 견고하며 악의적인 이용에 노출 되지않도록 보장해야한다. 셋째, 공정성(Fairness)으로 수단과 목적간 비례원칙에 따른 실질적 공정성, 또 AI시스템 또는 이를 운영하는 사람이 내린 결정에 대해 이의를 제기하고 구제를 요청할 수 있는 절차적 공정성을 말한다. 넷째, 설명성(Explainability)으로 프로세스가 투명해야하고, AI 시스템의 기능과 목적이 공개적으로 전달돼야 하며, 결정에 대한 정당한 이의를 제기할 수 없는 경우 다른 설명가능성을 위한 조치(추적성, 감사가능성 등)가 요구 될 수 있다는 것이다. 이번 EU AI법 경과를 보면 2018. 4월 발표한 '유럽 AI 전략(AI for Europe)'이 시초다. 이어 ▲2019년 4월 '신뢰할 수 있는 인공지능 윤리기준' 권고안 발표(전문가그룹) ▲2020년2월 19일 '인공지능백서((White paper on AI)' 발표 ▲인공지능법안 제안(proposal for a regulatory FRAMEwork on AI) 및 AI 합동계획 수정안 발표(2021.4.21) ▲유럽연합 이사회 수정안 채택(2022.12월) ▲유럽의회 수정안 채택(2023.6.14.) ▲유럽연합이사회, 유럽의회, 집행위원회가절충안잠정적합의(2023.12.8). ▲유럽연합이사회상주대표위원회(Committee of the Permanent (2024.2.2) 추가수정안가결▲유럽의회본회의가결(찬성523표, 반대46표, 기권49표, 2024.3.13) Representatives, 'COREPER') 추가수정안가결 ▲이사회 공식 승인, 순차적 발효(2024. 5. 21) 등이 이뤄졌다. 조 변호사는 EU AI Act 적용범위에 대해 "EU 내에 AI 시스템 혹은 범용AI 모델을 출시하거나 서비스를 제공하는 Provider로 EU내에 설립한 법인인지 여부를 불문하고 해당한다"면서 "과학연구와 개발, 업무목적 외로 AI시스테을 사용하는 자연인 등은 제외됐다"고 말했다. EU AI법은 AI 기술을 위험 수준에 따라 4단계로 나눠 규제한다. 최고 단계인 '허용될 수 없는 위험'부터 '고위험' '제한적 위험' '저위험' 등이다. 인권침해적 AI 서비스에 대한 규제는 6개월 뒤인 11월부터 시작한다. 스마트폰 안면 인식 결제 시스템처럼 사람 얼굴을 촬영해 이용자의 성적 취향, 정치·종교적 신념, 인종 등 민감한 정보를 알아내는 서비스가 대표적이다. 또 AGI 규제는 내년 5월부터, 관련된 모든 규제가 시행되는 건 2026년 중반으로 전망된다. 법을 위반할 경우엔 벌금이 막대하다. 해당 회사 세계 매출의 최대 7%에 해당하는 벌금을 부과할 수 있다. 벌금 상한선은 3500만 유로(약 517억 원)다. EU는 AI법 시행을 위해 회원국에 'AI 사무국'을 두고 시행을 지원하는 과학 전문가 패널을 둘 예정이다. 조 변호사는 국내 AI기업들의 대응 8대 방안을 제안했다. 첫째, 미국AI기술 이용시 또는 미국내 범용AI 서비스제공시 미국AI 행정명령에 의한 정부고지 및 안전성평가 의무와 상무부 보고의무 여부 및 이행 점검 둘째, 생성AI 콘텐츠 워터마크 표준, 개인정보보호지침 등 세부기준과 지침발표 또는 구체화시 이에따른 위험관리 조치적용 필요 셋째, AI의 구체적 구현에 대해 명확히 예상되는 규제가 없으므로, EU AI Act의 프레임워크를 구성하는 윤리성, 신뢰성, 투명성, 안정성 측면에서 자율적으로 대비 필요 넷째, 기업의 경우 구성원들에 대해 AI 활용시 위험에 대한 교육 및 가이드라인(업무자료작성시의 활용범위에대한제한등) 마련 필요다. 또 다섯째, 인공지능 모델에 의한 결과물과 관련해 그 모델의 구조, 학습데이터, 결과도출 과정에 대한 정보를 투명하게 공개할 필요가 있고(영업비밀과충돌) 여섯째, AI 알고리즘에 대한 설명가능성 확보, 추적시스템 마련 일곱째, 개인정보와 저작권 측면에서 법률검토 필수 여덟째, 실제 리스크 상황에서 규제대응에 있어 충분한 증빙자료로 삼을수 있는 내부리스크 관리체계(거버넌스)를 구축하고, AI 비즈니스모델을 구성하는 단계에서부터 데이터를 어떻게 관리하고, 관련 사고발생시 어떻게 대응할 것 인지에 대한 방안을 마련하는 등 리스크를 사전에 통제할 수 있게 하는 점 등을 제시했다.

2024.05.23 14:14방은주

삼성SDS 황성우 "델 덕에 10만명에게 생성형 AI 제공"

[라스베이거스(미국)=김우용 기자] "작년 GPU 서버가 부족했을 때 마이클 델이 구원자였다. 그의 도움 덕분에 이미 생성형 AI 서비스를 고객사에 제공하고 있고, 사용자가 10만명을 넘었다. 삼성SDS는 사용자에게 빠르고 저렴하게 서비스를 제공하기 위해 많은 기술적 노력을 기울였고, 델 파워엣지 서버는 그 과정에서 큰 역할을 했다." 황성우 삼성SDS 대표는 20일(현지시간) 미국 라스베이거스에서 개최된 '델테크놀로지스월드 2024' 컨퍼런스 첫날 기조연설 무대에 올라 이같이 밝혔다. 황성우 대표는 "기업 사용자는 LLM에 질문할 때 긴 응답 시간을 견딜 수 없고, 기업은 최상의 솔루션에 많은 비용을 지불하고 싶어하지 않는다"며 "엔비디아와 파트너십을 기반으로 출범한 델 AI 팩토리는 강력한 데이터 보안과 맞춤형 AI 서비스 개발을 통해 기업의 AI 주권 확립에 기여할 것으로 기대된다"고 말했다. 삼성SDS는 올해 기업용 생성형 AI 도구인 '브리티 코파일럿(Brity co-pilot)'과 자연어 인터페이스 앱을 클라우드에 쉽게 올리게 하는 PaaS '패브릭스(FabriX)'를 선보였다. 작년초부터 촉발된 생성형 AI 트렌드로 많은 기업이 앞다퉈 대규모언어모델(LLM) 구축과 활용에 나섰다. 하지만, LLM 학습과 추론에 필수 인프라인 엔비디아 GPU 공급 부족 상황이 심화됐고, 기업은 GPU를 확보하지 못해 LLM 활용에 애를 먹었다. 삼성SDS는 델테크놀로지스의 GPU 서버를 적정 시기에 공급받아 타사 대비 이른 시점에 생성형 AI 서비스를 구축할 수 있었다. 델테크놀로지스 파워엣지 XE9680 서버는 8개 엔비디아 GPU를 탑재할 수 있는 AI 최적화 서버다. 각 기업의 온프레미스 생성형 AI 환경에 공급되며 큰 인기를 누렸다. 델테크놀로지스 회계연도 2024년 4분기동안 AI 서버 매출은 8억달러에 달했다. 황 대표는 "제조는 표준화돼 있고, 상당 부분 역할에 따라 자동화할 수 있지만, 사무는 인간의 언어를 기반으로 하기에 자동화하기 어려웠다"며 "LLM은 인간의 언어와 의도를 잘 이해하기 때문에 사무 자동화에 큰 도움일 될 것"이라고 밝혔다. 그는 "나는 이를 하이퍼 오토메이션이라고 부른다"며 "삼성SDS는 언어별로 서비스와 솔루션을 자동화할 수 있는 방법을 찾으려 노력해왔다"고 강조했다. 삼성SDS는 생성형 AI를 온프레미스에 구축했다. 이에 대해 황 대표는 "기업 고객은 LLM을 사용한 하이퍼 오토메이션에 큰 관심을 갖고 있지만, 자세한 내부 정보를 LLM에 요청해야 하고, LLM이 회사의 핵심 데이터를 참조하도록 해야 해서 보안 우려를 갖고 있다"며 "기업 고객에게 사이트에서 작동하는 모델을 제공하는 것이 중요해졌다"고 설명했다. 그는 미래의 모든 컴퓨터가 자연어를 활용하게 될 것으로 전망했다. 그는 "미래의 모든 컴퓨터는 언어 인터페이스로 앱과 솔루션을 쉽게 업로드하고 실행할 수 있도록 설계될 것이고, 어쩌면 GPU 중심 컴퓨터 세계가 올지도 모른다"며 "고객이 언어 인터페이스를 통해 쉽고 저렴한 서비스를 받을 수 있도록 삼성 클라우드 플랫폼을 변화시키려고 노력할 것"이라고 밝혔다.

2024.05.21 07:31김우용

"기업경쟁력, LLM 도입보다 데이터 활용이 더 중요"

"오는 22일 강연에서는 생성AI(Generative AI)를 이용해 기업이 어떤 방식으로 직원 창의성과 생산성을 높이거나 도울 수 있는 지 말하려 합니다." 이건복 한국마이크로소프트(한국MS) 개발(디벨로퍼) 리드는 16일 지디넷코리아와 인터뷰에서 이 같이 밝혔다. 이 리드는 오는 22일 오전 10시~오후 6시 서울 강남 뱅뱅사거리 인근 드림플러스 이벤트홀(지하 1층)에서 열리는 '우리 조직에 맞는 엔터프라이즈 LLM' 세미나에서 발표한다. 이 행사는 투이컨설팅(대표 김인현)과 트러스트커텍터(대표 윤석빈)가 개최하고 지디넷코리아가 후원한다. 데이터 유출같은 보안 문제와 비싼 API 사용료, 복잡한 인프라 구축, 내부 시스템 연계 어려움 등으로 LLM 도입을 주저하거나 LLM을 도입하려는 기업에 도움을 주기 위해 마련했다. 이 리드는 "생성AI는 기존 데이터에서 새로운 정보나 콘텐츠를 생성하는 AI 기술이다. 텍스트, 이미지, 음악, 비디오 등 다양한 형태 콘텐츠를 자동으로 만들거나 수정할 수 있다. 이런 기술은 직원의 작업 부담을 줄이고, 새로운 아이디어를 제공하며, 품질을 향상시킬 수 있다"면서 "22일 발표에서는 사례를 통해 글로벌 기업들이 어떤 방식으로 AI를 적용했는지 소개할 것"이라고 말했다. 이 리드는 한국MS 솔루션 사업부에서 'Digital & App Innovation'팀을 맡고 있다. 기업 혁신과 AI를 이용한 앱(App)개발에 도움을 주고 있다. 마이크로소프트(MS) 미국 본사는 시애틀 인근 레드몬드에 있으며 AI기반 플랫폼과 도구를 개발, 고객의 변화하는 요구에 부응하는 혁신적인 솔루션을 제공하고 있다. "마이크로소프트(MS)는 AI를 널리 보급하고 책임감 있게 사용하기 위해 노력하고 있다"면서 "지구상의 모든 사람과 조직이 더 많은 성취를 이룰 수 있게 돕는 걸 사명으로 삼고 있다"고 설명했다. 이 리드는 국내 엔터프라이즈 LLM(Large Language Model) 시장이 "아직 초기 단계"라고 짚었다. 이어 "엔터프라이즈 LLM이 일반 LLM과 차이가 크다고 보기 어렵지만 보안이나 환각(할루시네이션) 현상 부분은 더 민감한 영역이므로 이에 대한 안정성 측면에서 고려할 사항이 많고 산업에 특화한 모델 필요성이 있다"면서 "많은 기업이 관심을 갖고 있지만 상대적으로 이런 모델을 개발하거나 활용하는 기업이나 기관이 많지 않다"고 해석했다. 이의 주요 이유로 데이터 부족, 개인정보 보호, 모델 안정성, 윤리 문제든 그는 "이번 강연에서 글로벌 기업의 LLM 활용방법과 기술 수준을 소개하고, 생성형 AI을 활용해 생산성을 향상시킬 수 있는 방법과 사례도 공유하려 한다"고 밝혔다. 해외 엔터프라이즈 LLM 시장은 모델을 공급하는 기업 뿐 아니라 인프라스트럭처(인프라), 플랫폼, 응용프로그램(애플리케이션), 서비스를 제공하는 계층으로 나눠져 있다. "기업입장에서는 LLM을 직접 만들기 보다 이미 나온 LLM을 잘 활용하는 측면이 강하다"면서 "자연어를 이용한 새로운 정보 검색과 자동화 솔루션과 접목해 고객대응 시스템에 생성형 AI를 적용한 사례는 이미 널리 사용되고 있다. 초기에 AI에 투자를 한 기업들이 의미 있는 성과를 보이고 있는 점도 시사하는 바가 크다"고 말했다. 이 리드는 엔터프라이즈(기업, 공공, 교육 등) 시장이 LLM을 도입하고 활용해야 하는 이유에 대해 "이미 AI는 모든 산업을 변화시키고 있다. B2B영역에서는 생산성의 비약적인 증가를 꼽을 수 있다. 또 높아진 생산성을 통해 직원 업무 만족도를 향상시킬 수 있을 뿐 아니라 업무 효율성도 증가시킬 수 있다. 이것은 바로 매출 및 고객증가와 연결돼 있다"면서 "B2C영역에서는 생성AI의 초개인화(Hyper-Personalization) 기능을 통해 고객에게 맞춤형 서비스를 제공할 수 있다. 이 점 역시 생성AI를 기업이 도입해야 하는 이유"라고 진단했다. 엔터프라이즈LLM가 지금보다 확산하려면 보안과 여러 기술 및 기업문화 이슈를 해결해야 하는데 이 리드는 "이미 안전한 AI를 사용하기 위한 제반 기술 요건은 LLM을 공급하는 업체들이 갖고 있다"면서 "마이크로소프트(MS)의 경우 애저(Azure) 클라우드 환경을 통해 보안을 강화한 시스템 위에 LLM 서비스를 운영할 수 있게 제공하고 있다. 또 책임있는 AI(Responsible AI) 서비스 일환으로 AI응답을 모니터링 하기위한 '콘텐츠 안전(Contents Safety)' 기능도 제공하고 있다"고 밝혔다. 이어 "(MS는) 고객 데이터를 이용해 LLM 개선 학습을 진행하지 않고 프롬프트 데이터 역시 철저한 보안 정책을 통해 안전하게 사용할 수 있게 하고 있다"면서 "무작정 금지하기 보다 강화한 보안정책에 잘 적용할 수 있는 LLM을 활용하는 방안을 찾는 문화가 먼저 정착해야 한다"고 제안했다. 특히 이 리드는 거대 테크기업간 자본 싸움이 된 세계 AI시장에서 국내외 스타트업이 생존하기 위한 '비법'도 제시했다. "특정 LLM 종속성과 데이터 국외 유출에 대한 과도한 우려로 LLM도입을 늦추기 보다 잘 활용할 수 있는 방안을 먼저 고민해야 한다. 한국에 특화한 LLM을 개발하는 것은 장기 관점에서 반드시 필요한 일"이라면서 "하지만 모든 기업이 자체 LLM을 개발하는 것보다 우선 LLM을 잘 활용할 수 있는 방안을 고민하는 것이 먼저"라고 지적했다. 이어 "LLM은 좋은 도구다. 하지만 LLM이 모든 기업의 목적이 돼서는 안 된다"면서 "LLM자체 보다 활용에 먼저 집중을 하면 기업 규모에 관계없이 소비자가 원하는 서비스와 가치를 만들어 낼 수 있을 것"이라고 밝혔다. 이어 아무리 좋은 레시피(조리법)가 있어도 재료가 좋지 않거나 없다면 맛있는 음식을 만들 수 없는 것처럼 LLM을 사용할 때 양질 데이터가 없다면 결코 좋은 AI서비스를 만들 수 없다면서 "AI를 잘 사용하기 위해서는 좋은 데이터와 다량의 데이터는 필수다. 근본적인 경쟁력은 LLM도입 그 자체가 아니라 얼마나 데이터를 잘 활용하느냐가 경쟁력을 확보하는데 더 중요한 요소"라고 강조했다.

2024.05.16 23:00방은주

스노우플레이크 "AI 개발자 일 평균 90개 앱 개발”

스노우플레이크는 대규모언어모델(LLM) 앱 중 챗봇 비중이 지난해 5월 대비 46%까지 증가했다고 16일 밝혔다. 스노우플레이크는 9천 개 이상 고객을 대상으로 데이터 및 AI 도입의 패턴과 트렌드를 조사해 '데이터 동향 2024 보고서'를 발간했다. 글로벌 엔터프라이즈 기업들이 AI 기술과 데이터를 비즈니스에 어떻게 활용하고 있는지를 다룬 이 보고서는 텍스트 입력 방식의 LLM 앱의 비중은 줄고(2023년 82%, 2024년 54%) 대화형 챗봇이 늘어나고 있다고 분석했다. 또한 스트림릿 개발자 커뮤니티를 대상으로 실시한 설문 조사에서 응답자의 약 65%가 업무용으로 LLM 프로젝트를 진행하고 있다고 답했다. 실제로 엔터프라이즈 고객들은 생성형 AI 기반 기술을 업무의 생산성, 효율성, 분석력을 높이는데 다양하게 사용하고 있다. 스노우플레이크 스트림릿 커뮤니티에 속한 전세계 약 2만 명 이상의 개발자들은 지난 9개월 동안 3만 3143개 이상의 LLM 앱을 구축했다. 이들이 가장 선호하는 프로그래밍 언어는 파이썬이었다. 스노우플레이크의 앱 구축 플랫폼인 스노우파크에서 지난해 파이썬 사용량은 5.71배 증가했다. 이는 3.87배, 1.31배 늘어난 스칼라, 자바에 비해 높은 수치다. 파이썬은 프로토타입 및 테스트 속도를 높여 전체 작업 속도는 물론 최첨단 AI 프로젝트의 초기 단계에서 전반적인 학습 속도를 높인다. 최근에는 LLM 앱을 개발할 때 데이터 관리 플랫폼 위에서 프로그래밍하는 사례도 늘고 있다. 스노우플레이크 플랫폼에서 직접 앱을 개발할 수 있는 활용도는 지난해 7월부터 올해 1월, 7개월 사이 3배 이상 증가했다. 단일 데이터 플랫폼에서 개발한 애플리케이션은 외부 업체로 데이터 복사본을 내보낼 필요가 없어 앱 개발과 배포가 빨라지고 운영 및 유지보수 비용을 줄일 수 있다. AI 도입과 함께 조직 내 비정형 데이터에 대한 분석과 처리도 늘었다. 이 과정에서 활용되지 않은 새로운 데이터 소스를 발견할 수 있고, 민감한 개인 데이터를 보호하기 위한 데이터 거버넌스도 중요해졌다. 스노우플레이크 보고서에 따르면 기업들이 지난 한 해 동안 처리한 비정형 데이터의 양은 1.23배 증가했다. 글로벌 시장분석 기관 IDC는 전 세계 데이터의 최대 90%를 비정형 동영상과 이미지 및 문서로 추산하고 있다. 이미 언어모델 훈련이 일반화된 정형 데이터와는 달리 비정형 데이터의 가공은 기업의 비즈니스 경쟁력을 높일 수 있는 새로운 기회가 될 것이다. 제니퍼 벨리센트 스노우플레이크 데이터 전략 수석은 “데이터 거버넌스는 데이터를 통제하는 것이 아니라 궁극적으로 데이터의 가치를 활용하는 것”이라고 강조하며 “스노우플레이크는 거버넌스를 ▲데이터 수집 ▲데이터 보안 ▲데이터 활용, 3가지 축으로 분류하고 고객들은 기업에 적합한 액세스와 사용 정책을 적용하기 위해 데이터를 태그하고 분류할 수 있도록 했다”고 설명했다. 그 결과, 스노우플레이크 고객의 데이터 거버넌스 기능을 도입한 기업은 70%에서 100%로 늘었고, 거버넌스 내 운영되는 쿼리 수도 142% 증가했다. 더불어 벨리센트 수석은 “각각의 데이터들은 기업들이 당면한 문제에 대해 어떻게 대응하는지를 보여준다. 이 개별적인 데이터 포인트들을 전체로 보면, 최신 AI 기술 기회를 활용한 조직의 통합적인 전략을 세울 수 있다”며 “생성형 AI 시대의 핵심 전략은 데이터를 바꾸는 근본적인 변화가 아니라 그 전략을 바로 실행하도록 하는 것이다. 이를 위해서 기업들은 광범위한 데이터 생태계에 펼쳐진 데이터소스를 오픈하고 공유해 데이터 사일로를 허무는 것이 중요하다”고 전했다. 제니퍼 벨리센트 스노우플레이크 데이터 전략 수석은 "대화형 앱은 사람들이 실제 상호작용하는 방식으로 프로그래밍돼 이제 사람과 대화하듯 LLM과 쉽게 상호작용할 수 있다”며 “특히 LLM 앱의 기초가 되는 데이터의 거버넌스와 보안이 보장된다면 대화형 앱은 기업과 사용자 모두의 기대치를 충족하며 활용도가 확대될 것”이라고 밝혔다.

2024.05.16 16:19김우용

알리바바클라우드, LLM 최신 버전 '큐원 2.5' 출시

알리바바클라우드는 자사의 대규모언어모델(LLM) 제품군의 최신 버전인 큐원2.5(Qwen 또는 퉁이 첸원)를 출시하고, 주요 성과를 16일 발표했다. 지난해 6월 이후 큐원 제품군은 알리바바 클라우드의 모델스튜디오를 통해 9만 이상의 기업에게 채택받는 성과를 달성했다. 다양한 산업군의 기업들이 큐원을 선택함으로써 큐원은 소비자 전자제품, 자동차, 게임 등의 분야에서 입지를 다졌다. AI 솔루션 수요 증가에 따라, 알리바바 클라우드는 큐원의 최신 버전으로 큐원2.5를 출시하며, 오픈소스 커뮤니티에 대한 약속과 지속적인 노력을 바탕으로 새로운 큐원 모델 시리즈도 함께 공개했다. 기업 사용자의 급증하는 AI 수요를 충족하기 위해 모델스튜디오를 업그레이드하여 새로운 AI개발 리소스를 제공하기로 했다. 작년 6월 AI개발 플랫폼 출시 이후, 9만 이상의 기업 사용자가 모델스튜디오를 통해 큐원 언어 모델들을 사용했다. 알리바바 그룹의 지능형 협업 작업 공간이자 애플리케이션 개발 플랫폼인 딩톡에서 큐원을 기반으로 한 AI 서비스를 약 220만 명의 기업 사용자가 활용한 것으로 확인된다. 5억부터 1천100억 개에 이르는 다양한 매개변수 모델을 자랑하는 오픈소스 큐원 시리즈는 허깅페이스, 깃허브 같은 플랫폼에서 700만 건 이상의 다운로드 횟수를 기록했다. 알리바바클라우드가 주도하는 중국 최대의 AI 모델 커뮤니티인 '모델스코프'는 현재 4천 개 이상의 모델을 보유하고 있으며, 지난 몇 년간 활발히 참여한 500만 명의 개발자 기반을 확보했다. 새롭게 출시된 큐원2.5는 이전 버전인 큐원2.0에 비해 추론, 코드 이해력, 텍스트 이해력 등에서 현저한 발전을 이뤘다. 최근에 출시된 모델스튜디오를 통해 사용할 수 있다. 대규모 모델 평가 시스템인 오픈콤파스에 따르면 큐원2..5는 다양한 범주에서 SOTA (State-Of-The-Art) LLM 중 상당히 경쟁력 있는 결과를 보여줬다. 오픈소스 커뮤니티 발전의 기여에 전념하는 알리바바 클라우드는 큐원을 다양한 사이즈로 제공한다. 여기에는 '오픈LLM 리더보드'의 사전 학습 모델 부문에서 최상의 성능을 보인 1천100억 개의 매개변수를 갖춘 큐원1.5-110B와 70억 개의 매개변수를 가진 코드 최적화 버전인 코드큐원1.5-7B가 포함된다. 이 모델은 현재 '허깅페이스'의 '빅코드 모델 리더보드'에서 기본 모델 중 최상위에 있다. 알리바바 클라우드는 또한 다음 몇 달 이내 큐원2.0의 70억 매개변수와 720억 매개변수 변형을 공유할 계획이다. 샤오미는 알리바바클라우드의 모델을 자사의 AI 어시스턴트 '샤오AI에 통합해 최신 스마트폰 제품 및 스마트 전기 자동차에 이미지 생성 및 기계 독해와 같은 기능을 지원하고 있다. 이 통합은 음성 명령만으로도 샤오AI가 자동차 인포테인먼트 시스템에서 이미지를 생성할 수 있게 하면서, 승객들에게 상호 작용하는 엔터테인먼트 옵션을 제공해 차량 내에서 풍부한 경험을 할 수 있도록 한다. 샤오미 스마트폰 사용자들은 알리바바 클라우드의 이미지 생성 모델인 퉁이 완시앙과 고급 비전-언어 모델인 '큐원-VL' 등을 이용해 이미지 제작, 사진 분석, 음식 이미지로 레시피 생성 등 다양한 애플리케이션을 이용할 수 있어, 이를 통해 전반적인 사용자 경험이 향상될 것으로 기대된다. 알리바바클라우드는 2022년 이후 서비스형 모델 MaaS 을 통해 개발자가 AI 모델 개발을 간소화하고, AI 혁신을 이루도록 종합적인 서비스 스택을 제공한다. 알리바바 클라우드는 모델 학습 및 추론을 보다 비용 효과적이고 효율적으로 만들기 위해 자사 생성형 AI모델 및 애플리케이션 개발 플랫폼인 모델스튜디오를 전반적으로 업데이트했다. 이번 업데이트에는 더 다양한 모델과 정교한 AI 도구 및 서비스가 포함됐다. 개발자들은 이제 Baichuan AI와 같은 제3자 AI 기업의 고품질 모델에도 접근할 수 있다. 모델스튜디오의 다양한 포트폴리오는 이미 다양한 사이즈의 큐원을 포함 100개 이상의 모델이 포함되어 있다. 새롭게 개편된 모델스튜디오는 다양한 고급 개발자 도구가 포함되어 있으며, 챗봇 및 분석 도구와 같은 애플리케이션 개발을 위한 LLM을 개선하는 데 도움이 되는 오픈 소스 프레임워크인 LlamaIndex를 통합하고 있다. 이에 더해 어시스턴트 API(Assistant API)라는 새로운 기능이 공개되어 복잡한 AI 어시스턴트 개발을 간편하게 한다. 이 기능은 검색 증강 생성(RAG) 기술을 신속하게 통합해 상황에 맞는 응답을 생성하고, 다중 에이전트 조정 및 메모리 관리와 같은 고급 기능을 지원한다. 알리바바 클라우드의 저우징런 CTO는 “지금까지 알리바바 클라우드의 LLM 제품군인 큐원이 강력해지고 빠르게 성장하는 것을 지켜보는 것은 매우 흥미로운 여정이었으며, 여러 산업 분야에서 큐원 모델을 창의적으로 적용한 수많은 사례를 보았다”며 “그동안 알리바바 클라우드는 큐원 모델의 기능을 지속적으로 향상하고 AI 개발 서비스 제품군을 강화해 고객에게 더욱 혁신적인 애플리케이션을 제공하기 위해 끊임없이 노력해 왔다”고 밝혔다. 저우징런 CTO는 “앞으로도 다양한 AI 모델을 오픈소스 커뮤니티에 제공할 것이며, 최신 생성형 AI 개발의 급격한 증가로 인해 생겨나는 무수한 성장 기회들을 포착하기 위해 고객 및 개발자들과 함께 협업하기를 기대한다”고 덧붙였다.

2024.05.16 16:16김우용

크라우드웍스, 프랑스 파리 '비바테크' 전시회 2년 연속 참가

크라우드웍스(대표 김우승)가 이달 22일부터 25일까지 프랑스 파리에서 열리는 유럽 내 스타트업 & 테크 전시회 '2024 비바테크놀로지(이하 비바테크)'에 2년 연속 참여한다고 14일 밝혔다. 2016년부터 시작한 비바테크 전시회는 전 세계 스타트업, 투자자, 바이어, 미디어 등이 모여 최신 기술 동향을 교류하는 국제 행사다. 지난해에는 참관객 15만명, 2천800여개의 유망 기술 스타트업들이 참가할 만큼 반응이 뜨거웠다. 이번 전시회 참여를 통해 대한민국 대표 AI 스타트업으로서 유럽 시장 내 기업 인지도를 높이고 다양한 협업 방안을 모색할 수 있을 것으로 기대된다. 크라우드웍스는 이번 전시에서 엔터프라이즈 AI 시장을 공략할 계획이다. 국내 시장에서 빠르게 확보한 기업 맞춤형 거대언어모델(LLM) 구축 레퍼런스 중에서도 유럽 시장에서 관심이 높은 헬스케어, 리테일 부문의 성공적인 LLM 구축 사례를 소개하며 해외 고객 발굴에 나선다. 또 데이터 설계, 가공, 구축에 대한 높은 이해와 전문성을 강조하고 맞춤형 LLM 도입을 위한 최신 솔루션과 서비스들을 소개해 데이터 중심의 AI 기술 경쟁력을 전파할 계획이다. 특히 크라우드웍스는 프랑스 현지에 있는 '스테이션F'에 거점을 두고 있어 이번 전시회 참가를 통한 시너지를 확대할 수 있을 것으로 기대된다. 스테이션F는 스타트업 인큐베이터로 유럽 시장 진출을 위한 네트워킹과 협력 기회를 모색하기 위한 채널이 되고 있다. 지난해 5월 입주 이후 해외 잠재 고객들과 빠르게 연결되며 해외 시장에서의 가능성을 확인했다. 김우승 크라우드웍스 대표는 "비바테크 참여로 국내 AI 산업 발전을 이끌어온 크라우드웍스의 기술과 역량을 유럽 시장에 소개할 수 있는 좋은 기회가 될 것으로 기대된다"며 "글로벌 기업들과의 다양한 협력 기회를 적극적으로 모색하며 해외 시장에서 의미있는 성과를 성공적으로 이뤄낼 것"이라고 말했다.

2024.05.14 13:47백봉삼

딥엑스, 1100억원 규모 신규 투자 유치…스카이레이크 등 참여

AI반도체 원천기술 기업 딥엑스는 사모펀드 기관들의 신규 투자를 중심으로 1천100억 원 규모의 신규 투자 유치를 마무리했다고 10일 밝혔다. 이로써 딥엑스는 글로벌 시장 진출을 위한 1세대 제품의 양산화와 LLM 온디바이스를 위한 차세대 제품 개발 및 출시에 더욱 속도를 낼 계획이다. 이번 투자에는 기존 주주인 ▲타임폴리오 자산운용을 비롯해 ▲스카이레이크 에쿼티파트너스 ▲BNW인베스트먼트 ▲아주IB 등 사모펀드 기관들이 참여했다. 사모펀드 중심의 투자가 단행된 점, 신규 투자자들이 대부분의 투자금을 차지한 점, 반도체 산업에 대한 전문적인 지식과 경험 그리고 네트워크가 풍부한 전문가들이 포진한 투자자로 구성된 점이 이번 투자의 특징이다. 딥엑스의 2대 주주가 된 스카이레이크는 '미스터 반도체'라 불리는 진대제 전 정보통신부 장관이 설립한 국내 대표 사모펀드 기관이다. 진대제 회장은 삼성전자 재직 시절 세계 최초로 메모리 반도체 16MB, 256MB D램의 개발을 이끈 주역으로 한국 반도체 산업을 상징하는 인물이다. 김재욱 BNW인베스트먼트 회장 역시 삼성전자 메모리 제조 기술 담당 사장 등을 역임해 메모리 제조공정 혁신을 이끌며 삼성전자 메모리 글로벌 1위를 만들어 낸 국내 반도체 산업의 권위자다. 딥엑스는 온디바이스 AI 반도체 및 AI 컴퓨팅 솔루션에 대한 원천기술을 보유한 기업이다. 물리 보안, 로봇, 가전, 공장자동화, AI 서버 등 다양한 응용 제품에 AI를 저전력, 고성능, 저비용으로 구동할 수 있는 AI 반도체 제품군을 확보했다. 또한 딥엑스는 올해 말부터 시작되는 대단위 양산 비즈니스를 위해 대륙별로 총판 협약을 진행하며 벨류체인 네트워크를 빠르게 확산하고 있다. 김녹원 대표는 “스카이레이크의 진대제 회장님은 제가 반도체를 배우던 학창 시절에 국내 반도체 산업을 세계 시장의 주역으로 만든 분"이라며 "딥엑스가 쌓아 온 기술적 가능성을 가장 정확하게 판단해 주실 최적의 전문가라고 생각해 투자를 요청하게 된 것이 이번 투자 라운드의 시작이었다"고 밝혔다. 김녹원 대표는 이어 "이번 투자는 글로벌 전략 자산인 AI 반도체 원천 기술과 국내 최초 글로벌 팹리스 탄생이라는 숙원의 과제를 성취하라는 명령으로 생각하고 과감하게 글로벌 시장에 도전하고자 한다"고 덧붙였다.

2024.05.10 09:06장경윤

"LLM 구축, '프로세스 GPT'가 해법"

"이번 강연에서는 LLM(거대언어AI)을 이용한 정보시스템 구축 방향으로 '프로세스 GPT(Process GPT)'라는 시스템을 제시하려고 합니다." 장진영 유엔진솔루션즈 대표는 9일 지디넷코리아와 인터뷰에서 이 같이 밝혔다. 장 대표는 오는 22일 오전 10시~오후 6시 서울 강남 뱅뱅사거리 인근 드림플러스 이벤트홀(지하 1층)에서 열리는 '우리 조직에 맞는 엔터프라이즈 LLM 세미나'에서 연사로 나선다. 이 행사는 투이컨설팅(대표 김인현)과 트러스트커텍터(대표 윤석빈)가 개최하고 지디넷코리아가 후원한다. 데이터 유출같은 보안 문제와 비싼 API 사용료, 복잡한 인프라 구축, 내부 시스템 연계 어려움 등으로 LLM 도입을 주저하거나 LLM을 도입하려는 기업에 도움을 주기 위해 마련했다. 장 대표가 2007년 설립한 유엔진솔루션즈는 자체 오픈소스 BPM(Business Process Management) 제품인 '유엔진(uEngine)'을 주력으로 하고 있으며 금융, 공공, 제조, 통신 등 국내외에 100여개의 적용 레퍼런스를 보유하고 있다. 마이크로서비스아키텍처(MSA) 설계 컨설팅과 교육으로 8000명 이상 교육생을 배출하기도 했다. 지난 3월에는 5년간 개발한 'MSA Easy'를 오픈소스로 공개했다. 'MSA Easy'는 사용자만의 프로그램을 만들거나 기존 프로그램을 개선하는 걸 돕는다. 자체 제품화나 사내 시스템 구축에 도움이 된다. 특히 클라우드 기반 애플리케이션 개발을 간소화해준다. 오는 22일 강연에 대해 장 대표는 "기존 정보시스템들은 사용 관점과 관리 관점으로 나뉘어 많은 비용이 존재한다. 사용자 관점에서는 주로 사용자가 정해진 시스템의 특징과 사용방법을 잘 숙지하고 사용해야 했다"면서 "LLM은 자연어를 기반해 사용자 의도와 상황을 추측해 시스템의 어떤 기능과 화면을 이용해 입력해야 하는지를 자동화할 수 있다. 적절한 업무 처리를 위한 초안은 LLM 에이젼트 기술이 직접 수행해 초안을 제공할 수 있다. 예를 들어 제안서를 써야한다면, 해당 주제와 관련한 기존 사내 지식을 RAG(Retrieval-Augmented Generation, 검색증강생성: 응답 생성전에 학습 데이터 소스 외부의 신뢰할 수 있는 지식 베이스를 참조하도록 하는 프로세스)를 통해 수집하고 외부 인터넷 검색 결과를 참고해 기본 제안서를 작성하는데 LLM 도움을 받을 수 있다"고 설명했다. 이어 그는 시스템관리 관점에서는 기존 프로그래밍에 의존해 데이터베이스 설계, 화면 구현, 로직 구현 등 많은 전문성이 요구된다면서 "이러한 과도한 정보시스템 구축비용을 낮추기 위한 로우코드와 노코드, RPA(Robotic Process Automation, 로봇프로세스자동화)등 많은 시도와 최근의 LLM을 이용한 코드 생성 등이 새로운 가능성으로 부상하고 있다"면서 "하지만 여전히 그 결과는 어떠한 코드 형태로, 특히 이를 관리하기 위해서는 어떤 형식이든 소스코드를 이해해야 하는 비용이 존재한다"고 짚었다. LLM을 이용한 정보시스템 구축 방향으로 'Process GPT'를 강조한 장 대표는 이의 장점으로 "사용자 관점에서는 내 업무 상황을 인지해 프로세스와 업무처리 기능을 자동으로 제시할 뿐 아니라 복잡한 정보시스템 화면 숙지로 입력이 아닌 자연어로 업무 결과를 입력하며, 또 내가 처리할 업무의 초안도 제시해준다"고 말했다. 이어 "시스템을 관리할때는 소스코드 없이도 일반 업무 전문가가 업무 프로세스와 비즈니스 규칙, 그리고 업무화면 등을 업무 수행중 발생한 대화 이력에서 자연스럽게 추출하고 그 프로세스를 비즈니스 유저 수준에서 이해하기 쉬운 BPMN과 같은 비쥬얼한 언어로 시각화해 LLM 실행엔진에서 해당 규칙을 관리할 수 있게 하는 하는 새로운 개념의 정보시스템 구축 방법"이라면서 "이 방법은 기존 BPM(Business Process Management)에서 나온 개념으로 LLM 파워와 함께 정보시스템 구축을 위한 데이터베이스 설계, 프로세스 설계 실행, UI 개발 등 상당 부분을 추상적으로 처리하면서도 업무 모니터링, 분석, 지속 개선 사이클을 가져갈 수 있는 많은 부가적인 장점을 갖고 있다"고 강조했다. 국내외 엔터프라이즈 LLM 시장 동향에 대해서는 "해외 엔터프라이즈 솔루션들은 정보시스템 구현과 관리를 위한 로우코드, RPA, BPM 제품이 우리 회사와 같은 코그너티브(Cognitive) RPA/BPM 형식으로 출시돼 향후 많은 시장을 형성할 것으로 보인다"면서 "관전포인트는 얼마나 사용자 위주 쉬운 인터페이스와 관리비용을 낮출 수 있고 또 핵심적인 비즈니스 경쟁력을 위한 LLM의 적절한 적용 솔루션을 제시하는냐"고 진단했다. 기존 정보시스템은 사용과 관리에 있어 너무 과중한 학습시간과 전문적 비용이 소요된다고 짚은 그는 "LLM은 시스템 사용에 대한 추상화레이어를 제공해 "이제 우리가 배워야 할 가장 강력한 언어는 자연어”라고도 한다"면서 "LLM을 본질적인 의사결정에 적용할수는 없지만 기업의 불필요한 업무를 최소화하고, 또 초안 작성과 프로세스를 자동으로 개선하는 등의 비생산적인 영역에 도입함으로써 고객과 국민 만족도를 향상하는데 도움을 받을 수 있다"고 짚었다. 보안 이슈 등 엔터프라이즈 LLM 확산에 여러 기술 및 기업문화 이슈가 있는데 이에 대해서는 "대내 보안은 RAG 등으로 검색한 다양한 참조 정보 출처에 대한 메타데이터에 따른 인가처리가 중요하다"면서 "대외 보안은 폐쇄형 LLM을 적절히 적용해 외부로의 유출을 막아야 한다. BPM 기반 정보시스템은 기본적으로 대내외 프로세스에 대한 역할 기반 인증체계와 보안 프로세스를 엄격히 관리하고 전달하는 접근 권한에 대한 룰 기반 제어가 엄격해 보안을 관리할 수 있는 좋은 수단이 될 수 있다"고 밝혔다. LLM과 생성 AI를 활용한 기업의 수익화 방안에 대해서는 "내부 생산성 향상을 넘어 LLM 자체로수익화를 내는 건 더욱 큰 숙제"라며 "AI기술 전반에 있어 기계가 모든 것을 다 수행하는 듯한 화려한 기능의 제공 보다는 인간이 의사결정을 쉽게 할 수 있는 조력 역할로 시스템의 UI/UX와 함께 적은 에너지로 높은 성과를 낼 수 있게 가치를 제공하는 것이 중요하며 그 가치가 높다면 수익화는 자연스레 따라올 것"이라고 예상했다. AI 강국에 대해 한마디 해달라고 하자 장 대표는 "어려운 질문"이라고 전제하며 "AI는 일종의 인프라가 되고 있다. 전기처럼 아무나 쓸 수 있는 기반이 된 거다. 이제 기반 고속도로를 제공하는 자본기반 비즈니스 모델과 그 기반위에 차별화한 버티컬 영역이나 탁월한 사용성 등으로 경쟁하는 비즈니스 모델로 양극화 될 것 같다. 우선 내가 가진 콘텐츠 장점을 잘 이해하고 그것이 AI를 통해 더 큰 강점이 될 수 있는 전략을 잘 세워야 할 것 같다"고 말했다.

2024.05.10 06:44방은주

[유미's 픽] 삼성도 챗GPT로 기밀 샐까 골머리…'AI 보안' 선두 경쟁 본격화

#. 지난해 5월. 삼성전자는 회사 내부 기기에서 생성형 인공지능(AI) 사용을 금지했다. 삼성전자 반도체(DS) 부문 직원들이 같은 해 3월 소프트웨어 소스코드의 오류를 확인하고 회의 내용을 요약하는 등의 업무를 위해 챗GPT에 소스코드, 회의 내용 등을 입력했다가 문제가 발생했기 때문이다. 이에 삼성전자는 "사내 PC를 통한 생성형 AI 사용을 일시적으로 제한한다"며 "사외에서 챗GPT 등 생성형 AI를 사용하는 경우에도 회사와 관련된 정보, 본인 및 타인의 개인정보 등은 입력하지 않도록 각별히 유의해 달라"고 당부했다. 이처럼 오픈AI '챗GPT', 구글 '제미나이' 같은 생성형 AI를 통한 검색이 최근 활발히 이뤄지며 기밀 정보 유출 우려가 높아진 가운데 기업을 중심으로 '보안'의 중요성이 점차 커지고 있다. 보안이 AI 산업의 한 축이 될 것으로 전망되면서 국내외 업체들도 앞 다퉈 대응에 나선 모양새다. 7일 업계에 따르면 마이크로소프트(MS)는 지난달 1일 '코파일럿 포 시큐리티(Copilot for Security)'를 출시하며 기업 공략에 본격 나섰다. 이 서비스는 IT 및 보안 담당자를 위한 생성형 AI 보안 솔루션으로, 오픈AI GPT-4와 MS 자체 보안 특화 AI 모델을 기반으로 구동된다. MS는 지난해 3월 사이버보안 업계 첫 생성형 AI 보안 서비스라는 이름으로 이 시장에 첫 발을 내딛었다. 당시 이 서비스는 챗봇처럼 위협 요인을 알려주는 구동 방식에 그쳤다. 이번에 나온 '코파일럿 포 시큐리티'는 프롬프트 입력 시 사고 요약, 취약점 분석도 가능하다는 점에서 한 단계 더 진화됐다는 평가다. 이에 맞춰 체크포인트 소프트웨어 테크놀로지스는 보안 작업 필요 시간을 10%로 줄이는 AI 보안 솔루션 '인피니티 AI 코파일럿'을 올해 2월 선보였다. 체크포인트는 MS의 오랜 파트너인 사이버 보안 플랫폼 기업으로, 현재 프리뷰 형태로 이 서비스를 제공 중이다. 2분기에 정식 출시를 앞둔 '인피니티 AI 코파일럿'은 보안 정책을 변경하고 직원 내 담당 권한을 변경하는 작업도 가능한 것이 특징이다. 글로벌 보안 시장을 이끌고 있는 팔로알토 네트웍스는 AI 열풍 이전인 12여년 전부터 사이버 보안에 AI·머신러닝(ML)을 활용해 업계 선구자로 통한다. 최근에는 보안관제 인력난에 대한 해결책으로 '확장된 보안 인텔리전스 자동화 관리(XSIAM)'를 내세워 AI를 통한 보안운영센터(SOC)의 운영 효율을 높이기 위해 애쓰고 있다. 구글도 AI로 보안 강화에 나설 것이란 뜻을 내비쳤다. 순다르 피차이 구글 최고경영자(CEO)는 지난 2월 독일 뮌헨 안보회의에서 "사이버 해커는 시스템을 공격하기 위해 한 번만 성공하면 되지만, 방어자는 시스템을 보호하기 위해 매번 성공해야 한다는 딜레마가 있다"며 "(AI는) 이러한 딜레마를 줄여줄 것"이라고 밝혀 눈길을 끌었다. 국내 업체 역시 AI 기술을 적용해 서비스 경쟁력을 끌어 올리고 있다. 안랩은 현재 연구소 산하에 '인공지능팀'을 두고 머신러닝 기술을 통한 솔루션·서비스 탐지 기능 고도화 작업에 집중하고 있다. 또 AI를 악성코드와 피싱 이메일, 스미싱 문자 등을 탐지하는데도 활용 중이다. 여기에 생성형 AI 기술 개발을 통해 확장된 탐지 및 대응(XDR) 플랫폼 '안랩 XDR'에서 보안 담당자의 업무를 더 끌어올릴 수 있는 'AI 시큐리티 어시스턴트'도 개발 중이다. 업계 관계자는 "보안업체들은 판정형 AI업체의 서비스를 생성형 AI와 결합해 기술을 고도화 하던가, 생성형 AI가 기존에 가지고 있는 보안 문제를 최소화 하는 것에 집중하고 있다"며 "이들이 다양한 방식으로 AI 기술을 활용하는 것은 자연스러운 흐름"이라고 말했다. 일부 기업들은 AI를 활용해 보안 위협을 탐지하는 것에 그치지 않고 기업용 AI 시장에 직접 뛰어들고 있다. 내부 보안 혹은 사이버 위협·악성코드 분석 등 비정형 데이터를 포함한 데이터 분류와 필터링 기술에 강점을 갖고 있다는 점을 앞세워 보다 안전한 맞춤형 AI 서비스를 제공할 수 있다고 강조하고 나섰다. 데이터·애플리케이션 보안 사업에 집중했던 파수는 지난 3월 경량언어모델(sLLM) '엘름(ELLM)'을 출시하며 본격적으로 LLM 시장 경쟁에 나섰다. 구축형(온프레미스)으로 제공되는 엘름은 코딩, 법률, 세무, 금융 등 다양한 직군, 산업 환경에서 활용할 수 있는 것이 특징이다. 또 특정 작업이나 도메인에 맞는 작은 데이터 세트를 활용해 모델을 추가적으로 훈련시킬 수 있다. 이에 기업에선 특정 부서나 조직에서만 사용할 수도 있다. 사이버 위협 인텔리전스(CTI) 기업 S2W도 sLLM 플랫폼 'S-AIP(S2W Artificial Intelligence Platform)'를 내놨다. S-AIP는 각 기업이 가지고 있는 보안 수준에 맞춰 아키텍처를 구현하고, 데이터 보안 기술을 기반으로 기업용 프라이빗 sLLM 구축을 지원할 수 있다. 보안업계에서 떠오르고 있는 샌즈랩도 AI 기반 사이버 보안 사업 영역을 빠르게 고도화하고 있다. 이곳은 지난 2월 기업 내부 인프라에서 직접 운영, 제어가 가능한 온프레미스 sLLM '샌디(SANDY)'를 개발했다. 샌디는 기존에 사람이 직접 했던 보고서 요약·교정, 기업 내 해킹 대응 정보 검색을 대신 수행하며 최신 사이버 위협에 선제 대응할 수 있는 역량도 갖췄다. 이 외에 샌즈랩은 샌디를 기반으로 최근 포티투마루, LG유플러스와 사이버 보안을 강화할 수 있는 LLM 기술을 공동 개발키로 해 주목 받고 있다. 업계 관계자는 "국내 보안기업들이 생성형 AI 시장에 뛰어드는 이유는 데이터 보안·악성코드 분석 등의 분야에서 다년간 축적된 기술력과 노하우가 AI 데이터 학습에 유리하다는 판단 때문"이라며 "정보유출 등에 민감한 기업용 AI 분야에선 강점이 될 수 있을 것"이라고 분석했다. 이어 "보안 시장이 AI처럼 폭발적인 성장 잠재력을 갖추기 어렵다는 점에서 기존 보안 사업과 연계할 경우 AI를 새로운 성장동력으로 삼을 수 있을 것이란 점도 영향을 미친 듯 하다"며 "글로벌 단위에서 아직까지 AI 보안 시장을 이끄는 선두 업체가 마땅히 없다는 것도 매력적인 요소"라고 덧붙였다.

2024.05.07 16:19장유미

[기고] 스노우플레이크가 제안하는 기업 환경을 위한 생성형 AI

생성형 AI는 생산성을 개선하며 데이터에서 더 많은 가치를 창출하는 새로운 방법을 제시한다. 하지만 기업은 생성형 AI를 도입하기에 앞서 '데이터는 과연 신뢰할 수 있는 것인가?', '새로운 기술 채택을 위해 컴퓨팅 환경을 새롭게 구축해야 하는가?', '생성형 AI 기능을 제공하는 애플리케이션을 구축하고 운영해야 하는가?'와 같은 다양한 고민이 생긴다. 그런데 흥미로운 것은 이 모든 고민들의 출발은 '데이터'라는 분명한 사실이다. 기업은 올바른 데이터 전략 없이 올바른 AI 전략을 수립할 수 없다. 본 글에서는 스노우플레이크 단일 플랫폼에서 제공하는 생성형 AI와 관련 기능에 관해 설명하고자 한다. 기업 환경에서 안전한 생성형 AI 활용을 위해 데이터, 대규모언어모델(LLM), 심지어 생성형 AI 애플리케이션까지 일관되게 적용할 수 있는 광범위한 데이터 보안 및 거버넌스 체계를 구축해야 한다. 또한 데이터와 이 데이터로 학습된 모델을 포함해, 전체 생성형 AI 스택들이 안전하게 보호되어야 한다. 데이터 플랫폼과 LLM 환경을 통합하여 기업 데이터가 외부로 유출되는 것을 방지하고 새로운 기술을 위한 투자 비용을 최소화하는 것도 중요하다. 아래 그림은 스노우플레이크 데이터 클라우드 플랫폼에서 제공하는 생성형 AI 기능이다. 이 모든 기능은 데이터를 기반으로 한다. 기업 전반에 분산된 데이터는 데이터의 유형, 형식, 구조와 관계없이 단일 플랫폼에 통합돼 안전하게 보호 및 관리된다. ■ 데이터에 LLM 가져오기 생성형 AI를 위한 데이터가 준비되면 사용자는 LLM 관련 기능을 안전하고 자유롭게 사용할 수 있어야 하고, AI 애플리케이션도 빠르게 구축, 활용할 수 있어야 한다. 또한 생성형 AI가 제공하는 잠재력을 최대한 활용하기 위해서는 전문가뿐만 아니라 AI 전문 지식이 없는 사용자 누구라도 서비스를 쉽고 안전하게 접할 수 있어야 한다. 이를 위해 스노우플레이크는 데이터가 있는 환경에 LLM 관련 기능을 제공하고자 스노우플레이크 코텍스(Cortex)를 개발했다. 스노우플레이크 플랫폼에서는 미스트랄, 메타, 구글에서 제공하는 LLM 모델뿐만 아니라 자체 개발한 LLM이 내장된 상태로 제공된다. 다양한 LLM은 스노우파크 컨테이너 서비스(SPCS)를 통해 데이터 플랫폼 내에서 실행, 파인튜닝 된다. 코텍스에서 제공하는 다양한 기능으로 개발 생산성과 사용자 경험을 개선하고 새로운 분석 인사이트 또한 제공할 수 있다. 이러한 LLM 관련 기능들은 서버리스 기반의 완전 관리형 서비스로 제공되기 때문에, 사용자는 생성형 AI를 위해 높은 비용을 들여 GPU 인프라를 구축하거나 관리할 필요가 없다. 필요한 시점에 코텍스에서 제공하는 서비스를 사용할 수 있으며, 사용한 만큼의 비용만 과금되기 때문에 효율적인 비용으로 생성형 AI 기반의 새로운 사용자 경험을 누릴 수 있다. 스노우플레이크 플랫폼에 내장되지 않은 다른 LLM이나 AI21 랩스, 레카(Reka), 엔비디아 네모(NeMO) 등 상용 LLM들도 스노우플레이크 마켓플레이스를 통해 사용자 환경에 간편하게 설치하고 실행할 수 있다. ■ 스노우플레이크 코텍스 스노우플레이크 코텍스는 스노우플레이크 데이터 클라우드 플랫폼의 핵심 생성형 AI 기능이다. 코텍스는 사용자가 프롬프트를 정의할 필요 없이 번역, 감정 분석, 요약과 같은 작업을 빠르고 비용 효율적으로 실행할 수 있는 기능을 제공한다. 코텍스는 LLM에 관련된 다양한 기능들을 다음과 같은 관리형 함수로 제공한다. -EXTRACT_ANSWER(미리보기): 질문과 구조화되지 않은 데이터가 입력되면 질문에 대한 답변을 제공한다. -SENTIMENT(미리보기): 요청 받은 텍스트에서 감지된 긍정 또는 부정적 감정을 제공한다.(긍정:1, 부정:-1) -SUMMARISE(미리보기): 요청 받은 텍스트의 요약을 제공한다. -TRANSLATE(미리보기): 요청 받은 텍스트를 다른 언어로 번역한다. 코텍스의 첫 번째 장점은 사용 편의성이다. 생성형 AI 기능 구현을 위해 별도의 인프라 구축이나 관리가 필요 없다. 두 번째는 구현 편의성이다. 소개한 생성형 AI 기능들은 복잡한 구현 없이 단순하게 코텍스에서 제공하는 함수를 SQL이나 파이썬 코드에서 호출하면 된다. 이외에도 코텍스는 COMPLETE 함수와 TEXT2SQL 함수를 추가로 제공한다. -Complete(미리보기): 프롬프트의 입력값을 대상으로 LLM을 사용해 응답 텍스트 결과를 제공한다. -Text2SQL(미리보기): 프롬프트에 입력된 자연어를 기반으로 스노우플레이크에서 실행 가능한 SQL문을 제공한다. 이 함수들은 다양한 LLM을 서버리스 기반의 SQL 또는 파이썬 함수 형식으로 제공하는 것이 특징이다. 사용자는 미스트랄, 라마 및 구글의 LLM을 요구사항에 맞게 선택해 사용할 수 있다. COMPLETE와 TEXT2SQL 함수는 스노우플레이크 환경에서 운영되는 앱 개발에도 쓰일 수 있다. 스트림릿에서 개발한 단 몇 줄의 파이썬 코드로 특정 업무 목적에 맞는 챗봇을 개발하거나 커스터마이징한 코파일럿을 개발해 활용할 수 있다. ■ 도큐먼트 AI(미리보기 기능) 도큐먼트 AI는 스노우플레이크의 자체 멀티 모달 LLM을 활용해 비정형 파일(예: PDF, WORD, TXT 등)을 새로운 데이터 소스로 처리하는 기능이다. 비정형 데이터를 정형화할 수 있는 파이프라인 기능이 포함돼 있으며, 직관적인 UI로 데이터를 사전 학습하고 비정형 데이터에서 필요한 정보를 자연어 기반으로 쉽게 추출할 수 있다. ■ 유니버설 서치(미리보기 기능) 유니버설 서치는 스노우플레이크 플랫폼 내의 데이터와 앱을 간편하게 검색하고 사용할 수 있게 하는 LLM 기반 검색 기능이다. 데이터베이스, 테이블, 칼럼과 같은 메타 정보를 탐색하는 데이터 거버넌스 기능으로 활용할 수도 있다. 마켓플레이스의 데이터나 앱을 쉽게 검색하거나, 스노우플레이크와 관련된 기술 사항을 자연어 기반으로 질의하고 원하는 답변을 얻음으로써 사용자 경험을 개선하는 용도로 활용된다. ■ 스노우플레이크 코파일럿(미리보기 기능) 코파일럿은 자연어로 SQL을 생성하고 구체화하는 LLM 기반의 개발 도우미다. SQL을 모르는 사용자도 쿼리를 생성하고 구체화함으로써 데이터 분석에 대한 어려움을 낮추고 진정한 '데이터 민주화'를 경험할 수 있다. 이 텍스트 코드 변환 기능은 앞서 설명한 코텍스의 Text2SQL 함수를 사용해 함수 또는 사용자 애플리케이션에서 활용할 수 있다. ■ 스노우플레이크 아크틱 스노우플레이크는 올해 4월 아파치 2.0 라이선스로 업계 최고 수준의 개방성과 성능을 제공하는 기업용 LLM인 '스노우플레이크 아크틱'을 출시했다. 이 파운데이션 모델은 스노우플레이크만의 독창적인 전문가 혼합(MoE) 아키텍처로 설계돼 동급 최고의 성능과 생산성을 보인다. 스노우플레이크 아크틱은 다음과 같이 다섯 개의 서로 다른 용량을 가진 모델을 제공한다. 아크틱은 스노우플레이크 AI 연구소에서 실제 검색 워크로드에 중점을 두고 개발한 LLM이다. MTEB에 따르면 3억 3천400만 개의 매개 변수를 가진 아크틱(Snowflake Arctic-Embed-L) 모델은 오픈AI에 비해 추정 매개변수가 4분의 1 수준밖에 되지 않는다. 데이터의 차원은 3분의 1 수준이지만, 검색 성능은 더 높다. 이는 10억 개 이상의 매개변수를 가진 모델들도 달성하기 어려운 성능이다. 아크틱의 주요 특징은 다음과 같다. -아크틱 임베드 모델은 5가지 크기(X-Small부터 Large)로 제공된다. 모델의 크기는 2천300만~3억 3천400만 개의 매개변수로 구성돼 있으며, 사용자는 요구사항에 따라 적합한 모델을 선택하여 사용할 수 있다. -아크틱은 아파치 2.0 라이선스를 통해 제공되며, 가중치, 코드, 데이터 레시피 및 연구 과정에서 얻은 다양한 인사이트를 제공한다. -아크틱은 Dense + MoE 아키텍처를 혼용해 설계됐다. 이에 학습 효율성은 높아졌고 더 낮은 비용으로 더 나은 성능을 제공한다. 아크틱 모델의 크기는 유사한 품질의 임베딩 모델과 비교해 더 작기 때문에 대기 시간을 줄이고 TCO를 절감하는 데 도움이 된다. -검색 증강 생성(RAG) 또는 시맨틱 검색 서비스에서 아크틱을 사용할 경우, 높은 검색 성능에 기반한 고품질의 서비스를 제공할 수 있다. -스노우플레이크 아크틱은 현재 허깅페이스에서 직접 다운로드 받아 사용할 수 있으며, 곧 스노우플레이크 코텍스에 통합될 예정이다. 또한, 아마존웹서비스(AWS), 라미니, 마이크로소프트 애저, 엔비디아 API 카탈로그, 퍼플렉시티, 레플리케이트 및 투게더 AI의 카탈로그를 통해서도 제공될 예정이다. -일반적인 메트릭스를 위한 모델 훈련과 달리 아크틱은 SQL 생성, 코딩 지원 및 명령 이행과 같이 기업 환경에서 뛰어난 성능을 제공하기 위한 특화된 데이터 커리큘럼을 채택했다. 그동안 AI 모델 학습 알고리즘은 심층 신경망(DNN), 순환신경망(RNN), 장단기 기억(LSTM) 등을 거쳐 트랜스포머까지 꾸준히 발전해 왔지만, AI 모델 분야에서 트랜스포머 이후로 획기적인 발전을 이뤄내지는 못했다. 오픈AI가 매개변수를 늘려 LLM을 선보인 이후부터는 알고리즘 개선보다는 아키텍처 개선에 집중하기 시작했다. 현재 AI 아키텍처는 환각 현상, 경량화, 그리고 혼합이라는 세 가지 관점에 주력하고 있다. 아크틱의 가장 큰 장점은 앞서 설명한 세 가지 주력 사항을 모두 개선하는 독점적인 MoE 아키텍처를 기반으로 설계되었기 때문에, 작은 모델을 유지하면서도 효율적으로 실행한다. 다음 그림과 같이 아크틱은 유사한 다른 모델과 비교해 뛰어난 학습과 추론 성능을 보인다. 아크틱 모델 학습의 경우, 서로 다른 데이터 세트로 구성된 세 단계로 나눠 진행한다. 첫 단계에서는 1T 토큰을 사용해 일반적인 기술을 학습하고, 이후 두 단계에서는 1.5T 및 1T 토큰을 사용해 기업 중심의 기술을 집중적으로 학습한다. 이러한 점진적인 학습 과정은 더욱 복잡한 매트릭스를 효과적으로 학습할 수 있는 기반을 제공한다. 아크틱 모델 추론 효율성도 학습과 마찬가지로 좋은 성능을 제공한다. 아크틱 모델은 특정 작업을 수행할 때 필요한 매개변수만을 활성화 상태로 유지하기 때문에 전체적인 연산 비용을 절감하고, 빠르고 효율적인 추론을 가능하게 한다. 빠른 추론 성능은 기업 환경에서 LLM을 사용하는 경우 매우 중요한 평가 지표로 여겨진다. 일반적으로 LLM은 매개변수 수가 많은 모델을 의미한다. 이러한 파운데이션 모델의 가장 큰 문제점은 높은 비용이다. 초창기 LLM 분야에서는 고밀도 트랜스포머 아키텍처를 주로 선택했다. 모델 품질 개선을 위해 모델 크기를 쉽게 확장할 수 있었기 때문이다. 하지만 임계값 이상으로 모델 크기를 확장하기 위해서는 높아지는 연산 복잡도만큼 많은 컴퓨팅 비용이 소요된다. 오늘날 GPU는 매우 비싼 리소스이기 때문에 기존 고밀도 트랜스포머 모델을 학습하는 것은 시간과 비용 측면에서 큰 투자가 아닐 수 없다. 이러한 문제점을 해결하기 위해 사용된 방법이 MoE 아키텍처이다. MoE 아키텍처는 모델 레이어를 전문가 하위 네트워크가 원래 레이어와 동일한 크기의 MoE 레이어로 대체한다. 이로써 모델 학습과 추론에 필요한 컴퓨팅 비용을 증가하지 않으면서도 모델 품질을 향상한다는 장점이 있다. 스노우플레이크 AI 연구팀은 MoE 모델 내의 전문가 수와 전체 매개변수의 크기, 그리고 이 전문가를 조합하는 방법에 따라 모델 품질을 향상할 수 있다는 것을 입증했다. 480억 매개변수로 설계된 아크틱의 경우 세분된 128개의 전문가를 가지고 있으며, 이들 중 상위 2개의 전문가만 선택해 동작하도록 설계됐다. 이 과정에서는 17억개 규모의 매개변수만이 활성화되기 때문에 다른 MoE 아키텍처 기반의 LLM과 비교했을 때 탁월한 자원 효율성과 성능을 보인다. 또한, 스노우플레이크 아크틱은 학습 비용을 크게 절감했다. 이 모델은 아마존 EC2 P5 인스턴스를 통해 유사한 다른 모델들의 약 8분의 1 정도의 학습 비용만 사용하며 비용 효율성을 실현했다. 이러한 경제적인 이점은 기업 환경에서 비용 부담 없이 대규모 데이터와 복잡한 워크로드를 처리하는 데 도움을 줄 것이다. 앞으로 더 많은 기업이 스노우플레이크 데이터 플랫폼에 결합한 고성능 언어 모델을 접하고 그 무한한 가능성을 경험할 수 있기를 기대한다.

2024.05.07 11:30조성현

"원티드랩서 '솔라' 쉽게 쓰세요"…업스테이지, 기업 생성형 AI 도입 촉진

업스테이지가 개발한 사전학습 거대언어모델(LLM) '솔라'를 더욱 쉽게 도입할 수 있는 기반이 마련됐다. 업스테이지는 원티드랩과 '원티드 LaaS(LLM-as-a-Service·서비스형 거대언어모델) 서비스 협력을 위한 업무협약'을 체결했다고 2일 밝혔다. 이날 협약식에는 업스테이지 권순일 사업총괄 부사장과 원티드랩 주형민 AX사업개발 총괄 등이 참석했다. 이를 통해 양사는 ▲생성형 AI 원천기술(솔라)의 활용 확대 지원 ▲생성형 AI 응용기술(원티드 LaaS) 전파를 위한 공동 협력 ▲성공 사례에 대한 대외 홍보 협력 등 다양한 분야에서 손을 맞잡기로 했다. 원티드 LaaS는 원티드랩이 다수 생성형 AI 서비스를 개발·운영하며 쌓은 노하우를 집약한 솔루션이다. ▲생성형 AI 서비스를 쉽게 개발할 수 있는 환경 ▲다양한 LLM 모델 ▲자동화된 테스트 환경 ▲프로젝트 및 프리셋 단위 상세한 토큰 사용량 관리 ▲할루시네이션 제어를 위한 RAG 기능 등을 구독 형태로 제공한다. 솔라는 빅테크 모델보다 작은 사이즈로 더 빠른 속도와 성능을 탑재, 속도와 비용 효율성이 관건인 기업용 LLM 시장에 최적화된 모델로 꼽힌다. 최근 아마존웹서비스(AWS)에서 AI 모델을 제공하는 '아마존 세이지메이커 점프스타트' 등 글로벌 플랫폼에도 대표 사전학습 모델로 탑재됐다. 업스테이지는 이번 원티드랩과 협약을 통해 더욱 많은 기업을 대상으로 생성형 AI 도입을 확산한다는 구상이다. 김성훈 업스테이지 대표는 "자사가 자체 개발한 솔라는 작지만 강력한 성능과 오픈AI의 GPT-3.5 대비 2.5배 이상 빠른 속도로 기업에 최적화된 LLM 도입 선택지를 제시한다"며 "원티드랩과의 협력을 통해 다양한 산업 및 기업을 대상으로 맞춤형 모델을 제공, 광범위한 생성형 AI혁신을 지원해 나갈 것"이라고 밝혔다. 주형민 원티드랩 AX사업개발 총괄은 "허깅페이스 리더보드 최상위 랭크를 통해 검증된 업스테이지의 모델을 기업 고객들이 쉽게 사용할 수 있는 환경을 제공한다는 점, 언어모델의 선택지가 지속 확대되고 있다는 점이 기업 고객에게 기대감을 갖게 될 것"이라며 "이번 협약을 시작으로 업스테이지와 함께 기업의 생성형 AI 도입을 돕고, 나아가 국내 생성형 AI 생태계 활성화에 기여할 수 있는 다양한 활동을 선보일 계획"이라고 말했다.

2024.05.02 11:33장유미

  Prev 11 12 13 14 15 16 17 Next  

지금 뜨는 기사

이시각 헤드라인

정부, AI 연구에 GPU 1천장 푼다…삼성SDS·KT클라우드·엘리스 선정

스테이블코인 행정입법 10월 윤곽…"외화 발행 규제 소홀해선 안돼"

SW 수출 '기회의 땅' 베트남…AI·인력·데이터센터 협력 확산

'GPT-5' 황당 답변, 인력 유출 때문?…'위기' 오픈AI, 특단 대책 마련 급급

ZDNet Power Center

Connect with us

ZDNET Korea is operated by Money Today Group under license from Ziff Davis. Global family site >>    CNET.com | ZDNet.com
  • 회사소개
  • 광고문의
  • DB마케팅문의
  • 제휴문의
  • 개인정보취급방침
  • 이용약관
  • 청소년 보호정책
  • 회사명 : (주)메가뉴스
  • 제호 : 지디넷코리아
  • 등록번호 : 서울아00665
  • 등록연월일 : 2008년 9월 23일
  • 사업자 등록번호 : 220-8-44355
  • 주호 : 서울시 마포구 양화로111 지은빌딩 3층
  • 대표전화 : (02)330-0100
  • 발행인 : 김경묵
  • 편집인 : 김태진
  • 개인정보관리 책임자·청소년보호책입자 : 김익현
  • COPYRIGHT © ZDNETKOREA ALL RIGHTS RESERVED.