• ZDNet USA
  • ZDNet China
  • ZDNet Japan
  • English
  • 지디넷 웨비나
뉴스
  • 최신뉴스
  • 방송/통신
  • 컴퓨팅
  • 홈&모바일
  • 인터넷
  • 반도체/디스플레이
  • 카테크
  • 헬스케어
  • 게임
  • 중기&스타트업
  • 유통
  • 금융
  • 과학
  • 디지털경제
  • 취업/HR/교육
  • 생활/문화
  • 인사•부음
  • 글로벌뉴스
AI페스타
배터리
양자컴퓨팅
IT'sight
칼럼•연재
포토•영상

ZDNet 검색 페이지

'세이프가드'통합검색 결과 입니다. (2건)

  • 태그
    • 제목
    • 제목 + 내용
    • 작성자
    • 태그
  • 기간
    • 3개월
    • 1년
    • 1년 이전

'AI 폭주' 막아라…NC AI, 독립 반년 만에 '사고 방지' 기술로 시장 선점

NC AI가 자체 개발한 인공지능(AI) 기술을 앞세워 국내 AI 안전성 분야 시장 주도권 확보에 뛰어든다. NC AI는 고객 상담 챗봇 서비스 '엔써(NCER)'에 자체 개발한 AI 신뢰성 기술 '세이프가드(Safeguard)'를 정식 적용했다고 30일 밝혔다. 이는 국내 AI 기업 중 처음으로 종합 AI 안전 시스템을 상용 서비스에 도입한 사례다. 세이프가드 기술은 삼중 보안 체계를 기반으로 운영된다. 레드팀이 새로운 악성 공격을 연구하면 블루팀이 방어 기술을 개발하고 퍼플팀이 두 팀의 결과를 종합해 정책에 반영하는 순환 구조다. 특히 엔씨소프트 퍼블리싱코디네이션 센터와 협력해 게임 산업 특성을 반영한 '챗봇 네거티브 규제 정책'을 수립했다. 이 정책은 게임 서비스 관련 부적절한 내용이나 유료 재화 편법 등 산업 맞춤형 보안을 구현한다. 세이프가드가 적용된 엔써는 ML커먼스와 국제 벤치마크 연구에서 제시하는 일반적 부적절 내용 차단 기준을 충족한다. 차별, 혐오, 욕설, 외설 등이 여기에 포함된다. NC AI의 안전성 연구는 지난 2022년부터 시작됐다. 회사는 'NC AI 윤리 프레임워크'를 통해 데이터 프라이버시, 비편향성, 투명성이라는 세 가지 가치 중심의 AI 윤리 경영을 실천해왔다. 이미 '리니지W'와 '리니지2M' 등 실제 게임 서비스에도 NC AI의 기술이 적용돼 있다. 13개 언어의 광고 패턴을 탐지하고 차단하는 스팸 필터링 시스템이 대표적이다. 회사는 현재 텍스트 기반 안전성 기술을 넘어 향후 이미지, 동영상 등 멀티모달 콘텐츠까지 탐지하는 차세대 시스템을 구축할 목표다. 지난 2월 독립 법인으로 분사한 NC AI는 반년 만에 정부 주관 '독자 AI 파운데이션 모델 프로젝트' 주관사로 선정됐다. 한국전자통신연구원 등 주요 연구기관과 포스코DX, 롯데이노베이트 등 총 54개 기관이 참여하는 '그랜드 컨소시엄'에서 AI 안전 기술 개발을 이끈다. 또 에이아이웍스와 협력해 'AI 세이프티 얼라인먼트 데이터셋'을 구축 중이다. 전쟁 및 폭력 등 고위험 상황에 대한 안전한 AI 응답 시스템을 개발해 국가 차원의 AI 안전성 표준 확립에 기여할 방침이다. 더불어 NC AI의 기술은 챗봇을 넘어 다양한 산업으로 확장되고 있다. 신작 역할수행게임(RPG) '아이온 2'에는 자연어 기반 애니메이션 생성과 감정 표현이 가능한 음성합성(TTS) 기술을 선보이기도 했다. 이연수 대표는 "이번 세이프가드 기술 적용은 우리가 AI 안전성 분야에서 기술적 우위를 확보하고 책임감 있는 AI 개발 기업으로서 위치를 공고히 하는 중요한 출발점"이라며 "기술 독립과 산업 실증 글로벌 공헌을 동시에 실현하는 대한민국 AI 전문 기업으로서의 소명을 다할 것"이라고 밝혔다.

2025.09.30 08:00조이환

딥러닝 '대부' 벤지오, 英 AI 안전 프로젝트 합류

캐나다 몬트리올대 요슈아 벤지오 교수가 영국 인공지능(AI) 안전 프로젝트 '세이프가드 AI(Safeguarded AI)'에 합류한다. 8일 MIT 테크놀로지리뷰에 따르면 딥러닝 대부로 알려진 벤지오 교수는 영국 정부가 주도하는 세이프가드 A' 프로젝트 과학 감독자로 임명됐다. 이 프로젝트는 영국 고등연구발명청(ARIA)에서 4년 동안 5천900만 파운드(약 1천30억 원)를 지원받아 진행된다. 세이프가드 AI 프로젝트는 AI 시스템이 현실에 미치는 영향을 수치화해 안전성 보장 메커니즘을 개발하는 데 중점을 둔다. 이 과정에서 AI를 통해 다른 AI 시스템을 점검하고 검증하는 방식을 활용해 인간이 검증하는 '레드팀' 방식보다 보다 신뢰할 수 있는 방법을 제시할 계획이다. 특히 프로젝트는 교통, 에너지 등 위험사태가 발생할 가능성이 큰 고위험 분야에서 AI 에이전트의 안전성을 관리하는 '게이트키퍼' AI를 제작할 예정이다. 이를 위해 고등연구발명청은 첫 해에 540만 파운드(약 94억3천200만원), 다음 해에 820만 파운드(약 143억2천만원)의 자금을 제공해 AI 안전 메커니즘 연구를 지원하게 된다. 세이프가드 AI 프로젝트는 국제적 AI 안전 협력을 촉진하고 영국을 해당 분야의 선도국으로 자리매김하려는 목적으로 시작됐다. 실제로 벤지오 교수는 이미 영국 블레츨리 선언에 참가한 30개국·UN·EU가 참여하는 AI 안전성 국제 과학 보고서의 총책임자 역할을 맡고 있다. 벤지오 교수는 프로젝트 합류에 대해 "지금 우리는 뒤에 절벽이 있을지도 모르는 안개를 향해 달려가고 있다"며 "그 안개를 걷어낼 도구를 구축하고 절벽 너머로 떨어지지 않도록 해야 한다"고 강조했다.

2024.08.08 09:25조이환

  Prev 1 Next  

지금 뜨는 기사

이시각 헤드라인

올해 노벨 생리의학상에 '장기이식 거부반응' 최소화한 미-일 과학자 3인이 받아

가트너 "AI가 '인지형 분석' 앞당겨…의사결정 획기적 단축"

中 과학자들, 노화 멈추는 줄기세포 개발…"뇌·혈관까지 회춘"

"기억은 레고처럼 조립된다"...법정 증언 주의해야 하는 이유

ZDNet Power Center

Connect with us

ZDNET Korea is operated by Money Today Group under license from Ziff Davis. Global family site >>    CNET.com | ZDNet.com
  • 회사소개
  • 광고문의
  • DB마케팅문의
  • 제휴문의
  • 개인정보취급방침
  • 이용약관
  • 청소년 보호정책
  • 회사명 : (주)메가뉴스
  • 제호 : 지디넷코리아
  • 등록번호 : 서울아00665
  • 등록연월일 : 2008년 9월 23일
  • 사업자 등록번호 : 220-8-44355
  • 주호 : 서울시 마포구 양화로111 지은빌딩 3층
  • 대표전화 : (02)330-0100
  • 발행인 : 김경묵
  • 편집인 : 김태진
  • 개인정보관리 책임자·청소년보호책입자 : 김익현
  • COPYRIGHT © ZDNETKOREA ALL RIGHTS RESERVED.