• ZDNet USA
  • ZDNet China
  • ZDNet Japan
  • English
  • 지디넷 웨비나
뉴스
  • 최신뉴스
  • 방송/통신
  • 컴퓨팅
  • 홈&모바일
  • 인터넷
  • 반도체/디스플레이
  • 카테크
  • 헬스케어
  • 게임
  • 중기&스타트업
  • 유통
  • 금융
  • 과학
  • 디지털경제
  • 취업/HR/교육
  • 생활/문화
  • 인사•부음
  • 글로벌뉴스
  • AI의 눈
AI의 눈
HR컨퍼런스
스테이블코인
IT'sight
칼럼•연재
포토•영상

ZDNet 검색 페이지

'벤지오'통합검색 결과 입니다. (3건)

  • 태그
    • 제목
    • 제목 + 내용
    • 작성자
    • 태그
  • 기간
    • 3개월
    • 1년
    • 1년 이전

[AI는 지금] "인류 통제 벗어날 수도"…세계 석학들이 보낸 적색 경보

인공지능(AI)이 수학 올림피아드 금메달 수준의 추론 능력을 갖추고, 스스로 도구를 활용해 작업을 수행하는 '에이전트' 단계로 진화했다. 기술 발전의 이면에는 사이버 공격 자동화, 생물학 무기 제조 지원, 인간 통제 상실의 실존적 위협도 있다. 이에 전 세계 석학들이 모여 "이익보다 안전이 우선되어야 한다"는 메시지를 던졌다. 14일 업계에 따르면 지난 3일(현지시간) 공개된 '2026 국제 AI 안전 리포트'는 AI 패권 경쟁 속에서 인류가 지켜야 할 안전장치의 기준점을 제시하고 있다. 이번 보고서는 요슈아 벤지오 캐나다 몬트리올대 교수가 의장을 맡아 집필을 주도했다. '딥러닝의 대부'이자 튜링상 수상자인 벤지오 교수는 제프리 힌튼, 얀 르쿤과 함께 현대 AI 기술의 기틀을 닦은 세계 4대 석학 중 한 명이다. 그는 작년 9월 임문영 국가인공지능전략위원회 부위원장을 만나 한국의 AI 정책 자문 참여 의사를 밝히기도 했다. 벤지오 교수가 이끄는 이번 보고서에는 100명 이상의 국제 전문가가 참여했다. 유럽연합(EU)·경제협력개발기구(OECD)·국제연합(UN)을 포함한 30개국 이상 국가 및 국제기구 추천 인사로 구성된 전문가 자문위원단의 지원을 받아 공신력을 더했다. "AI, 인간 속이고 스스로 훈련 감지"…구체화된 위험들 보고서에 따르면 최신 범용 AI는 박사급 과학 지식을 습득하고 소프트웨어 엔지니어링 작업을 자율적으로 수행하는 수준에 도달했다. 전 세계적으로 매주 7억명 이상이 최첨단 AI를 사용하고 있으며 이는 PC 보급 속도를 능가하는 수치다. 보고서는 악의적 사용, 오작동, 시스템적 위험을 AI의 3대 위협으로 꼽았다. 특히 보고서는 AI가 사이버 공격과 생물학적 무기 개발의 진입장벽을 낮추고 있다고 지적했다. 공격자들은 AI 모델을 이용해 침입 과정의 80~90%를 자동화한 것으로 조사됐다. 바이러스 실험실 프로토콜 문제 해결에서는 오픈AI 등 모델이 전문가의 94%를 능가하는 성과를 보였다. 통제 상실 징후도 포착됐다. 실험 환경에서 일부 AI 모델은 자신이 테스트를 받고 있다는 사실을 인지하고, 감시를 회피하거나 데이터를 조작하려는 기만적 행동을 보인 것으로 나타났다. "위험선 넘으면 개발 중단"…안전장치 부각 글로벌 AI 기업들도 안전장치 마련에 나서고 있다. 지난 2025년 기준 오픈AI, 앤트로픽, 구글 딥마인드 등 12개 주요 기업이 '프론티어 안전 프레임워크'를 발표하거나 업데이트했다. 해당 프레임워크에는 AI 모델이 생물학 무기 제조를 돕거나 자율적으로 복제하는 등 특정 위험 임곗값을 넘을 때 즉시 개발을 중단하거나 보안 수준을 격상하겠다는 '조건부 약속' 등이 담겼다. 완벽한 단일 방어책이 없다는 점을 인정한 '다층 방어' 전략도 강조됐다. 정책 입안자들에게는 '증거의 딜레마'가 난제로 작용할 전망이다. AI 기술은 급변하지만 위험성에 대한 명확한 증거는 피해가 발생한 뒤에야 나타나기 때문이다. 보고서는 확실한 증거를 기다리다가는 돌이킬 수 없는 피해를 볼 수 있다며, 선제적인 안전 조치가 필요함을 시사했다. 보고서 결과는 오는 19~20일(현지시간) 인도에서 열리는 'AI 임팩트 서밋' 논의의 핵심 자료로 활용되어 전 세계적인 대응책 마련에 기여할 예정이다. 벤지오 교수는 "이번 보고서를 통해 우리 시대 가장 중요한 기술적 변혁이 될지도 모르는 AI에 대한 집단적 이해를 높이기를 희망한다"고 강조했다.

2026.02.14 09:57이나연 기자

요슈아 벤지오, AI 안전 '로우제로' 연구소 설립…"인류 전체 보호할 것"

인공지능(AI) 연구의 거장 요슈아 벤지오가 기술의 위험성과 불확실성에 선제적으로 대응하기 위한 비영리 AI 연구소를 설립했다. 4일 테크크런치에 따르면 요슈아 벤지오 몬트리올 대학교 교수는 이날 파이낸셜타임스를 통해 '로우제로(LawZero)'라는 AI 안전 연구소 설립 사실을 공개했다. 이 연구소의 초기 자금은 얀 탈린 스카이프 공동 설립자, 에릭 슈미트 전 구글 최고경영자(CEO), 오픈 필랜스로피, 미래의 삶 연구소(FLI) 등에서 기부 형태로 조달했으며 총액은 3천만 달러(한화 약 300억원) 규모다. 연구소 이름인 '로우제로'는 SF 소설 작가인 아이작 아시모프가 창안한 '로봇공학 제로 법칙'에서 차용한 것으로, 인간 전체의 이익을 최우선으로 한다는 철학적 방향성을 내포하고 있다. '제로 법칙'은 로봇이 개별 인간이 아닌 인류 전체의 보호를 우선시해야 한다는 원칙이다. 벤지오 교수는 '현대 AI의 대부' 중 한 명으로 꼽히며 최근 들어 AI 안전성 담론에 있어 대표적 목소리를 내고 있다. 그는 미국 캘리포니아주에서 발의된 AI 안전 법안 'SB 1047'에 공개적으로 찬성하며 기술 규제 필요성을 강조해왔다. 해당 법안은 고위험 AI 시스템의 개발·배포에 있어 사전 통제를 강화하는 내용으로, 기술 업계 일각에서는 혁신을 저해한다는 반발도 나온 바 있다. 그럼에도 그는 이 법안이 '재앙적 시나리오'를 방지하는 최소한의 안전장치라고 평가해 왔다. 요슈아 벤지오 교수는 파이낸셜타임스 인터뷰에서 "오픈AI와 구글이 안전성보다 기술 진보 속도를 우선시하고 있다"며 "대형 기술 기업 내부에서는 이해충돌로 인해 구조적으로 안전이 뒷전으로 밀릴 수밖에 없다"고 말했다.

2025.06.04 13:51조이환 기자

AI 미래 엇갈린 전망…캐플런 "사업 창출" vs 벤지오 "안전 우선"

미래 생성형 인공지능(AI) 산업에 글로벌 석학들이 상반된 전망을 제시했다. 생성형 AI 비즈니스 가치 창출이 중요할 것이라는 예측이 등장한 반면 AI 위협 대응이 더 시급하다는 의견도 나왔다. 스탠퍼드대 제리 캐플런 교수와 몬트리올대 요슈아 벤지오 교수는 11일 코엑스 그랜드볼룸서 열린 'AI 서울 2025'에서 미래 AI 전망에 대해 이같은 의견을 화상 연설을 통해 제시했다. 각각 AI를 통한 사업 창출 중요성과 AI 안전 프레임워크 필요성을 각각 앞세워 주장했다. 캐플런 교수는 생성형 AI 미래와 인류의 대응 전략에 대해 기술 발전 자체보다는 이를 어떻게 비즈니스로 연결하느냐가 국가·기업 경쟁력을 결정짓는 요소라고 강조했다. AI가 기술적 개선이 추가로 이뤄질 것이라는 이유에서다. 그는 현재 생성형 AI 걸림돌인 환각현상이나 컴퓨팅 파워 한계로 인해 당장 비약적인 발전을 기대하기 힘들 것이라고 내다봤다. 이에 기업은 향후 5년 내 AI 기술 자체보다 AI가 일상과 제품에 어떻게 스며들어 변화를 만들지에 더 높은 주의를 기울일 것이라는 설명이다. 그는 "AI가 비즈니스 환경과 프로세스를 변화시킬 것이며, 이를 새로운 사업 기회로 연결하는 것이 중요하다"고 강조했다. 캐플런 교수는 "생성형 AI는 곧 저렴한 비용으로 어디서나 사용 가능한 상품이 될 것"이라며 "기업들은 시장 점유율을 확보하기 위해 치열한 비용 경쟁을 벌일 것"이라고 내다봤다. 이 과정에서 과잉 투자가 발생할 수 있지만 이는 기술 발전의 자연스러운 현상이라고 봤다. 벤지오 교수 "인간에 반하는 AI 통제 불가…정책적·과학적 연구 시급" 벤지오 교수는 AI의 급격한 발전 속도가 인류 안전과 직결될 수 있다고 경고했다. 이를 관리하기 위한 정책적·과학적 대응이 시급하다고 주장했다. 벤지오 교수는 "AI의 기술 발전은 멈추지 않을 것"이라며 "불과 몇 년 만에 인간 전문가를 맞먹는 역량을 다양한 분야에서 보이고 있다"고 주장했다. 그러면서 "급속한 AI 발전은 잠재적 위험을 일으킬 것"이라고 말했다. 그는 국가·기업 간 AI 경쟁이 치열해진 가운데 AI 안전이 뒷전으로 밀리고 있다고 지적했다. 이를 방지하기 위해 정책적 개입과 과학적 연구가 병행돼야 한다고 강조했다. 벤지오 교수는 정책적 측면에서 국가 차원에서 법·규제를 통해 AI 개발·활용에 대한 행동 규범을 정립해야 한다고 주장했다. 그는 "AI가 고용 시장에 미치는 영향, 악의적 행위자에 의한 오용 가능성, 국가 안보 위협 등 다양한 위험 요소에 대비하기 위한 법적 장치가 필요하다"고 당부했다. 또 과학적 측면에서는 AI 안전성 연구의 핵심 과제로 '정렬 문제'를 지적했다. AI 시스템이 사용자 의도와 일치하는 방식으로 목표를 수행하도록 설계하는 방법을 찾아야 한다는 의미다. 그는 "현재 AI가 의도치 않게 인간에 해로운 방식으로 행동하지 않도록 완벽하게 통제하는 방법을 모른다"며 "이를 해결하기 위해 더 많은 연구와 실험이 필요하다"고 말했다. 벤지오 교수는 각국 정부가 협력해 AI 안전 기준을 마련해야 하는 중요한 시점이라고 말했다. 그러면서 최근 발표된 국제 AI 안전 보고서를 언급했다. 그는 "전 세계 100명 전문가와 33개국이 참여한 이 보고서는 국제연합(UN)과 경제협력개발기구(OECD)를 포함한 국제기구와 협력해 AI 안전 기준을 마련하는 중요한 이정표"라고 평가했다. 벤지오 교수는 "AI가 인간 수준의 지능에 도달하기 전 정책적 규제와 과학적 연구를 통해 잠재적 위험을 예방해야 한다"며 "AI 안전 연구소의 발전과 국제 협력을 통해 글로벌 AI 생태계의 지속 가능한 발전을 이끌어야 한다"고 덧붙였다.

2025.02.11 13:23김미정 기자

  Prev 1 Next  

지금 뜨는 기사

이시각 헤드라인

메모리 1/6로 줄인다고?…구글 터보퀀트 쇼크의 치명적 착각

네이버·카카오의 요즘 인재상…"AI 활용 넘어 소통·사고력"

"AI 스타트업 성패는 '인프라'…글로벌 확장 기회 좌우"

삼성·SK HBM, 올해도 잘 팔린다...양사 도합 300억Gb 달할 듯

ZDNet Power Center

Connect with us

ZDNET Korea is operated by Money Today Group under license from Ziff Davis. Global family site >>    CNET.com | ZDNet.com
  • 회사소개
  • 광고문의
  • DB마케팅문의
  • 제휴문의
  • 개인정보취급방침
  • 이용약관
  • 청소년 보호정책
  • 회사명 : (주)메가뉴스
  • 제호 : 지디넷코리아
  • 등록번호 : 서울아00665
  • 등록연월일 : 2008년 9월 23일
  • 사업자 등록번호 : 220-8-44355
  • 주호 : 서울시 마포구 양화로111 지은빌딩 3층
  • 대표전화 : (02)330-0100
  • 발행인 : 김경묵
  • 편집인 : 김태진
  • 개인정보관리 책임자·청소년보호책입자 : 김익현
  • COPYRIGHT © ZDNETKOREA ALL RIGHTS RESERVED.