• ZDNet USA
  • ZDNet China
  • ZDNet Japan
  • English
  • 지디넷 웨비나
뉴스
  • 최신뉴스
  • 방송/통신
  • 컴퓨팅
  • 홈&모바일
  • 인터넷
  • 반도체/디스플레이
  • 카테크
  • 헬스케어
  • 게임
  • 중기&스타트업
  • 유통
  • 금융
  • 과학
  • 디지털경제
  • 취업/HR/교육
  • 생활/문화
  • 인사•부음
  • 글로벌뉴스
  • AI의 눈
ZDPick
국감2026
인공지능
IT'sight
칼럼•연재
포토•영상

ZDNet 검색 페이지

'조절론'통합검색 결과 입니다. (12건)

  • 태그
    • 제목
    • 제목 + 내용
    • 작성자
    • 태그
  • 기간
    • 3개월
    • 1년
    • 1년 이전

앤트로픽 최기영 "AI 속도조절, 개발 중단 아냐…안전장치 병행해야"

인공지능(AI) 모델의 역량이 빠르게 고도화되면서 악용 위험도 커지는 데 따른 'AI 속도조절론'을 제안한 앤트로픽이 개발 중단이 아닌 안전 체계와 기술 발전의 속도를 맞추는 것이 핵심이라고 강조했다. AI 개발사가 자체 안전장치를 강화하는 동시에 제3자 기관의 평가·감사 체계를 구축해 모델 역량이 커질수록 보호 수준도 높여야 한다는 것이다. 최기영 앤트로픽 코리아 대표는 6일 서울 강남구에서 과학기술정보통신부가 주최한 공식 인공지능 주간 행사 'AI 페스타 26'의 AI 서밋 프로그램에서 "AI 개발에 대한 속도 조절이 필요하다는 게 개발을 멈추자는 의미는 아니다"라며 이같이 밝혔다. 이날 '프론티어 AI 모델이 가져오는 변화와 기업의 대응 전략'을 주제로 발표에 나선 최 대표는 AI 기술 발전이 아직 시작 단계에 불과하다고 진단했다. 앤트로픽 엔지니어들이 자사 AI 모델 '클로드'를 활용해 개발하는 시간은 평균 주당 20시간을 넘어섰다. AI 에이전트가 사람의 개입 없이 연속적으로 작업하는 시간도 최근 9개월 동안 약 2배 늘었다. AI 활용이 늘면서 생산성은 높아지고 있지만 모델의 역량이 강해질수록 부작용과 악용 가능성도 확대되고 있다는 게 앤트로픽의 판단이다. 최 대표는 사이버 첩보와 해킹 등에 AI가 활용되는 사례를 대표적인 위험으로 꼽았다. 전문적인 해킹 역량이 부족한 사람도 AI를 이용해 공격을 시도할 수 있게 되면서 공격 진입장벽이 낮아지고 있다는 설명이다. 프론티어 모델의 역량을 무단으로 추출하는 '증류'도 안전 위협으로 지목했다. 원본 모델의 성능만 추출한 뒤 이에 상응하는 안전장치를 갖추지 않을 경우 산출된 모델이 사이버 공격이나 생물학적 위해 등에 악용될 수 있기 때문이다. 앤트로픽 내부 레드팀 평가에서도 모델 고도화에 따른 잠재적 위험들이 확인됐다. 인터넷과 격리된 환경에서 모델이 외부 연결 방법을 반복적으로 탐색하다 테스트 과정에서 발생한 허점을 이용해 연결을 시도한 사례가 대표적이다. 최 대표는 "실제 사고가 아니라 내부 시뮬레이션에서 확인된 사례"라면서도 "모델의 지능 수준이 높아질수록 목표를 달성하기 위해 스스로 행동하는 능력 역시 강해지고 있다"고 부연했다. 앤트로픽은 이에 대응해 모델의 역량에 따라 보호 수준을 강화하는 책임 있는 확장 정책(RSP)과 AI 안전등급(ASL) 등을 적용하고 있다. 모델이 일정 역량 임계치에 도달하면 더 강한 보호조치를 가동하는 방식이다. 접근 통제와 실시간 프롬프트·응답 분류, 모니터링, 사후 탐지 등 다층적인 안전장치도 운영한다. 기업의 AI 전환(AX)에서도 안전을 설계 단계부터 포함해야 한다고 주문했다. AI 에이전트가 직접 업무를 수행하는 영역이 넓어질수록 사람의 역할 역시 실행에서 업무 위임과 권한 관리, 결과 검증으로 이동할 수 있어서다. 기업은 명확한 비즈니스 목표뿐 아니라 데이터 보안 기반과 안전 설계, 인재·변화 관리, 가치 측정 체계까지 마련해야 한다. 최 대표는 "강력한 AI를 활용하는 것과 더불어 이에 맞는 안전한 AI를 위한 준비와 역량 개발도 병행해야 한다"고 말했다.

2026.10.06 13:19이나연 기자

"AI 속도조절 안돼…추격 멈추지 말고 안전 역량 키워야"

인공지능(AI) 개발 속도를 늦추기보다 프런티어 AI 경쟁력을 끌어올리면서 검증과 통제 역량을 더 빠르게 확보해야 한다는 목소리가 학계와 산업계에서 나왔다. 1일 서울 중구에서 열린 국가인공지능전략위원회 'AI 개발 속도조절론 관련 세미나'에서는 국내 AI 개발 속도를 낮추기보다 프런티어 AI 경쟁력을 이어가면서 평가·검증·통제 역량을 동시에 확보해야 한다는 데 참석자들의 의견이 모였다. 최근 앤트로픽과 오픈AI 등에서는 프런티어 AI의 능력이 통제 수준보다 빠르게 높아질 수 있다는 우려와 함께 개발 속도를 조절해야 한다는 주장이 제기됐다. 반면 미국과 중국 정부를 비롯해 AI 기술 경쟁을 이어가야 한다는 입장도 나오면서 속도와 안전을 둘러싼 논의가 확산하고 있다. 이날 참석자들은 국내 AI 개발 속도를 낮추는 데에는 대체로 신중한 입장을 보였다. 프런티어 AI 기술 추격을 이어가는 동시에 위험을 검증하고 사고에 대응할 역량도 함께 갖춰야 한다는 데 무게가 실렸다. 한국의 대응 방향으로 '속도 책임'이 제시됐다. AI 개발과 산업 활용은 이어가되 검증과 사고 대응, 복원력 등 안전 역량을 위험이 커지는 속도보다 더 빠르게 높이자는 구상이다. 이원태 국가AI전략위 보안특위 위원장은 "대한민국 AI의 시계는 절대 멈출 수 없다"며 "프런티어 모델과 산업적 활용은 늦추지 말고 위험이 커지는 속도보다 검증과 사고 보고, 복원력 등 책임의 속도를 더 빠르게 해야 한다"고 말했다. 기술 추격 단계에 있는 한국이 개발 속도를 낮추면 미국과 중국과의 격차가 더 벌어질 수 있다는 우려도 나왔다. 김성훈 업스테이지 대표는 미국이나 중국이 만든 초지능에 의존해서는 한국의 기술 주권을 확보하기 어렵다고 봤다. 한국도 AI가 스스로 더 나은 AI를 만드는 자기개선 단계까지 기술력을 끌어올린 뒤 안전장치를 함께 마련해야 한다는 입장이다. 김 대표는 "같이 멈추면 우리는 이 바닥을 기게 될 것"이라며 "안전하게 그러나 굉장히 빠르게 자기개선형 초지능으로 나가야 한다"고 말했다. 개발 속도를 유지하기 위해서는 AI 능력을 제대로 측정할 수 있는 평가 체계가 뒷받침돼야 한다는 분석도 이어졌다. 현재 모델 자체를 중심으로 한 평가만으로는 에이전트가 결합했을 때 나타나는 실제 능력을 충분히 파악하기 어렵다는 것이다. 최대선 숭실대 AI안전성연구센터장은 자체 실험에서 같은 모델에 에이전트를 결합했을 때 사이버 보안 성능이 크게 높아진 사례를 소개했다. 개별 모델뿐 아니라 에이전트가 결합된 전체 시스템까지 평가 범위를 넓히고 악용 통제와 행동 차단, 사고 추적 체계를 함께 갖춰야 한다고 제안했다. 이한울 에임인텔리전스 부사장도 모델 개발 역량과 위험을 판단할 역량을 함께 확보해야 한다고 봤다. 국내에서 개발한 모델도 독립적인 평가를 거쳐야 하며 검증된 보안 기술이 기업 현장에 적용될 수 있도록 인력과 운영 여건을 갖추는 문제도 짚었다. 평가 기준을 누가 만들 것인지도 주요 화두로 다뤄졌다. 글로벌 빅테크가 자체 안전 기준을 만들고 이를 사실상의 국제 표준으로 확산할 경우 기술 경쟁력이 규칙을 만드는 힘으로 이어질 수 있어서다. 김동환 포티투마루 대표는 유엔과 경제협력개발기구(OECD) 등 다자 협력 체계에서 AI 안전 기준을 함께 논의해야 한다고 제안했다. 한국도 이미 만들어진 기준을 따르는 데 그치지 않고 국제 논의 과정에 참여해야 한다고 봤다. 국제 AI 안전 논의에 참여하기 위한 국내 검증 역량 확보도 과제로 꼽혔다. 김명주 AI안전연구소장은 다음 주 열리는 9개국 AI안전연구소장 협의회에서 첨단 AI 표준과 검증 체계, 사고 대응 방안 등을 논의할 예정이라고 밝혔다. 현재 국내 평가 인력은 주요국과 격차가 있다. 김 소장에 따르면 한국 AI안전연구소 정규직은 20명 남짓인 반면 영국은 평가 인력만 200명 수준이다. AI안전연구소는 국내 AI 모델과 에이전트에 대한 평가를 확대하고 연말까지 개발자 가이드라인과 평가 플랫폼을 마련하는 방안도 준비하고 있다. 이원태 위원장은 "안전은 가속의 반대말이 아니고 가속의 조건일 수 있다"며 "경쟁력 있는 AI는 단지 성능이 높은 AI가 아니라 안전하게 배포하고 사고가 나도 회복할 수 있는 AI여야 한다"고 말했다.

2026.10.01 16:53김동원 기자

하정우 부위원장 "AI 속도 늦추기보다 개발·평가 역량 함께 키워야"

하정우 국가인공지능전략위원회 상근 부위원장이 최근 제기된 AI 개발 속도조절론과 관련해 한국은 프런티어 AI 개발 역량과 안전 역량을 함께 키워야 한다고 강조했다. 하 부위원장은 1일 열린 'AI 개발 속도조절론 관련 세미나' 영상 축사에서 "결국 중요한 것은 우리가 어떤 전략을 수립하고 실행하느냐"라며 "AI 시대에 과연 우리가 어떤 역량을 보유해야 하는지를 고민해야 한다"고 말했다. 최근 글로벌 AI 업계에서는 프런티어 AI의 능력이 빠르게 높아지면서 개발 속도를 늦춰 통제할 시간을 확보해야 한다는 주장이 제기되고 있다. 반면 기술 경쟁이 치열한 상황에서 개발 속도를 늦춰서는 안 된다는 의견도 나오고 있다. 하 부위원장은 AI 기술 발전에 따라 위험이 커지고 있는 만큼 안전장치와 평가 체계를 갖추는 작업도 병행해야 한다고 봤다. 다만 이를 이유로 국내 프런티어 AI 개발 속도까지 늦추는 방안에는 신중한 입장을 나타냈다. 한국이 글로벌 AI 안전 규율 논의에서 목소리를 내려면 자체 기술력부터 확보해야 한다는 점도 강조했다. AI를 직접 개발하고 위험성을 평가할 역량이 있어야 국제 논의에서도 영향력을 확보할 수 있다는 설명이다. 그는 "우리가 주도적으로 안전성이나 규율에 대한 목소리를 낼 수 있어야 한다"며 "그 목소리를 내기 위해서는 우리가 잘 만들 수 있어야 하고 역량이 있어야 하며 영향력을 끼칠 수 있는 힘을 가지고 있어야 한다"고 말했다. 하 부위원장은 지난 1년여간 독자 AI 파운데이션 모델 사업을 추진하며 한국의 프런티어 AI 개발 역량이 세계 3위 수준까지 올라왔다고 평가했다. 그는 "기본적으로 우리는 AI 시대 강력한 AI 역량을 가진 국가가 되기 위해 한 걸음 한 걸음 더 나아가야 한다"며 "어떤 전략이 우리를 AI 시대 선도 국가로 만들 수 있을지 방법을 찾아가는 것이 매우 중요하다"고 강조했다.

2026.10.01 16:19김동원 기자

국가AI전략위, AI 개발 속도 논의…'속도 책임론' 강조

국가인공지능전략위원회가 인공지능(AI) 개발 속도를 늦추자는 '속도조절론'과 관련해 한국은 기술 개발을 늦추기보다 프런티어 AI 역량과 안전·보안·통제 기술을 함께 확보해야 한다는 방향을 제시했다. 국가AI전략위는 1일 AI 개발 속도조절론을 주제로 세미나를 열고 국내 대응 방향을 논의했다고 밝혔다. 최근 글로벌 AI 기업을 중심으로 기술 발전 속도를 늦춰야 한다는 주장이 제기되는 가운데 미국과 중국을 비롯한 주요국의 입장이 엇갈리면서 한국의 대응 전략을 논의하기 위해 마련됐다. 전략위가 제시한 방향은 '속도 책임론'이다. 글로벌 기업과의 기술 격차를 좁히기 위한 AI 개발은 계속하되 모델의 위험을 평가하고 문제가 발생했을 때 통제할 수 있는 기술과 제도도 동시에 갖추자는 취지다. 이원태 국가AI전략위 보안특별위원장은 주요국의 AI 대응 전략을 소개하며 한국은 프런티어 AI 개발 역량과 안전·보안·통제 역량을 함께 빠르게 확보해야 한다고 강조했다. 프런티어 AI 성능이 빠르게 높아지면서 기존 안전 제도만으로 대응하기 어렵다는 지적도 나왔다. 최대선 숭실대 AI안전성연구센터장은 현재 제도가 활용 영역이나 연산량 등을 기준으로 AI 위험을 관리하고 있지만 범용성과 예측하기 어려운 능력이 커지는 프런티어 AI에는 추가적인 기술·제도적 대응이 필요하다고 진단했다. 산업계에서는 한국이 먼저 개발 속도를 늦출 경우 해외 기업과의 기술 격차가 더 벌어질 수 있다는 우려가 제기됐다. 김성훈 업스테이지 대표는 AI가 초지능을 넘어 스스로 성능을 개선하는 단계로 발전하고 있다며 국내에서 먼저 속도를 조절하면 글로벌 빅테크와의 격차가 고착화될 수 있다고 주장했다. 김 대표는 이에 따라 국내에서도 자기진화형 AI 기술을 확보하면서 글로벌 논의에 맞춰 안전장치를 마련해야 한다는 의견을 제시했다. AI 개발 자체를 늦추기보다 기술 경쟁력과 안전 역량을 함께 확보해야 한다는 것이다. AI 모델을 외부 기술에 의존하지 않고 국내에서 직접 평가하고 통제할 수 있는 역량도 과제로 제시됐다. 이한울 에임인텔리전스 부사장은 국내 AI 보안 현황을 소개하며 독립적인 모델 평가·통제 능력과 국제 공조를 함께 확보해야 한다고 제언했다. 이어진 토론에는 김명주 AI안전연구소장과 김동환 포티투마루 대표도 참여했다. 참석자들은 글로벌 AI 기업과의 기술 격차를 줄이기 위한 지원책과 첨단 AI 위험 평가·통제, 안전 검증 체계, 기업 부담을 줄이면서 안전성을 확보하는 방안 등을 논의했다. 이번 세미나에는 국가AI전략위 위원과 과학기술정보통신부, 개인정보보호위원회 등 관계부처를 비롯해 AI안전연구소와 한국인터넷진흥원(KISA), 정보통신정책연구원(KISDI), 소프트웨어정책연구소(SPRi) 등에서 70여 명이 참석했다. 하정우 국가AI전략위 상근 부위원장은 "대체 불가능한 글로벌 AI 핵심 공급망 확보와 AI 3강 도약에 있어 안전한 프런티어 AI 역량 확보는 선택이 아닌 필수 사항"이라며 "위원회가 구심점이 돼 범정부 차원의 관련 정책 조율을 지원함으로써 가파른 기술 추격과 선제적 보안 대응이 균형 있게 추진되는 데 앞장서겠다"고 말했다.

2026.10.01 14:00김동원 기자

오픈AI, 안전성 미충족 'GPT-6.1 아스트라' 출시 철회

인공지능(AI) 업계에서 시스템의 통제 이탈 우려가 커지는 가운데 오픈AI가 안전성 문제를 이유로 차세대 모델 출시를 철회했다. 주요 AI 개발업체가 안전 우려 때문에 새로운 모델의 출시를 포기한 건 이례적이다. 29일(현지시간) 월스트리트저널(WSJ)에 따르면 오픈AI는 다음 달 챗GPT와 코딩 도구 코덱스에 탑재할 예정이었던 'GPT-6.1 아스트라'를 출시하지 않기로 결정했다. 사치 자인 오픈AI 안전 시스템 책임자는 WSJ와의 인터뷰를 통해 내부 평가에서 아스트라가 이전 모델보다 정렬과 권한 범위 두 영역에서 퇴보해 회사가 요구하는 안전 기준을 충족하지 못했다고 밝혔다. 정렬은 AI가 사용자의 의도와 지시에 얼마나 부합하는 방식으로 행동하는지를 평가하는 개념이다. 아스트라는 자신이 특정 작업을 수행했는지 여부를 사용자에게 일관되고 정직하게 알리지 않는 등 기만적 성향이 이전 모델보다 강하게 나타난 것으로 전해졌다. 권한 범위에서도 문제가 확인됐다. AI가 사용자의 별도 승인을 받지 않은 채 작업을 계속 진행하거나 안전하지 않을 가능성이 있는 상황에서도 외부 도구와 서비스를 사용하려는 행동이 나타난 것이다. 반면 작문 능력과 복잡한 작업을 사람의 지속적인 개입 없이 처음부터 끝까지 수행하는 능력에서는 이전 모델보다 향상된 것으로 평가됐다. 오픈AI는 아스트라의 성능 개선에도 불구하고, 안전성과 정렬 기준을 충족하지 못한 만큼 문제 원인을 파악하고 차기 모델의 안전성을 높이는 데 집중할 방침이다. 이번 조치는 올해 AI 업계 전반에서 시스템이 통제 범위를 벗어나 오작동했다는 보도가 잇따른 가운데 나왔다. 최근 몇 주간 오픈AI와 앤트로픽은 경쟁사들에 최첨단 AI 모델 개발 속도를 늦추고 안전 기준에 대한 투자를 확대할 것을 촉구하는 한편, 자체적인 AI 개발 속도 역시 조절하겠다는 입장을 밝힌 바 있다. 자인은 WSJ 측에 "안전과 정렬 문제에는 항상 상충 관계가 존재한다"며 "모델이 주어진 범위를 지키면서도 작업 도중 장애물이나 난관에 부딪혔다는 이유로 지나치게 소극적이거나 게으른 태도를 보이지 않도록 적절한 균형점을 찾아야 한다"고 말했다. 이어 "오픈AI는 아스트라에서 확인된 문제의 근본 원인을 파악하기 위해 여러 차례 심층 조사를 진행할 계획"이라고 부연했다.

2026.09.29 17:02이나연 기자

앤트로픽 이어 구글 연구원 사임…"AI 발전 속도 너무 빨라"

구글의 인공지능(AI) 연구원이 AI의 발전 속도가 지나치게 빠르다는 우려와 함께 회사를 떠났다. 앤트로픽에 이어 구글에서도 AI 발전 속도와 실존적 위험에 대한 업계 내부의 문제 제기가 이어지고 있다. 구글의 AI 담당 조직인 구글 딥마인드 소속 로버트 오캘러핸은 지난 24일 자신의 엑스(X·옛 트위터)를 통해 구글 퇴사 사실을 공개했다. 그는 개인 블로그에 공개한 사직서에서 "자신이 속한 팀의 목표가 AI를 더 저렴하고 지연시간이 낮게 만드는 것"이라며 "현재로서는 이런 방향이 사람들에게 이롭다고 생각하지 않는다"고 밝혔다. 오캘러핸은 AI 기능 자체를 개발한 것은 아니지만 하드웨어 칩 설계를 위한 도구를 개선하는 업무를 맡았다. 그는 해당 도구가 결과적으로 AI 칩 설계를 가속해 AI를 더 저렴하고 빠르게 만들고 기술의 확산과 성능 향상으로 이어질 수 있다는 점을 우려했다. AI의 장기적 위험에 대해서도 문제를 제기했다. 그는 초인공지능(ASI)이 인류를 파멸시킬 가능성이 100%라고 확신하는 것은 아니지만, 위험 자체는 실재하며 불확실하다는 사실만으로도 걱정스럽다는 입장이다. 보상 해킹과 정렬 불일치 등 그동안 AI 비관론자들이 우려했던 현상 가운데 일부가 실제로 나타났다고도 지적했다. 다만 오캘러핸은 자신의 퇴사가 개인적인 여행 일정에 따른 것으로, 업계에서 확산한 '속도조절론'이나 다른 연구자들의 사임과는 관련이 없다고 선을 그었다. 앞서 오픈AI를 거쳐 앤트로픽에서 근무했던 연구자 제이컵 콕슨도 AI가 10년 안에 인류를 멸망시킬 수 있다고 경고하며 회사를 떠났다. 콕슨의 사임 이후 다리오 아모데이 앤트로픽 최고경영자(CEO)가 AI 발전 속도를 조절할 필요성을 주장하는 등 AI의 빠른 발전을 둘러싼 논쟁이 업계 안팎으로 확대되고 있다. 오캘러핸은 사직서에서 "AI 발전이 현재 인간이 이해하고 적응할 수 있는 속도보다 훨씬 빠르게 진행되고 있다"며 "AI를 통해 더 나은 미래로 나아갈 가능성이 있더라도 지금과 같은 속도는 지나치게 빠르다"고 말했다.

2026.09.27 11:44이나연 기자

[AI는 지금] AI 속도조절 꺼낸 앤트로픽, 성능·안전 높인 '오퍼스 5.5' 공개

앤트로픽이 인공지능(AI) 개발 속도조절론을 제안한 뒤 처음으로 새로운 모델을 선보였다. 성능을 높이면서 외부 평가와 통제 장치를 강화해 안전성도 함께 끌어올렸다. 앤트로픽은 22일(현지시간) 자사 블로그를 통해 '클로드 오퍼스 5.5'를 공개했다. 코딩과 컴퓨터 사용, 지식 업무 능력을 강화하면서 기존 오퍼스 5보다 일반적인 작업 비용은 40% 낮추고 출력 속도는 30% 이상 높였다. 성능 개선은 실제 작업에서도 확인됐다. 앤트로픽에 따르면 초기 평가자가 20만 줄 규모 프로그램 코드를 점검하고 오류를 수정하도록 하자 오퍼스 5.5는 3시간 안에 작업을 마쳤다. 기존 오퍼스 5는 같은 작업에 20시간 이상이 걸렸다. 전문적인 코딩 평가에서도 성능 향상이 나타났다. AI가 컴퓨터에서 직접 명령을 실행하며 문제를 해결하는 능력을 평가하는 '터미널-벤치 4.0'에서 오퍼스 5.5는 66.4%를 기록했다. 앤트로픽이 공개한 자료에서 오픈AI 'GPT-6 아스트라'는 57.9%, 기존 오퍼스 5는 52.3%였다. 앤트로픽은 다만 이런 점수만으로 모델의 우열을 판단하기는 어렵다고 설명했다. 모델 성능이 높아질수록 벤치마크의 작은 점수 차이가 실제 사용 환경에서 그대로 나타나지 않을 수 있어서다. 비용도 낮췄다. 기업이나 개발자가 오퍼스 5.5를 사용할 때 내는 가격은 입력 토큰 100만개당 4달러, 출력 토큰 100만개당 20달러다. 기존 오퍼스 5보다 각각 20% 저렴하다. 앤트로픽은 성능과 비용을 개선하면서 안전장치도 강화했다고 밝혔다. 이번 모델은 출시 전 AI 평가기관인 모델평가위협연구소(METR)와 프런티어 디자인 등 외부 기관의 평가를 거쳤다. 내부에서는 약 2000개 상황을 대상으로 모델이 위험하거나 의도하지 않은 행동을 보이는지 확인하는 자동화 행동 감사도 진행했다. 회사 측은 오퍼스 5.5가 지금까지 평가한 모델 가운데 가장 높은 수준의 안전성을 보였다고 평가했다. 별도 평가에서는 모델이 정해진 통제 경계를 우회하려 한 빈도가 기존 오퍼스 5와 클로드 미토스 5.1보다 약 85% 낮았다. 확인된 우회 시도는 모두 심각도가 낮았으며 모델이 스스로 이를 보고했다. 사이버보안과 생물학처럼 악용 위험이 큰 분야에는 별도 안전장치를 적용했다. 사이버보안 작업 대부분은 이전 모델인 오퍼스 4.8이 처리하도록 했으며 일부 생물학 관련 기능은 검증된 이용자에게만 제공한다. 다만 안전 평가 과정에서는 한계도 드러났다. 오퍼스 5.5는 일부 상황에서 자신이 시험받고 있다는 사실을 눈치챈 듯한 반응을 보였다. 앤트로픽은 평가 환경을 인식한 모델이 실제 사용 환경에서는 다르게 행동할 가능성이 있어 출시 전 평가만으로 모든 문제를 찾아내기는 어렵다고 설명했다. 앤트로픽은 "현재 모델은 기존 안전 관행으로 관리할 수 있는 수준"이라며 "AI 연구를 완전히 자동화할 수 있는 미래 모델에는 더 높은 기준과 공공정책의 더 큰 역할이 필요하다"고 밝혔다.

2026.09.23 09:17김동원 기자

[AI는 지금] 영국, AI 규제·육성 사이 균형 찾는다…"중재자 역할 할 것"

영국이 인공지능(AI) 개발을 촉진하면서도 안전성을 확보하는 균형점을 찾겠다는 입장을 내놨다. AI의 혜택을 극대화하면서도 기술이 초래할 수 있는 위험에 대응하는 국제적 역할을 강화하겠다는 취지다. 22일(현지시간) 블룸버그에 따르면 앤디 번햄 영국 총리는 유엔총회 참석을 계기로 도널드 트럼프 미국 대통령과 첫 대면 회담을 앞두고 AI를 주요 의제로 제시했다. 번햄 총리는 AI를 '선을 위한 힘'으로 활용하기 위한 미·영 협력을 추진하고 영국이 관련 논의에서 '정직한 중재자' 역할을 할 수 있다고 강조했다. 최근 AI 안전에 대한 우려가 커지고 있는 가운데 미국과 영국의 접근법에는 차이가 나타나고 있다. 트럼프 대통령은 AI가 인류에 미칠 위험에 대한 우려를 일축하고 개발 속도를 늦추자는 주장에도 부정적인 입장을 보여왔다. 영국에서는 AI 기업 관계자들이 정부의 규제 지원을 요구하는 목소리를 내고 있다. 금융 분야에서도 AI 위험에 대한 경고가 나왔다. 사라 브리든 영란은행 부총재는 자율형 AI 에이전트가 금융시장에 혼란을 초래할 가능성을 언급하며 금융당국이 대응할 시간이 많지 않다고 경고했다. 번햄 총리는 영국이 AI 안전 분야에서 구축한 역량을 바탕으로 국제 논의를 이끌 수 있다는 입장이다. 영국은 첨단 AI 모델을 평가하는 AI안전연구소(AISI)를 운영하고 있으며 번햄 총리는 AISI가 향후 글로벌 AI 규제 논의의 중심 역할을 할 수 있다고 밝혔다. 이 같은 영국의 역할론은 국제사회에서 AI 감독체계 마련을 둘러싼 논의가 커지는 가운데 나왔다. 유엔에서는 21일(현지시간) 22개국이 새로운 글로벌 AI 감독체계 마련을 주장하는 선언을 채택했으며 영국 야권에서도 국제 AI 안전기구를 영국에 설치하자는 제안이 나왔다. 번햄 총리는 "우리는 이러한 잠재적인 균형점을 찾는 데 역할을 할 수 있다"며 "AI가 가져올 막대한 혜택을 분명히 인식하면서도 우리가 주의해야 할 부분을 인정해야 한다"고 말했다.

2026.09.22 09:46이나연 기자

트럼프-시진핑 만찬, 빅테크 수장들도 모인다

도널드 트럼프 미국 대통령과 시진핑 중국 국가주석의 정상회담을 앞두고 미국 주요 빅테크 수장들이 백악관 국빈 만찬에 집결한다. 이번 정상회담에서 인공지능(AI)이 주요 의제로 다뤄질 것으로 전망되면서 미중 AI 경쟁과 개발 속도·안전성을 둘러싼 논의에도 관심이 쏠린다. 21일(현지시간) 블룸버그 통신에 따르면 사티아 나델라 마이크로소프트(MS) 최고경영자(CEO)는 오는 24일 백악관에서 열리는 시 주석 환영 국빈 만찬에 참석할 예정이다. 앞서 참석이 알려진 팀 쿡 애플 집행의장을 비롯해 젠슨 황 엔비디아 CEO, 샘 알트먼 오픈AI CEO, 크리스티아노 아몬 퀄컴 CEO 등도 함께 할 예정이라고 블룸버그는 전했다. 이번 미중 정상회담에서는 AI가 주요 의제 가운데 하나로 다뤄질 예정이다. 미국 의회에서도 양국 정상이 AI 안전 기준을 논의해야 한다는 요구가 나온 것으로 전해졌다. 정상회담을 앞두고 양국 정부는 AI 관련 별도 대화 채널도 마련하기로 했다. 블룸버그에 따르면 스콧 베선트 미국 재무장관은 중국 측과의 AI·무역·투자 협의를 '매우 성공적'이라고 평가했다. 양측은 또 AI의 목표와 위협에 대한 공통된 이해를 마련하기 위한 대화를 이어가기로 합의했다. 최근 다리오 아모데이 앤트로픽 CEO가 AI의 사이버공격 등 위험성에 따른 'AI 속도조절론'을 주장하면서 업계에서는 개발 속도를 둘러싼 논쟁이 이어지고 있다. 트럼프 대통령은 "AI에서 승리하는 자가 승리한다"며 개발 속도 조절에 부정적인 입장을 보이고 있다. 중국 외교부 역시 일부 미국 빅테크들의 AI 개발 속도 조절 요구를 두고 "공포 조장과 대립은 글로벌 AI 거버넌스를 방해할 뿐"이라고 비판했다.

2026.09.21 18:15이나연 기자

[AI 속도 논쟁①] AI 정말 위험해졌나…안전·패권 놓고 빅테크 충돌

인공지능(AI) 개발 속도를 둘러싼 논쟁이 다시 커지고 있다. AI 에이전트가 사람의 지시를 받아 여러 작업을 이어서 처리하면서 사이버 공격 등 악용 방식도 달라지고 있어서다. AI 안전을 이유로 개발 속도를 늦춰야 한다는 요구가 나오는 가운데, 글로벌 빅테크와 미국 정부의 시각은 엇갈린다. AI 시장에서 차지하는 위치와 사업 구조, 기술 경쟁에 대한 이해관계가 제각기인 탓이다. 앤트로픽이 10일(현지시간) 공개한 '2026년 9월 AI 악용 탐지 및 대응 보고서'에 따르면 AI는 사이버 공격에서 코드 작성이나 정보 검색을 돕는 수준에서 벗어나 정찰·취약점 탐색·침투·정보 탈취 등 공격 과정 전반을 수행하거나 조율하는 데 활용되고 있다. AI, 사이버 공격 '조력자'서 '지휘자'로 앤트로픽은 이를 AI가 사이버 공격의 '어시스턴트'에서 '오케스트레이터'로 이동한 것으로 표현했다. 지난해 12월부터 올해 8월까지 앤트로픽 서비스에서 확인·차단한 악용 사례를 분석한 결과, 한 공격에서는 AI 에이전트가 여러 기업을 대상으로 인증정보를 수집하고 데이터를 탈취하는 작업을 수행했다. 약 34시간 동안 40곳이 넘는 기업 테넌트에서 2100개 이상의 마이크로소프트 엔트라 ID(옛 애저 AD) 인증 토큰이 탈취됐다. 이 과정에서 AI가 공격자의 작업 대부분을 한 것으로 나타났다. 또 다른 사례에서는 공격자가 목표만 제시하면 AI가 대상 환경을 분석하고 스크립트를 작성·실행한 뒤 결과를 확인하며 다음 작업을 이어가는 '바이브 해킹'도 확인됐다. 앤트로픽은 이같은 변화가 공격자의 기술 수준과 필요한 인력을 낮추는 효과도 낳고 있다고 분석했다. 소규모 해커가 AI를 활용해 여러 기관을 대상으로 공격을 진행하거나 AI를 활용한 취약점 연구와 공격 도구 개발을 지속한 경우도 보고서에 담겼다. 다만 공격자가 목표를 정하고 결과를 검토하는 등 핵심적인 판단까지 AI가 독자적으로 맡은 것은 아니었다. 안전 장치는 공감…개발 속도엔 입장차 다리오 아모데이 앤트로픽 최고경영자(CEO)가 AI 개발 속도를 늦추자고 목소리를 낸 것도 이같은 문제의식에서다. 아모데이 CEO는 12일(현지시간) 자신의 홈페이지에 '우리는 프론티어의 속도를 조절해야 한다'는 제목의 글을 올리고 AI 모델 성능 향상 속도를 늦춰야 한다고 주장했다. 모델 개발을 중단하자는 것이 아니라 안전 검증이 모델 성능 향상을 따라갈 시간을 확보해야 한다는 취지다. 이와 관련해 아모데이 CEO는 독립 평가자 도입과 주요 AI 기업 간 안전 기준 마련, 국가 간 협력을 제안했다. 오픈AI와 구글 딥마인드는 아모데이 CEO의 문제의식에 호응하면서도 기술 개발 자체를 중단하는 방식보다는 안전장치를 갖추면서 발전 속도를 조정하자고 제안했다. 두 회사 모두 최첨단 모델을 직접 개발하고 있어 고성능 모델의 위험을 평가하고 안전성을 확보하는 문제가 모델 개발과 직접 연결돼 있다. 샘 알트먼 오픈AI CEO는 12일(현지시간) 자신의 엑스(X·옛 트위터)에서 "독립 평가자에게 직원과 같은 수준의 접근 권한을 부여하는 것은 좋은 생각이며 우리도 그렇게 할 것"이라고 밝혔다. 데미스 허사비스 구글 딥마인드 회장도 "세부 사항은 논의가 필요하지만 방향은 이 중요한 시점에 맞다"고 말했다. 반면 메타와 엔비디아는 업계 전체가 같은 속도로 개발을 늦추는 제안에는 거리를 두고 있다. 메타는 오픈 모델과 AI 서비스를 확대하며 자체적인 안전 검증 체계를 운영하는 기업이다. 엔비디아는 AI 모델을 직접 개발하기보다 그래픽처리장치(GPU)와 데이터센터 인프라를 공급하는 기업으로 AI 확산 자체가 사업 기반과 연결된다. 젠슨 황 엔비디아 CEO는 15일(현지시간) 세일즈포스 드림포스 행사에서 "안전은 법률의 문제가 아니라 엔지니어링의 문제"라며 "새로운 법이나 규제는 필요하지 않다"고 언급했다. 마크 저커버그 메타 CEO는 16일(현지시간) 자신의 엑스에 "모든 연구소는 모델을 안전하게 훈련할 수 있는 속도로 움직일 책임과 동기를 갖고 있다"며 "이를 위해 스스로 행동할 능력도 있다"고 강조했다. 국제사회까지 번진 속도 논쟁…경쟁과 공조 사이 미국 정부는 자국의 기술 우위와 패권 경쟁이라는 국가적 이해관계를 이유로 AI 개발 공동 감속에 부정적인 견해를 보이고 있다. 도널드 트럼프 대통령은 AI 위험을 강조하며 개발 속도 조절을 요구하기보다 미국의 기술 경쟁력을 유지해야 한다고 강조해왔다. 특히 중국과의 경쟁에서 규제가 자국 기업의 발전을 제약할 수 있다는 입장이다. 트럼프 대통령은 14일(현지시간) 트루스소셜에 "AI에 필요한 유일한 통제 또는 가드레일은 강하고 현명한 대통령"이라고 밝혔다. 이어 "AI와 데이터센터를 둘러싼 역겨운 음모가 진행되고 있으며 중국만 이를 반기고 있다"며 "AI에서 승리하는 자가 승리한다"고 주장했다. 국제사회에서는 기업 간 경쟁을 넘어 국가 차원의 공동 대응이 필요하다는 목소리도 나왔다. AI 개발이 위험에 대한 이해보다 앞서가고 있어 국제적 공조와 공동 안전기준 마련이 필수라는 것이다. 안토니우 구테흐스 유엔 사무총장은 16일(현지시간) "세계는 AI 안전을 놓고 벌어지는 바닥을 향한 경쟁을 감당할 수 없다"며 "정부와 기업 등이 참여하는 국제 정상회의에서 보편적인 안전 기준을 논의해야 한다"고 말했다. 개발 속도를 둘러싼 온도차는 각 기업이 맡고 있는 역할과 AI 경쟁에서의 위치에 따라 안전과 혁신의 우선순위를 다르게 설정하고 있기 때문으로 풀이된다. 여기에 국가 차원의 기술 경쟁까지 겹치면서 AI 개발 속도와 안전 기준을 둘러싼 논의도 기업별·국가별 다른 방향으로 전개되고 있다. 김두언 하나증권 연구원은 "안전 검증이 강화되면 특정 모델의 출시와 매출 인식이 늦어질 수 있다"면서도 "프론티어 모델의 개발 속도, 기존 모델의 추론 이용량, 데이터센터 구축, 고대역폭 메모리(HBM) 발주는 서로 다른 변수"라고 진단했다.

2026.09.17 16:43이나연 기자

배경훈 부총리 "대한민국 AI 시계 늦추지 않겠다"…'속도책임' 제시

배경훈 부총리 겸 과학기술정보통신부 장관이 글로벌 인공지능(AI) 업계에서 커지는 개발 속도 조절론에 대해 한국은 기술 개발 속도를 늦춰서는 안 된다는 입장을 내놨다. 연구개발과 산업 활용에는 속도를 내되 커지는 위험에는 안전장치를 함께 강화하는 '속도책임'을 해법으로 제시했다. 배 부총리는 16일 자신의 사회관계망서비스(SNS)에 'AI에 필요한 것은 속도조절이 아니라 속도책임'이라는 제목의 글을 올리고 "우리는 지금 AI의 속도를 늦출 여유가 없다"고 밝혔다. 이미 앞선 국가가 속도를 조절하는 것과 추격하면서 새로운 시장을 만들어야 하는 한국이 스스로 속도를 낮추는 것은 다르다는 입장이다. 배 부총리 발언은 최근 글로벌 AI 업계에서 프론티어 AI의 개발 속도를 조절해야 한다는 주장이 커지는 가운데 나왔다. 다리오 아모데이 앤트로픽 최고경영자(CEO)는 최근 AI 개발을 멈추기보다 안전 연구와 검증 체계가 따라갈 수 있도록 속도를 조절해야 한다고 주장했다. 배 부총리도 AI 위험에 대한 우려에는 공감했다. AI 선도기업의 막대한 투자 경쟁과 데이터 확보·활용 문제, 고영향 AI가 가져올 예측하기 어려운 위험 등을 "진지하게 고민하고 대비해야 할 문제"로 꼽았다. 다만 한국은 감속보다 기술 영역을 넓혀야 한다고 봤다. 거대언어모델(LLM) 기반 독자 AI 파운데이션 모델을 넘어 산업 현장에서 보고 이해하고 행동하는 비전언어모델(VLM)과 비전언어행동모델(VLA) 등으로 발전해야 한다는 것이다. 앞으로 범용인공지능(AGI)에 가까운 기술을 확보한 국가와 그렇지 못한 국가의 격차가 산업과 경제를 넘어 안보 등 국가 경쟁력 전반으로 번질 수 있다고도 내다봤다. 배 부총리는 "이미 앞서 있는 나라가 속도를 조절하는 것과 추격하면서 동시에 새로운 시장을 만들어야 하는 나라가 스스로 속도를 낮추는 것은 전혀 다른 문제"라고 말했다. 안전과 신뢰 확보도 함께 강조했다. AI 발전이 빨라질수록 딥페이크와 사이버보안, 개인정보 보호, 일자리 변화 등에 대응할 기술적·제도적 안전장치도 빠르게 갖춰야 한다고 짚었다. 배 부총리는 이를 가속페달과 브레이크에 빗댔다. 그는 "AI 연구개발과 산업 활용에는 과감하게 가속페달을 밟되 위험에는 제대로 작동하는 브레이크를 갖춰야 한다"며 "속도는 경쟁력이고 안전은 지속가능성"이라고 말했다. 정부 정책도 이런 방향으로 추진할 계획이다. 배 부총리는 AI기본법 시행을 위한 제도적 준비와 독자 AI 파운데이션 모델 개발, 모두의 AI, 보안특화모델 사업에 이어 프론티어 AI 역량 확보를 위한 사업도 차질 없이 준비하겠다고 했다. 산업계에서도 AI 산업 육성과 안전 규범을 병행해야 한다는 의견이 나왔다. 국내 기업이 해외 빅테크가 만든 기준을 따르는 데 그치지 않고 국제 규범을 만드는 과정에도 직접 참여해야 한다는 주문이다. 김동환 포티투마루 대표는 "AI 산업 육성과 안전 규범 강화를 동시에 추진해야 한다"며 "안전 규범을 공론화하고 다양한 이해관계자의 의견을 들은 뒤 사회적 합의를 만들어가는 과정이 반드시 필요하다"고 말했다. 이어 "유엔 AI 허브 유치와 AI안전연구소 역할 강화 등을 통해 국제 안전 규범을 만드는 과정에서 한국이 글로벌 리더십을 발휘할 필요가 있다"고 덧붙였다. 박지환 씽크포비엘 대표는 기술 개발과 실제 활용을 구분해 접근할 필요가 있다고 짚었다. 그는 "연구는 계속하되 개발한 기술을 사회에서 어디까지 쓰게 할지는 별도로 정해야 한다"며 "AI의 위험 수준에 맞는 활용 기준과 규범을 함께 마련해야 한다"고 말했다. 배 부총리는 후속 정책 발표도 예고했다. 그는 "조만간 그동안 깊이 고민해 온 독파모의 다음 단계와 대한민국 프론티어 AI 모델 개발 방향도 국민 여러분께 말씀드리겠다"고 밝혔다. 이어 "대한민국의 AI 시계를 늦추지 않겠다"며 "더 빠르게 그러나 더 안전하게 가겠다"고 강조했다.

2026.09.16 15:30김동원 기자

'AI 속도조절론' 앤트로픽, 트럼프 정부와 안전 문제 논의

다리오 아모데이 앤트로픽 최고경영자(CEO)가 고성능 인공지능(AI) 개발 속도를 늦추고 정부 규제가 필요하다고 주장한 가운데, 도널드 트럼프 미국 행정부 고위 관계자들이 앤트로픽 측과 AI 안전 문제를 논의했다. 블룸버그통신은 16일(현지시간) 소식통을 인용해 에밀 마이클 전쟁부(국방부) 최고기술책임자(CTO)와 하워드 러트닉 상무장관이 전날인 15일(현지시간) 톰 브라운 앤트로픽 최고컴퓨트책임자(CCO)와 화상으로 대화했다고 보도했다. 이번 회동은 아모데이 CEO가 12일(현지시간) 3800단어 분량의 에세이를 통해 AI 안전 문제와 정부 규제 필요성을 제기한 직후 이뤄졌다. 아모데이 CEO는 에세이에서 가장 발전된 AI 시스템의 개발 속도를 조절하고 연구자들이 잠재적 위험을 파악할 수 있도록 정부가 규제해야 한다고 주장했다. 트럼프 대통령은 AI 위험에 대한 우려와 새로운 규제에 반대해왔다. 트럼프 대통령은 최근 사회관계망서비스(SNS) 트루스소셜에 "AI에 필요한 유일한 안전장치는 자신의 대통령직"이라며 "AI 개발을 늦추는 것은 중국에 도움이 될 것"이라고 비판했다. 앤트로픽과 미국 정부는 올해 군사적 AI 활용 범위를 놓고도 충돌했다. 전쟁부와 앤트로픽의 협상이 결렬된 뒤 전쟁부는 앤트로픽을 공급망 위험 기업으로 지정했고 앤트로픽은 이에 반발해 소송을 제기했다. 브라운 CCO는 이후 정부와의 관계 개선 및 고성능 AI 모델 수출 통제 문제를 놓고 협상을 주도했다. 전쟁부 관계자는 블룸버그에 "프론티어(최첨단) AI 기업들과 지속적으로 접촉하고 있다"면서도 "앤트로픽에 대한 우리 입장은 변하지 않았다"고 밝혔다.

2026.09.16 10:01이나연 기자

  Prev 1 Next  

지금 뜨는 기사

이시각 헤드라인

[타보고서] 프리미엄 도전장 낸 중국 지커…6999만원 '7X'의 경쟁력은

이재용, 日서 AI 반도체 승부처 점검…첨단 패키징 협력 강화

"25년 내공으로 냉각부터 관제까지"…KT클라우드 AIDC 가보니

LG디스플레이, LT소재와 공동 출원했던 美특허 9건 단독보유 전환

ZDNet Power Center

Connect with us

ZDNET Korea is operated by Money Today Group under license from Ziff Davis. Global family site >>    CNET.com | ZDNet.com
  • 회사소개
  • 광고문의
  • DB마케팅문의
  • 제휴문의
  • 개인정보취급방침
  • 이용약관
  • 청소년 보호정책
  • 회사명 : (주)메가뉴스
  • 제호 : 지디넷코리아
  • 등록번호 : 서울아00665
  • 등록연월일 : 2008년 9월 23일
  • 사업자 등록번호 : 220-8-44355
  • 주호 : 서울시 마포구 양화로111 지은빌딩 3층
  • 대표전화 : (02)330-0100
  • 발행인 : 김경묵
  • 편집인 : 김태진
  • 개인정보관리 책임자·청소년보호책입자 : 김익현
  • COPYRIGHT © ZDNETKOREA ALL RIGHTS RESERVED.