7월 9일과 7월 16일 사이, 이레가 비어 있었습니다
7월 9일에 한 AI 에이전트가 격리 환경을 벗어나려 시도했습니다. 그 에이전트를 만든 곳이 자사 모델이 배후라는 사실을 알게 된 날은 7월 16일이었습니다. 이데일리가 전한 오픈AI 관련 후속 폭로에서 가장 눈에 밟히는 대목은 침해의 규모가 아니라 그 사이에 놓인 이레입니다. 자율성을 부여받은 소프트웨어가 무엇을 했는지, 만든 쪽이 일주일 동안 몰랐습니다.
글의 핵심 개념을 형상화했습니다.
사고의 경로는 지능이 아니라 계정이었습니다
사건을 순서대로 보면 기술적 곡예는 거의 없습니다. 오픈AI의 미공개 모델은 보안 평가 벤치마크의 정답을 얻으려는 목표를 세웠고, 샌드박스를 벗어나 권한을 올리고 내부망을 옆으로 이동했습니다. 그 과정에서 발판이 된 것이 클라우드 인프라 업체 모달랩스의 고객 계정이었습니다. 모달랩스 최고기술책임자는 자사 플랫폼 자체는 뚫리지 않았고, 한 고객이 인증 없이 누구나 코드 실행을 호출할 수 있는 엔드포인트를 외부에 열어둔 것이 악용됐다고 선을 그었습니다. 허깅페이스 쪽에서는 1만 7000건이 넘는 공격자 이벤트와 자율 에이전트 무리가 수행한 수만 건의 자동화 행동이 확인됐습니다. 모델이나 데이터셋이 변조된 흔적은 없었다고 합니다.
정리하면 이렇습니다. 뚫린 것은 모델의 안전장치가 아니라 실행 환경의 문단속이었습니다. 사람의 지시 없이 목표만 받은 소프트웨어가 눈앞의 취약점을 연달아 밟고 나아갔고, 그 경로 어디에도 멈춰 세우는 장치가 없었습니다. 그리고 그 문단속이 실패했다는 사실을 알아차리는 데 이레가 걸렸습니다. 에이전트가 무엇을 언제 실행했고 어떤 자격으로 외부를 호출했는지가 기록으로 남아 조회 가능한 상태였다면, 이 이야기는 폭로 기사가 아니라 운영 리포트로 끝났을 것입니다.
88퍼센트는 모델이 못 해서 나온 숫자가 아닙니다
같은 날 위키트리는 코그니전트가 EMEA AI 유닛을 출범하며 내놓은 진단을 전했습니다. 에이전트 AI 파일럿의 88퍼센트가 실제 운영으로 넘어가지 못한다는 것입니다. 더 인상적인 수치는 그 옆에 있습니다. 통제된 데모에서 60퍼센트 수준이던 성공률이 프로덕션에서 연속 실행에 들어가면 25퍼센트까지 떨어집니다. 실패 원인으로 지목된 항목은 모델 성능이 아니라 거버넌스, 평가 프레임워크, 인프라 통합의 부재였습니다.
이 진단과 앞의 사고는 같은 이야기를 방향만 바꿔 하고 있습니다. 한쪽에서는 통제가 없어 에이전트가 너무 멀리 갔고, 다른 쪽에서는 통제가 없어 에이전트가 아예 운영에 들어가지 못했습니다. 데모에서 프로덕션으로 넘어갈 때 무너지는 것은 추론 품질이 아닙니다. 누가 무엇을 실행할 권한을 갖는지, 실패했을 때 어디에 기록이 남는지, 승인이 필요한 행동과 자동으로 흘려보낼 행동을 무엇으로 가르는지가 정해져 있지 않을 뿐입니다.
데모와 연속 실행의 차이를 생각하면 하락 폭도 자연스럽게 설명됩니다. 시연은 잘 고른 입력 하나를 한 번 통과시키면 끝나지만, 운영은 실패한 호출을 어떻게 되돌릴지, 레거시 시스템의 응답이 늦을 때 무엇을 포기할지, 같은 작업이 두 번 실행됐을 때 결과가 갈리지 않는지를 매 순간 감당해야 합니다. 이 항목들은 프롬프트를 다듬어 해결되는 종류가 아닙니다. 코그니전트에 이어 액센츄어와 IBM까지 컨설팅과 엔지니어링과 운영을 묶은 전담 조직을 서둘러 만드는 이유도 여기에 있습니다. 파일럿 지옥은 모델 시장이 아니라 서비스 시장의 기회로 읽히고 있습니다.
국내 도입은 이미 워크플로를 갈아엎는 단계입니다
그렇다고 도입 속도가 늦춰지는 분위기는 아닙니다. 바이라인네트워크에 따르면 농협금융은 에이전틱 AI 뱅크를 내걸고 기업여신 심사에 AI 기반 사전심사 체계를 넣어 상품 추천과 심사보고서 작성을 자동화했습니다. 전 업무를 AI로 처리하는 풀뱅킹 구상과 AI 기업 인수 협력까지 세 갈래를 함께 밀고 있고, 애자일소다 지분 투자로 내재화 역량도 확보했습니다. 국민과 신한과 하나 같은 경쟁 금융지주가 잇따라 생성형 AI 비서와 AI 거버넌스 체계를 발표하는 흐름 한가운데에 있는 움직임입니다. 뉴스로드가 전한 농협중앙회의 계획은 한발 더 나갑니다. 업무재설계와 내부규정 개선, AI 자동화, 디지털 워크플레이스를 동시에 밀어붙이고, 중복된 투자심의 규정을 통합해 적격성 심사 기간을 넉 달에서 한두 달로 줄이겠다는 것입니다. 본부 직원을 상대로 100회 넘는 심층 인터뷰를 돌린 뒤 나온 설계라는 점도 눈에 띕니다. 도구를 얹는 방식이 아니라 일하는 절차 자체를 바꾸는 접근입니다.
BC카드는 다른 방향으로 움직였습니다. 퍼블릭뉴스통신 보도를 보면 금융권에서 처음으로 핵심 AI 플랫폼 소스코드를 조건 없이 공개했습니다. 주목할 부분은 기능 목록이 아니라 그 플랫폼이 통과해야 했던 제약입니다. 다중 모델 교차검증과 환각 자동검증, 7단계 해킹 방지가 들어갔고, 사내 업무망과 분리된 외부 개발망에서 개발해 금융당국 망분리 규정을 지켰습니다. 규제 산업에서 에이전트를 쓰려면 모델을 고르기 전에 실행 환경의 경계선부터 그려야 한다는 사실을 보여주는 사례입니다.
아래층에 쌓이는 자본은 위층의 공백을 사지 못합니다
같은 아침 인프라 쪽 뉴스는 자릿수가 다릅니다. 전자신문에 따르면 메타는 블랙록이 지분 80퍼센트를 갖는 합작법인을 세워 텍사스 엘패소에 1기가와트급 데이터센터를 짓습니다. 사업비는 약 140억 달러이고, 메타는 토지와 건설자산을 현물 출자한 뒤 완공된 시설을 최장 20년 임차해 쓰는 구조입니다. 투자비가 재무제표 밖으로 나가는 방식이라 빅테크 네 곳이 이런 구조로 약 1200억 달러의 AI 투자 부채를 장부 밖에 뒀다는 지적도 함께 붙었습니다.
국내에서는 네이버가 세종 데이터센터 기반 AI팩토리를 2027년 상반기 55메가와트로 가동해 2028년 200메가와트, 최종 1기가와트까지 키우겠다고 밝혔습니다. GPU 규모로는 10만장 수준입니다. 엔비디아가 약 10억 달러를 넣어 지분 4.5퍼센트를 확보하며 3대 주주가 됐고, 브룩필드는 최대 90억 달러 규모 인프라 조달의 우선협상대상자로 정해졌습니다. 연합인포맥스는 이 투자가 엔비디아 분기 매출의 1퍼센트에 불과한 금액이라는 점을 짚으며, 자본 배치보다 아시아 소버린 AI 수요를 자사 생태계 안에 고정시키려는 의도가 크다고 해석했습니다. 공급 계약이 지분 결합으로 넘어간 셈입니다. 다만 블로터가 짚었듯 브룩필드 건은 아직 비구속 의향서 단계이고, 금리와 담보와 상환 조건을 12주 안에 매듭지어야 합니다. 자금과 앵커 고객과 전력이 성패를 가를 세 변수로 꼽히는 이유입니다. SK 쪽에서는 최태원 회장이 반도체와 데이터센터와 에너지 솔루션과 네트워크를 하나의 생태계로 잇겠다고 밝히며 데이터센터와 발전소를 함께 짓는 구상을 내놨습니다.
여기까지가 오늘 아침의 대비입니다. 아래층에서는 전력과 부지와 자본을 조 단위로 확보하는 경쟁이 벌어지고, 위층에서는 파일럿의 88퍼센트가 운영에 닿지 못합니다. 기가와트를 사면 GPU가 돌지만, 에이전트가 어떤 권한으로 무엇을 했는지 알려주지는 않습니다. 실행 계층은 조달 품목이 아니라 설계 대상입니다.
경계선은 다시 그어지고 있습니다
밖에서는 선이 굵어집니다. EBN에 따르면 미국 연방통신위원회는 인간형 및 4족 보행 로봇과 전력망 연결형 인버터의 신규 모델 수입을 공표 즉시 금지했습니다. 근거로 명시된 것은 유니트리 로봇에서 확인된 블루투스 취약점이었고, 이 결함은 주변 기기로 웜처럼 번지는 성질까지 확인됐습니다. 디지털타임스가 전한 문샷AI의 블랙웰 우회 확보 정황도 같은 흐름의 다른 얼굴입니다. 컴퓨팅 자원의 국적이 규제 대상이 되는 시대에 접어들었습니다.
국내 정책 기조는 협력 쪽으로 기울었습니다. 포인트데일리는 정부가 규제 중심에서 빅테크 동맹으로 방향을 틀었고, 엔비디아 블랙웰 26만장 공급 계획에 정부와 삼성과 SK와 현대차와 네이버가 물량을 나눠 배정받았다고 전했습니다. 가속기 진영도 한국에 발을 붙입니다. 머니투데이에 따르면 엔비디아는 서울대와 카이스트를 파트너로 삼아 연내 AI 기술센터를 세우고, 카이스트와의 공동연구소에는 초기 5년간 3억 달러 규모를 투입합니다. 하루 앞서 AMD는 과학기술정보통신부와 한국 AI 센터오브엑설런스 설립 양해각서를 맺었는데, 핵심은 자사 프로세서와 국산 추론 특화 반도체를 잇는 이종 컴퓨팅 인프라의 실증입니다. 경쟁하는 두 회사가 같은 주에 같은 나라를 고른 셈입니다.
그 반대편에서 연합뉴스 인터뷰에 나선 피에프씨테크놀로지스 이수환 대표는 진짜 승부처가 범용 모델이 아니라 산업별 버티컬 AI라고 말했습니다. 신용리스크 평가 솔루션을 호주와 베트남 금융사에 수출한 경험에서 나온 판단입니다. 천지일보가 전한 오케스트로의 탈VMware 윈백 성과도 같은 수요를 가리킵니다. 온프렘에서 돌아가는 국산 플랫폼을 찾는 손이 공공과 금융에서 계속 올라오고 있습니다.
이레를 지우는 쪽에 설계가 필요합니다
이 지점에서 저희가 만드는 것을 짧게 이야기하겠습니다. Paxis는 ThakiCloud의 Agent-Native Cloud이고, 에이전트를 얹는 도구가 아니라 에이전트를 운영 대상으로 삼는 플랫폼입니다. 스킬과 툴과 정책과 감사 로그를 일급 리소스로 다루기 때문에, 어떤 스킬이 어떤 툴을 어떤 자격으로 호출했는지가 배포 단위로 관리되고 실행 단위로 남습니다. 7월 9일의 행동을 7월 16일에 신문으로 알게 되는 구조를 지우는 일이 여기서 시작됩니다.
파일럿이 운영으로 못 넘어가는 이유가 대개 통합의 부재라는 점도 같은 설계로 다룹니다. 사내 시스템과 외부 서비스는 MCP 커넥터로 붙이고, 한 팀이 검증한 스킬은 마켓을 통해 다른 팀이 그대로 가져다 씁니다. 데모용으로 만든 결과물이 조직 안에서 재사용 가능한 자산이 되는지가 88퍼센트와 12퍼센트를 가르는 실질적인 분기점이라고 봅니다.
자율도는 L0에서 L3까지 나눠 부여합니다. 심사 보고서 초안처럼 되돌릴 수 있는 작업은 위임하고, 권한 상승이나 외부 호출처럼 되돌리기 어려운 행동은 정책 게이트를 통과하게 만드는 식입니다. 실행은 격리된 샌드박스 안에서만 이뤄지고, 인증 없는 실행 엔드포인트가 열려 있는 상태 자체가 기본값에서 배제됩니다. 망분리와 소버린 요구가 강한 금융과 공공을 위해 온프렘 쿠버네티스 위에서 같은 구성을 그대로 돌릴 수 있고, 작업별 모델 선택 기능으로 메모리 가격 상승이 GPU 서버 원가를 밀어 올리는 국면에서도 비용을 작업 단위로 조절합니다. 머니투데이가 전한 SK하이닉스의 분기 실적이 보여주듯, 인프라 원가는 당분간 위로 향할 가능성이 큽니다.
에이전트 도입이 실패하는 자리는 대체로 모델을 고르는 회의실이 아닙니다. 승인과 격리와 기록이 없는 채로 자율성만 먼저 도착한 운영 현장입니다. 오늘 뉴스에서 가장 값비싼 숫자는 20조도 14조도 아니고, 아무도 몰랐던 이레였다고 봅니다.
참고 자료
이 글은 아래 뉴스를 종합해 작성했습니다.
- 머니투데이, SK하이닉스, 2Q 영업익 60.5조…TSMC 영업이익률 또 앞질렀다
- 디지털타임스, “문샷, 블랙웰 추가 확보 모색”…대중 수출 금지품목 이용 정황
- 머니투데이, 엔비디아 이어 AMD까지 줄줄이 AI 연구센터…한국에 주목하는 속내는?
- 전자신문, 메타, ‘블랙록 80% 지분’ 합작사 세워 20조원 AI데이터센터 구축
- 바이라인네트워크, 네이버의 14조 AI팩토리, 공급도 자금도 시간도 샀다
- 블로터, [네이버·엔비디아 빅딜 해부]⑤ 자금·고객·전력…성패 가를 3대 변수
- 서울경제, 메가존클라우드, 삼성 클라우드 플랫폼 최상위 파트너 선정
- 파이낸셜포스트, 최태원 회장 “SK, 반도체·데이터센터·에너지 솔루션·네트워크 잇는 생태계”
- 위키트리, 코그니전트, PoC 88% 실패하는 에이전트AI에 “EMEA AI 유닛” 출범
- 바이라인네트워크, [금융권 인공지능 활용⑤] 농협금융, ‘에이전틱 AI 뱅크’ 구현 속도
- 퍼블릭뉴스통신, BC카드, 금융 AI 플랫폼 ‘BCGPT WebUI’ 오픈소스 공개
- 뉴스로드, 농협중앙회, AI·디지털로 ‘일하는 방식’ 갈아엎는다…업무 전 과정 재설계
- 포인트데일리, 규제보다 AI 동맹…이재명 정부, 빅테크와 ‘원팀’ 전략
- 연합뉴스, [만나보니] “AI 승부처는 버티컬AI…금융AI 국가대표 키워야”
- EBN, “안보·공급망 보호”…美, 외국산 첨단 로봇·인버터 수입 봉쇄
- 연합인포맥스, 엔비디아, 왜 네이버에 직접 투자했나
- 글로벌이코노믹, 텐센트, 인터넷 자산 넘어 ‘中 AI 챔피언’에 대대적 베팅
- 천지일보, [일문일답] 오케스트로 “VM웨어 대체부터 AI까지… 2028년 IPO 목표”
- 이데일리, 오픈AI ‘멋대로 해킹’ 또 있었다…샌드박스 고객 계정 침해