- 미국과 이스라엘 국방·정보 조직은 AI와 실리콘 밸리 기술을 전쟁 판단의 돌파구로 내세우지만, 여러 사례는 기술적 확신이 현장 실패와 반복적으로 충돌했음을 보여줌
- Shin Bet은 생성형 AI를 의사결정의 “공동 조종사”처럼 통합했다고 했지만, 2023년 10월 7일 Hamas 공격은 감시 영상·공개 훈련·내부 보고·사전 문서가 있었음에도 이스라엘 방위·정보 체계를 기습함
- 미국 국방 분야의 Igloo White, Assault Breaker, Future Combat Systems, Secure Border Initiative Network는 컴퓨팅·센서로 전장을 통제하려 했지만 막대한 비용 뒤 실패하거나 취소됨
- Pentagon은 AI에 소극적이라는 이미지와 달리 최소 686개 AI 프로젝트를 지원하고, 2022년에는 주요 기술 기업들에 최대 90억 달러 규모 Joint Warfighting Cloud Capability 계약을 부여함
- Google, Amazon, Microsoft, Palantir, Anduril은 국방 시장에 깊이 들어갔지만 Project Maven, IVAS, Roadrunner, Palantir 사례는 군사용 AI가 윤리 논란, 성능 한계, 마케팅 과장, 환각 문제를 함께 안고 있음을 드러냄
AI가 놓친 10월 7일 공격
- Shin Bet 국장 Ronen Bar는 Hamas 공격 3개월 전, 내부 보안기관이 ChatGPT와 유사한 생성형 AI 플랫폼을 개발해 “interdiction machine”에 자연스럽게 통합했다고 발표함
- 이 시스템은 대상자의 이동, 친구, 가족, 활동, 발언, 게시물을 바탕으로 행동을 분석하고 위험을 예측해 경보를 올리도록 설계됨
- 2023년 10월 7일 Hamas 공격은 Shin Bet과 이스라엘의 수십억 달러 규모 방위 체계를 완전히 기습함
- Hamas는 국경 장벽과 이스라엘 정착지 모형을 대상으로 한 훈련을 공개적으로 수행함
- Hamas 주도 무장단체들은 훈련 영상을 온라인에 올림
- 국경 인근 이스라엘 주민들은 훈련을 관찰하고 경고했지만 무시됨
- Gaza 국경 감시 카메라를 보던 이스라엘 징집병들은 장벽 돌파와 인질 납치 준비에 대한 상세 보고서를 냈지만 “상상 시나리오”로 기각됨
- 이스라엘 정보기관은 공격 계획을 상세히 담은 Hamas 문서를 1년 넘게 보유하고 있었음
- Hamas 구성원들은 이스라엘 정보 방식에 맞춰, 자신들이 알던 정보원을 통해 이스라엘이 듣고 싶어 하는 데이터를 흘림
- Gaza 내 Hamas가 이스라엘 노동시장 접근을 통한 지역 경제 개선에 집중한다는 신호를 보냄
- 이스라엘의 압도적 군사력 때문에 Hamas가 행동을 억제당했다는 인상을 줌
- 이 실패는 AI가 “테러리스트에 대해 모든 것을 안다”는 식의 자신감과, 대상이 실제로 무엇을 생각하는지는 알지 못하는 한계를 대비시킴
국방 AI 낙관론과 Pentagon 현실
- Michèle Flournoy는 Foreign Affairs에서 AI가 전장 방식, 위협 탐지, 무기체계 유지보수, 전략 결정 비용 추정에 변화를 줄 것이라고 봄
- 기술 기업의 국방 진입을 막는 장애물로 Pentagon 관료제가 자주 지목되지만, Pentagon을 AI에 무관심한 조직으로 보기는 어려움
- 최소 686개 AI 프로젝트에 자금을 댄 것으로 알려짐
- 2022년 Joint Warfighting Cloud Capability 계약으로 주요 기술 기업들에 최대 90억 달러 규모 사업을 부여함
- 한 Pentagon 관계자는 이 계약이 AI 솔루션을 “turbocharge”할 것이라고 함
- Gamechanger는 Pentagon 직원들이 거대 조직이 실제로 무엇을 하고 돈이 어디로 가는지 찾도록 설계된 AI 프로젝트임
- 2022년 초 Joint Artificial Intelligence Center 보도자료는 “28 Authoriative Sources”라고 표기된 출처를 언급함
- 한 고위 Pentagon 회계 담당자는 예산 자료 전반에 대한 가시성과 이해를 높이는 데 Gamechanger를 적용하길 기대함
- 그럼에도 Pentagon은 2023년에도 재무감사를 통과하지 못해 6년 연속 실패함
- 기술 산업 인물이 군사 체계를 혁신한다는 서사는, 돈을 많이 쓰고 성능이 좋지 않은 무기와 패전으로 악명 높은 방위 시스템까지 근본적으로 개선될 수 있다는 신화로 이어짐
컴퓨팅으로 전장을 통제하려 한 반복된 실패
- 미국 전쟁 수행에는 소프트웨어가 인간 갈등 문제를 해결할 수 있다는 믿음이 오래전부터 자리 잡고 있었음
-
Igloo White
- 1967~1972년 미 공군은 동남아시아 정글의 Ho Chi Minh trail 주변에 대규모 센서를 배치함
- 이 작전은 발소리, 소변의 암모니아 냄새, 엔진 점화 전자 신호로 인간 활동을 탐지하고, 태국 비밀 기지의 IBM 컴퓨터로 정보를 보내 보급로를 파악하려 함
- 비용은 매년 최소 수억 달러였지만 완전한 실패로 끝남
- 베트남군은 길 밖 나무에 소변 양동이를 걸거나, 사용하지 않는 길로 가축을 몰아 컴퓨터가 적 이동으로 처리하게 함
- 1972년 북베트남군은 수백 대의 전차를 동원한 공세를 펼쳤지만 Igloo White는 이를 전혀 탐지하지 못했고 작전은 곧 폐기됨
-
Assault Breaker와 이후 사업
- 베트남 철수 뒤 미국은 동유럽의 소련 후방을 공중 레이더로 들여다보는 Assault Breaker에 거액을 투입함
- 이 시스템은 시험에서 전차와 자동차, 바람에 흔들리는 나무를 구분하지 못했고 다음 10년대에 취소됨
- Future Combat Systems는 센서와 무기를 고성능 프로세서로 연결해 방어 장갑이 필요 없을 정도로 목표를 쉽게 타격할 수 있다는 구상을 내세웠지만, 거의 200억 달러를 쓰고 성과 없이 끝남
- Department of Homeland Security의 Secure Border Initiative Network는 레이더, 카메라, 감시 센서를 연결한 “가상 장벽”으로 홍보됐지만 2011년 취소됨
- Boeing은 Future Combat Systems와 Secure Border Initiative Network의 주요 계약자였고, 이런 실패는 실리콘 밸리식 빠른 혁신이 기존 방산업체 실패를 대체할 수 있다는 기대와 대비됨
Silicon Valley와 군산복합체의 재결합
- 실리콘 밸리 산업은 Pentagon 후원 아래 성장한 전자산업과 깊게 연결되어 있음
- 현대 컴퓨터의 핵심인 집적회로는 1958년 Texas Instruments가 처음 생산했고, 방위 예산이 개발을 밀어줌
- 초기 적용처는 Minuteman II 대륙간 핵미사일 유도 시스템이었음
- Apple Computer는 1980년 12월 상장 한 달도 안 돼 Ford보다 높은 가치를 인정받았고, Macintosh는 개인에게 기업 수준의 컴퓨터 파워를 준다는 해방적 이미지로 소개됨
- 방위와의 결별은 완전하지 않았음
- 인터넷은 Pentagon의 Advanced Research Projects Agency가 개발한 ARPANET에서 나옴
- Google 창업자 Larry Page와 Sergey Brin의 Stanford 초기 연구는 DARPA가 된 같은 Pentagon 기관의 자금 지원을 일부 받음
- Google Earth는 CIA의 벤처캐피털 조직 In-Q-Tel이 일부 자금을 댄 Keyhole EarthViewer에서 출발했고, 이후 Google이 인수함
- Peter Thiel은 PayPal 공동창업과 Facebook 초기 투자로 부를 쌓은 뒤, 군산복합체를 실리콘 밸리로 되돌리려는 방향을 취함
- Palantir는 2003년 설립되어 PayPal의 사기 탐지 기술 기반으로 데이터 패턴을 시각적으로 탐지·전달하는 소프트웨어를 제공함
- CIA는 In-Q-Tel을 통해 초기 투자자였음
- 초기 계약 다수는 정보기관에서 나온 것으로 알려짐
- GhostNet과 Osama bin Laden 은신처 탐지에 큰 역할을 했다는 주장이 있었지만, 이를 뒷받침하는 증거는 없음
- Palantir는 고위 군 관계자의 반대 속에서도 중간급 Army 장교와 협력 의원들을 통해 기술을 홍보함
국방 혁신 조직과 Project Maven
- Robert O. Work는 미국이 핵무기와 정밀유도무기에서 누렸던 기술 우위를 잃고 있으며, 중국과 러시아가 따라잡았다고 경고함
- 2014년 Chuck Hagel 국방장관은 Work가 감독하는 Defense Innovation Initiative를 공개하며, 국방부 전통 영역 밖의 기업과 학계 제안을 적극 찾겠다고 함
- Ash Carter는 기술 지역을 반복 방문했고, 2015년 Google과 Apple 본사 근처 Mountain View에 Defense Innovation Unit Experimental을 세움
- 이후 “Experimental”은 이름에서 빠짐
- Department of Homeland Security도 근처에 위성 사무소를 세워 Silicon Valley 기술 기업과 관계를 키우려 함
- 2016년 Carter는 Eric Schmidt가 이끄는 Defense Innovation Advisory Board를 만들었고, Schmidt는 이후 National Security Commission on Artificial Intelligence를 이끌었으며 Work가 부위원장을 맡음
- Project Maven은 Work가 만든 사업으로, Pentagon의 빅데이터와 기계학습 통합을 가속하는 것이 목표였음
- 2017년 Google은 드론 영상의 끊임없는 흐름을 처리해 목표를 식별하는 도구 개발 계약을 확보함
- Gizmodo에 유출된 내부 이메일에 따르면 Google 참여는 회사 허락 없이 공개하지 않기로 되어 있었음
- Google Cloud의 AI 수석 과학자 Fei-Fei Li는 “AI” 언급이나 암시를 피하라고 이메일을 보냄
- 계약이 알려지자 Google 직원 약 4,000명이 Google이나 계약업체가 전쟁 기술을 만들지 않겠다는 명확한 정책을 요구하는 청원에 서명했고, 일부는 사임함
Maven 이후 드러난 성능 한계와 하청 이동
- Project Maven의 영상 입력원은 Reaper 드론에 장착된 카메라 포드 시스템 Gorgon Stare였음
- Gorgon Stare는 모든 것을 볼 수 있다는 식으로 홍보됐지만, Eglin Air Force Base 시험 부대의 2011년 보고서는 여러 결함을 지적함
- 카메라는 목표를 쉽게 찾고 식별하지 못함
- 전송률이 너무 느림
- 시험 부대는 “작전상 효과적이지 않다”고 결론 내리고 Afghanistan 배치를 하지 말라고 했지만, 공군은 배치함
- 한 전직 전투기 조종사이자 Pentagon 분석가는 자동 표적 인식(ATR)이 수년간의 비용 투입 뒤에도 작동하지 않는다고 말함
- Pentagon 기관에서 관련 문제를 다루는 또 다른 전투 참전자는 AI 개발자들이 군사용 요구사항 일부를 이해하지 못하는 것 같다고 봄
- DARPA 실험에서 Marines 분대는 AI가 제어하는 로봇의 탐지를 피하기 위해 신체 실루엣을 바꿈
- 두 명은 큰 판지 상자 안에 들어가 이동했고, 다른 인원은 공중제비를 넘었으며, 한 명은 전나무 가지를 착용함
- 모두 열린 지면을 지나 로봇에 접근해 감지되지 않고 접촉함
- Google이 Maven에서 철수한 뒤 Microsoft, Amazon, Palantir 등이 하청을 이어받음
- 이 사실은 Google을 떠난 Jack Poulson이 찾아냄
- Poulson은 이후 Tech Inquiry를 시작해 Defense Innovation Unit 계약과 관련 조직을 추적함
클라우드 계약과 사라지는 기술-국방 간극
- Google의 Maven 철수는 방위기술 진영에서 강한 반발을 불렀음
- Peter Thiel은 Google의 태도를 “반역적”이라고 불렀음
- Eric Schmidt는 그 결정에 동의하지 않는다고 함
- Jeff Bezos는 대형 기술 기업들이 Department of Defense에 등을 돌리면 미국이 곤란해질 것이라고 말함
- Amazon은 2013년 CIA로부터 6억 달러, 10년 계약을 따내며 AWS 클라우드를 정보기관 용도로 제공함
- 클라우드 컴퓨팅은 Amazon, Microsoft, Oracle, Google 같은 기업의 새로운 수익 전선이 됨
- Google은 Maven 논란 당시의 도덕적 우려를 뒤로하고, 최대 90억 달러 규모 Joint Warfighting Cloud Capability 계약 지분을 따기 위해 입찰함
- 기업들은 상업 서비스에서 큰 이익을 내면서도 정부를 안정적이고 풍부한 매출원으로 보기 시작했고, 기술 산업과 Pentagon 사이의 간극은 빠르게 사라짐
Anduril, Roadrunner, IVAS
- Ukraine 전쟁에서 드론 영향이 크게 다뤄졌지만, 양측에서 흔하고 효과적인 드론 다수는 Amazon 계정으로 구할 수 있는 부품을 조립해 소형 폭탄이나 포탄을 실은 단순하고 저렴한 장치에 가까움
- Anduril은 2023년 12월 Roadrunner를 공개함
- 소형 제트 추진 드론으로, 드론을 포함한 제트 추진 위협을 자율 탐지·파괴한 뒤 기지로 돌아올 수 있다고 함
- Newsweek에 따르면 가격은 “수십만 달러 초반” 수준임
- 공개 영상은 Roadrunner가 시험을 완벽히 수행하는 장면을 담음
- Pentagon 분석가 Franklin “Chuck” Spinney는 Roadrunner 홍보를 “마케팅 헛소리”라고 평가하며, 사막에 꼬리부터 착륙하는 장면에서 배기구가 먼지 기둥을 거의 만들지 않는 점을 의아해함
- Anduril은 Palmer Luckey가 만든 회사이며, Luckey는 Oculus를 개발해 Facebook에 30억 달러에 매각한 뒤 국방 분야에 집중함
- Anduril은 AI 기반 센서 융합 플랫폼으로 넓은 지역의 완벽한 3D 모델을 만들겠다고 함
- Luckey는 미래 병사가 작전 지역에서 모든 적, 아군, 자산 위치를 아는 “완벽한 전지성”을 갖는 “슈퍼히어로”가 될 것이라고 예측함
- Army는 HoloLens 기반 Integrated Visual Augmentation System(IVAS) 에 2021년 Microsoft와 219억 달러 계약을 맺음
- 2023년 Pentagon 운용시험평가국 보고서는 시험 병사 다수가 방향감각 상실, 어지럼, 눈의 피로, 두통, 멀미, 메스꺼움, 목 부담, 터널 시야 등 신체 손상을 하나 이상 보고했다고 밝힘
- 병사들은 저조도 성능, 표시 품질, 거추장스러움, 낮은 신뢰성, 피아 식별 불가, 사격 어려움, 신체 손상, 제한된 주변시야도 문제로 꼽음
- Congress는 조달 예산 대부분을 보류했지만 Army는 Microsoft에 시스템 수정을 위해 1억 2,500만 달러를 추가 지급했고, 전체 가격표는 230억 달러 바로 아래까지 올라감
- Army는 수정된 시스템에 대한 자체 시험에서 병사 피드백이 긍정적이었다고 주장함
AI 붐, Palantir, 그리고 환각
- ChatGPT 공개 이후 Microsoft는 더 큰 기회를 보게 됐지만, AI 능력에 대한 회의도 함께 존재함
- Meta의 AI 수석 과학자 Yann LeCun은 초지능 기계 위협에 대한 경고가, 고양이 수준의 학습 능력에 견줄 시스템 설계조차 없는 현재로서는 매우 이르다고 봄
- Orso Partners 공동창업자 Nate Koppikar는 2016년 이후 기술 업계 상황을 “헛소리”에 가깝다고 평가함
- 기술 부문은 2021년 말 터진 거품 뒤 돈을 잃고 인력을 줄였음
- 업계 투자자 손실은 약 7.4조 달러로 제시됨
- 그는 AI가 “다음 큰 것”이라는 약속이 갑자기 팔리고 있다고 말함
- AI 로봇 공포는 기술의 위력을 믿게 하는 마케팅 캠페인의 일부라고 봄
- AI에는 만들어내기 성향, 즉 업계에서 “환각”이라 부르는 결함이 있음
- Palantir는 2023년 AI 열풍 속에서 주가가 급등했으며, CEO Alex Karp는 Palantir가 “Israel과 함께한다”고 공개적으로 말함
- Google Bard는 Palantir가 2019년 IDF와 AI 도구 개발 파트너십을 발표했다며 전문적인 보도자료 형태의 답을 내놓았지만, 해당 보도자료는 존재하지 않는 환각이었음