[5편] 민간 시장으로의 영토 확장 – 메트로폴리스의 실패와 파운드리(Foundry)의 반격

 지난 4편에서는 팔란티어가 실리콘밸리 주류 테크 기업들과 결별하면서까지 고수했던 철저한 비밀주의와, 그 안에서 다져진 독보적인 정부 조달 시장에서의 위치를 살펴보았습니다.

미국 국방부와 CIA의 두터운 신뢰를 받으며 승승장구하던 팔란티어는 2010년대에 접어들며 새로운 도전에 직면하게 됩니다. 바로 '정부용 소프트웨어'라는 꼬리표를 떼고, 거대한 민간 상업 시장(Enterprise Market)으로 진입하는 것이었습니다. 하지만 시장의 생리는 완전히 달랐습니다. 국가 안보라는 명분이 통하지 않는 냉혹한 자본의 세계에서 팔란티어는 창사 이래 가장 뼈아픈 실패를 맛보게 됩니다. 오늘 5편에서는 금융권을 겨냥했던 초기 상업용 플랫폼 '메트로폴리스(Metropolis)'의 몰락과, 그 실패의 폐허 위에서 어떻게 오늘날의 효자 플랫폼 '파운드리(Foundry)'를 탄생시켰는지 그 반전의 스토리를 담아보았습니다.

1. 메트로폴리스의 오만, 금융 월가에서 마주한 처참한 실패

정부 시장을 장악한 팔란티어가 민간 기업 시장을 바라보았을 때, 가장 먼저 눈에 들어온 곳은 방대한 데이터가 실시간으로 소용돌이치는 금융의 중심지, 뉴욕 월가(Wall Street)였습니다. 팔란티어는 고담 플랫폼의 엔진을 기반으로 금융 데이터 분석에 특화된 신제품 '메트로폴리스'를 출시했습니다. 헤지펀드, 대형 은행들이 가진 복잡한 거래 데이터와 시장 트렌드를 분석해 유망한 투자 기회를 찾거나 리스크를 관리해 주겠다는 야심 찬 계획이었습니다.

결과는 처참한 실패였습니다. 팔란티어의 엔지니어들은 대단한 착각을 하고 있었습니다. "국가 안보와 테러리스트도 잡는 우리 소프트웨어인데, 고작 기업 데이터 분석쯤이야 누워 떡 먹기지"라는 오만함이 문제였습니다.

정보기관 요원들은 시스템이 다소 무겁고 사용법이 복잡하더라도 데이터만 확실하게 연결해 준다면 밤을 새워가며 사용했습니다. 목숨이 걸린 안보 현장이었으니까요. 하지만 일반 기업의 직원들은 달랐습니다. 메트로폴리스는 일반 사원들이 쓰기에 지나치게 난해했고, 기존에 기업들이 사용하던 엑셀이나 오라클 같은 범용 데이터베이스 시스템과의 호환성도 엉망이었습니다. 게다가 금융권 고객들이 원하는 세부적인 금융 공학적 요구사항을 제대로 반영하지 못했습니다. "비싸기만 하고 다루기 힘든 예쁜 쓰레기"라는 혹평이 쏟아졌고, 수백만 달러짜리 계약들이 연이어 파기되었습니다. 팔란티어가 민간 시장의 현실을 뼈저리게 깨달은 순간이었습니다.

2. 실패를 해체하다, 기업의 진짜 고민은 따로 있었다

메트로폴리스의 실패 이후 알렉스 카프 CEO와 개발진은 프로젝트를 전면 중단하고, 실패 원인을 밑바닥부터 파헤쳤습니다. 엔지니어들이 기업 고객들의 업무 현장에 다시 상주하며 관찰한 결과, 놀라운 사실을 발견했습니다. 기업들이 데이터 분석을 못 하는 이유는 뛰어난 AI 알고리즘이 없어서가 아니었습니다. 진짜 원인은 분석을 시작하기도 전에 데이터가 기업 내 여러 부서(영업, 제조, 물류, 인사 등)에 제각각 다른 포맷으로 파편화되어 쌓여있다는 점이었습니다. 이른바 '데이터 사일로(Data Silo)' 현상이었습니다.

대기업의 데이터 분석가들은 전체 업무 시간의 80% 이상을 서로 다른 부서의 데이터를 긁어모으고, 포맷을 맞추고, 깨진 오류를 수정하는 '데이터 정제 작업(Data Wrangling)'에 허비하고 있었습니다 정작 중요한 분석과 의사결정은 시작도 하기 전에 진이 빠져버리는 구조였죠.

팔란티어는 방향을 완전히 틀었습니다. 화려한 결과물만 보여주는 분석 툴이 아니라, 기업 내부에 퍼져있는 지저분한 원천 데이터(Raw Data)를 실시간으로 자동 통합하고 정제해 주는 '거대한 데이터 파이프라인 정비소'를 만들기로 결심합니다. 이것이 바로 상업용 통합 플랫폼 '파운드리(Foundry)'의 시작이었습니다.

3. 파운드리의 반격, 제조 공장에서 항공기 날개까지 연결하다

2016년 세상에 나온 파운드리 플랫폼은 메트로폴리스의 실패를 완벽하게 보완한 마스터피스였습니다. 파운드리의 핵심 경쟁력은 '엔터프라이즈 데이터 맵(Enterprise Data Map)' 기술이었습니다. 기업의 모든 데이터를 한곳에 모은 뒤, 이를 실제 비즈니스 환경과 똑같은 형태의 디지털 가상 세계(Digital Twin)로 시각화해 주는 기능입니다.

파운드리가 민간 시장에서 기술력을 증명한 대표적인 사례가 글로벌 항공기 제조사 '에어버스(Airbus)'와의 협업이었습니다. 당시 에어버스는 신형 여객기인 A350의 생산 속도를 높여야 하는 압박을 받고 있었습니다. 하지만 전 세계 수백 개의 협력업체에서 들어오는 부품 공급망 데이터와 공장 라인의 제조 데이터가 따로 놀아 병목 현상이 심각했습니다.

에어버스가 파운드리를 도입하자 마법 같은 일이 벌어졌습니다. 파운드리는 항공기 설계도면부터 부품 배송 상태, 공장 로봇의 작업 속도, 결함 발생 이력까지 수천 개의 데이터 원천을 단 몇 주 만에 하나의 플랫폼으로 통합했습니다. 공장 관리자는 파운드리 화면을 보며 "A 부품의 배송이 이틀 늦어지니, 조립 라인 순서를 이렇게 바꾸면 생산 차질을 막을 수 있겠구나"라는 판단을 실시간으로 내릴 수 있게 되었습니다. 결과적으로 에어버스는 A350 생산 속도를 획기적으로 끌어올렸고, 이 성공을 바탕으로 전 세계 항공사들과 데이터를 공유하는 글로벌 항공 플랫폼 '스카이와이즈(Skywise)'를 팔란티어와 함께 구축하게 됩니다.

💡 핵심 요약

• 메트로폴리스의 실패: 정부 시장에서의 성공에 취해 기업 환경과 사용자 편의성을 고려하지 않은 채 공급자 중심의 무거운 시스템을 고집하다 월가 금융 시장에서 처참한 실패를 겪었습니다.

• 비즈니스 본질의 재발견: 실패를 분석하는 과정에서 기업들의 진짜 고충이 'AI 알고리즘의 부재'가 아니라 부서 간 '데이터 파편화(사일로 현상)'에 있음을 파악하고 개발 방향을 대전환했습니다.

• 파운드리의 반격과 성과: 데이터 통합 및 정제에 초점을 맞춘 파운드리 플랫폼을 통해 에어버스 등 글로벌 제조 기업의 공급망을 혁신하고 생산성을 극대화하며 민간 시장 안착에 성공했습니다.

📢 다음 편 예고

다음 6편에서는 파운드리 플랫폼의 기술적 메커니즘을 더 깊이 파고듭니다. 에어버스의 '스카이와이즈(Skywise)' 프로젝트 사례를 통해 코딩을 모르는 일반 직원들도 어떻게 빅데이터를 만지고 의사결정을 내릴 수 있는지, 그 구체적인 데이터 통합 과정을 가이드 형식으로 풀어드립니다.