分享

Palantir Technologies公司发展历史沿革及其AIP成型的必然之路

 铁马冰河雄关 2023-07-02 发布于北京

01

 Palantir Technologies公司的基本情况

Palantir Technologies, Inc.是在2003年(5月)由Peter Thiel(彼得·蒂尔,PayPal创始人,Facebook早期投资者,特朗普总统2016年竞选活动的坚定支持者)与Alexander Karp、Joe Lonsdale、Nathan Gettings、Stephen Cohen联合创建(官网显示创建时间为2004年)。Palantir Technologies是一家软件和服务公司,总部位于丹佛(2020年总部从加利福尼亚州的帕洛阿尔托转移到科罗拉多州丹佛)。2012年,公司成立了Palantir隐私和公民自由顾问委员会。2020年公司发布公开招股书,准备上市,2020年9月30日,以7.25美元开盘进行首次公开募股。Palantir Technologies已经收购了6个组织,包括Silk这家2010年成立的主营业务是在云中做数据可视化的公司。Palantir Technologies经历了27轮融资,总共筹集了30亿美元,最新一笔融资是在2021年8月13日从IPO后的一轮股权融资中筹集的。
Palantir Technologies现有55名员工,以大数据分析出名,主要客户为政府部门和金融机构,有两个软件平台,一个供政府机构,一个供企业客户,公司软件使用于36种产业及150余国家,包括中国。公司的主要产品是面向于对真实世界数据进行人为分析,专注于为数据处理创造世界上最好的用户体验,使人们能够提出和回答复杂的问题,而不需要掌握查询语言、统计建模或命令行。公司构建了用于集成、管理和保护数据的平台,在此基础上,对应用程序进行分层,以进行完全交互式的人工驱动、机器辅助分析。

02

Palantir Technologies公司的技术积累

公司创立伊始,是Peter Thiel打算利用PayPal辨别欺诈软件,来阻止恐怖攻击,于是他组织史丹佛电脑科学毕业生朗斯戴(Joe Lonsdale)和柯恩(Stephen Cohen),以及PayPal工程师盖汀斯(Nathan Gettings)来编写软件。同时招揽史丹佛法学院的老同学卡普(Alex Karp)来作为执行长。柯恩在八周内创造了Palantir的最初原型。在加入Palantir之前,柯恩曾在Clarium Capital(是一家奉行全球宏观战略的美国投资管理和对冲基金公司)与Peter Thiel共事。在Backtype于2011年被推特收购之前,他还担任过该公司的顾问。
目前,Palantir Technologies公司官网,展示了其主推的四大产品分支模块,分别为AIP、Foundry、Gotham和Apollo。通过开源信息查找,在2020年时,有资料显示当时Palantir Technologies公司旗下的产品还主要是Gotham、Foundry和Apollo这三款。Gotham和Foundry为两个大数据分析平台,均是垂直集成的软件解决方案,其中Gotham主要用于情报、执法和国防安全领域,长期为政府提供各类大数据分析挖掘服务,具有在海量信息中发现线索的“嗅觉”能力,而Foundry则是针对企业业务。Apollo则作为底层技术平台,满足大数据平台敏捷交付的需求。Palantir Technologies的产品具备强大的灵活性和兼容性,和单一的数据解决方案有所不同,其拥有多个功能模块的支撑,足以适应任何组织机构对海量数据的处理需求。平台所提供的组件涵盖了前端数据采集分析、自动数据处理、可视化展示、离线数据同步、视频分析、输出分析决策等数据处理的全周期。在这一基础上,公司平台亦可根据客户需求客制化形成针对行业和部门的程序应用。

图片

 图1 Palantir Technologies公司的Gotham、Foundry和Apollo的关系

Gotham产品,其前端是一套集成了很多组件的应用程序,适用范围广,包括语义、时间、地理空间和全文分析,结合后端勾连的海量数据库使用户能够识别隐藏在数据集深处的模式。Gotham通过对结构化数据(如电子数据)和非结构化数据(如图像数据)的高度集中化分析,得到可视化的关联线索信息,具有在海量信息中发现线索的“嗅觉”。Gotham包含了Graph、Gaia、Dossier、Ava、Video、Stencil、Table、Mobile、Forward这9款主要应用软件。Gotham已在国防、国土安全、卫生部门、农业部门、证监会等多个美国政府部门得到应用,政府端也是公司的核心优势市场。

图片

Foundry(铸造厂or代工厂)产品,主旨在建造一个汇集数据、分析和运营团队的通用运营平台,专为技术和非技术用户设计,使不同的团队能够共同解决组织中最棘手的问题。Foundry由数百个不同的服务组成,涵盖了广泛的功能,这些服务结合在一起,形成了一个模块化的端到端操作平台,配置最少,Foundry的服务分为数据集成、模型集成、本体论、应用程序框架、分析和安全这六大类。Foundry的构建及现有资源集成则更聚焦于体系结构、互操作性和开发生命周期。一是针对体系结构Foundry旨在在所有类型的最终用户、世界上要求最高的数据驱动工作负载和无数基础设施基底上进行扩展。为了实现这一点,底层服务网格在一套软件定义原则上运行,这些原则由Apollo强制执行(Apollo是Palantir Technologies公司又一款产品分支,是基于软件部署的任务控制)。
Foundry的服务网格由Rubix(Rubix是Palantir Technologies于2017年1月启动的项目,是公司围绕Kubernetes重建云架构进行的努力,核心目标之一是为Spark和其他分布式计算框架创建一个安全、可扩展和智能的调度和执行引擎。Kubernetes简称K8s,是用于自动部署、扩充和管理“容器化应用程序”的开源系统,由google设计,在2015年释放出1.0版本,当前K8s在很多其他公司的产品中被使用)和Apollo联合提供支持,包含集成到现有企业架构中的模块化功能。此外,Foundry旨在最大限度地提高未来的灵活性,以确保客户持续受益于Palantir或开源社区开发的最新技术。Foundry包含Monocle、Contour、Object Explorer、Fusion、Workshop、Vertex、Code Authoring、Quiver、AI/ML、Code Workbooks、Reports这11款应用软件,支持代码编辑、无代码编程、报告生成、时间序列数据分析等功能。

图片

03

Palantir Technologies公司在美国情报界的地位分析

Palantir Technologies由美国中央情报局(Central Intelligence Agency,CIA)旗下创投机构In-Q-Tel(详见附录1 In-Q-Tel的发展历程)扶植,于2003年成立,因为取得政府合约而出名。在2005到2008年期间,中情局是Palantir Technologies的唯一客户由于中情局赞不绝口,名声逐渐传开,国家安全局、联邦调查局、国防部、国土安全部、国税局、以及其他用“字母汤”隐喻的反恐和军事机构几乎都是Palantir Technologies的客户。2010年,纽约警政署把Palantir Technologies介绍给摩根大通银行,后来其成为Palantir Technologies的第一家商业客户。
Palantir Technologies是情报和执法应用程序挖掘大量数据集的首选公司,拥有流畅的软件界面和空降客户总部定制程序的程序员,可以将混乱的信息沼泽变成直观的地图、直方图和链接图。其“前沿部署工程师”用几天时间来抓取、标记和整合客户数据的每一块碎片,就可以阐明恐怖主义、灾难应对和人口贩运等截然不同的问题。
据摩根大通银行的内部人士透露,Palantir Technologies的软件数秒便可找出一个奈及利亚网址与美国境内伺服器的关联,帮助银行客户破解网络欺诈。Palantir Technologies业务已经覆盖政府、金融、健康在内的36个行业,产品深受情报机构分析喜欢,其发展历程中最出名的两个实践案例一个以大数据技术,通过分析海量数据和情报,协助美军方成功定位了东躲西藏十几年的盖达组织首脑本·拉登,另一个是帮助大型银行追回前主席麦道夫藏起来的数十亿美元巨款。
2021年,Palantir Technologies和雷神公司获得了价值850万美元的初始合同,用于战术情报目标接入节点TITAN(Tactical Intelligence Targeting Access Node,TITAN)项目的第一年阶段(详见附录2 TITAN的基本情况),包括系统设计和软件开发。2022年6月,美陆军宣布授予Palantir Technologies和雷神情报与太空公司两家一份3600万美金的主要合同,进行为期14个月的竞争性原型设计,Palantir的模块化开放系统架构(Modular Open System Architecture,MOSA)将是关键的骨干,它提供传感器数据的相关性、融合和集成,以及覆盖在战术边缘的人工智能/机器学习见解。2023财年第四季度,美陆军计划在考虑了在佐治亚州萨凡纳的亨特陆军机场测试原型的士兵的反馈后,只选择一个进行测试。
2022年,Palantir Technologies与美陆军装备司令部(Army Materiel Command,AMC)合作,提供安全、预测性的后勤和资产优化,从而在美陆军的全球装备和作战供应链中实现数据驱动的决策。使用模块化开放系统架构(MOSA),AMC能够利用其广泛的装备数据创建模型,更好地预测性能、了解供应需求和预测维护程序,从而提高整个部队的装备可用性和舰队准备情况。

04

Palantir Technologies的AIP成型的必然之路

Palantir Technologies官网已对AIP进行了展示,并作为其四大产品分支之一进行在线推广,其展示的功能用途与公司原有的客户群体不谋而合,也是区分为政府和商业两个口径,分别进行了视频演示。AIP有分类网络、战术边缘设备和实时表示这三大核心支柱。
AIP的生成在Palantir Technologies公司其实并不是技术的阶跃和创新理念的变化,其本质上行还是沿用了公司已经成熟的集成平台思路,将现有的情报系统平台与2023年强势出圈的大语言模型(从公司官网展示的AIP视频来看,判断采用的是ChatGPT模型)进行技术融合,呈现出在线的人机融合情报与决策辅助支持系统,做到了基于专业情报库的一问一答递进交互模式。AIP的全称是Artificial Intelligence Platform,其主旨是使客户能够利用现有的机器学习技术的力量,因此其将大语言模型直接集成在现有平台中,值得注意的是,根据公司目前释放的信息和公司的传统运营模式,目前公司还不会致力于大语言模型的开发工作,而是直接选择商业大语言模型或者开源大语言模型,将其进行平台整合集成。
2023年以ChatGPT的强势来袭,让大语言模型火速出圈,但还是要有冷静的思考,不能将大语言模型进行“魔化”或者“泛化”,至少从Palantir Technologies公司的AIP产品上看,大语言模型的出现对Palantir Technologies而言就是丰富了其开源软件库,刺激了其利用大语言模型,将其与现有平台集成的灵感,从而扩充了现有平台的辅助能力和展现形式,毕竟大语言模型呈现出的是有问有答的递进式人机交互形式,从功能实现的角度上看,可以实现针对性的智能辅助。大语言模型作为工具类开源软件,2023年的广泛试用使全球看到了技术的可行性,但是其专业性道路发展,还需要很长的时间来摸索,AIP展现的就是将大语言模型这一技术“底座”与Palantir Technologies公司已有的产品路线进行结合的融合型定向开发,将大语言模型与公司的优势产品海量数据后台进行融合,从而生成了交互式系统,作为战场辅助决策工具。

附录1:In-Q-Tel的发展历程

1998年,世界处于一场技术革命之中,互联网广泛可及,移动技术开始萌芽,变化步伐正在加快,私营部门开始取代政府部门成为创新的驱动者。在此背景下,中情局意识到需要一个通道,来联结来自各方面最尖端的技术。

1999年,中情局组建“In-Q-It”,以确保该机构在尖端信息技术领域的领先实力。很快,这家非盈利的战略性投资公司改名为In-Q-Tel(简称IQT),并在华盛顿设立办公室。

2000年,IQT投资了安全技术公司SafeWeb,利用PrivacyMatrix技术来打造安全的通讯工具。同年,IQT在硅谷开设了办公室。

2001年,IQT与美国国家影像与制图局(美国国家地理空间情报局的前身,负责收集和分析地理空间情报)建立合作关系。

2002年,IQT投资了Attensity Corporation,是一家早期文本分析领域的前沿公司,开发了创造性的文本挖掘方法,利用语言处理技术从自然语言来源中挖掘有价值的信息,2016年,公司被inContact收购。

2003年,IQT投资了交互式3D地图开发商Keyhole,其在2004年被谷歌收购,并成为后来的Google Earth。在该技术被收购后的两周内,美国国家地理空间情报局和五角大楼开始进行使用。

2004年,IQT投资了虚拟现实工具开发商iMove,该公司技术可无缝拼接多个视频流,为IQT的合作伙伴提高决策水平提供了助力,同时该公司也帮助他们培训了相关人才。同年,IQT与联邦调查局成为合作伙伴。

2005年,IQT与美国国防情报署成为合作伙伴。

2006年,IQT转向战略架构和工程方法,实现进一步升级。

2007年,IQT投资了Polychromix,一家原材料分析与化学传感技术开发机构,其开发的手持式设备使实地(而不是在实验室)的材料分析成为可能,这项技术也应用在了战场。同年,IQT在麻省Waltham开设了办公室。

2008年,IQT投资了T2 Biosystems公司,通过将纳米技术和小型化磁共振技术相结合,开发下一代医疗诊断产品,可以提供快速、精确和手持式的诊断。公司于2014年7月在纳斯达克上市。

2009年,IQT投资了FireEye,以加强美国情报部门的网络安全。FireEye使用创新技术侦测网络攻击,包括恶意软件以及未知的漏洞。公司于2013年在纳斯达克上市。同年,IQT与美国国家侦察局和美国国家安全局成为合作伙伴。

2010年,IQT投资了数据存储解决方案提供商Cloudera,公司帮助政府部门收集和分析海量的复杂数据。在IQT投资后,Cloudera陆续获得了其他顶级机构的投资,并于2017年上市,募集资金2.25亿美元。同年,IQT与美国国土安全部成为合作伙伴。

2011年,IQT投资了网络安全平台RedSeal,该公司可以监控网络异常和管理恶意攻击风险。

2012年,IQT推出了创新实验室Lab41,目的是帮助政府部门在相关领域对新兴的机器学习技术的应用,例如自然语言处理、车辆识别、虚拟数据解读、笔迹身份确定,以及情绪分析等。

2013年,IQT投资了Pure Storage,一家企业数据存储公司,可为用户提供更好性能、更低成本,更高效率,且不需要额外安全防御部署的数据存储解决方案。

2014年,IQT投资了MongoDB,一家数据库管理系统领域的领先公司,可帮助用户更高效地部署高性能应用。MongoDB也是IQT投资的公司中,技术方案被IQT的政府合作伙伴所采用的第175家公司。

2015年,IQT建立了IQT Labs,其中除了被合并进来的Lab41,增设了三个新部门,探索前沿技术的B.Next、聚焦商业航天的CosmiQ Works,以及主要关注网络安全的Cyber Reboot。

2016年,IQT推出了SpaceNet,这是一个开放创新项目,将精确标记的高分辨率卫星图像免费用于计算机视觉研究。

2017年,IQT投资了开源代码托管平台GitLab,该公司目前已累计融资4.36亿美元。

2018年,IQT开始走向国际,在伦敦设立了办公室。同年,完成了第400笔投资。

2019年,IQT在悉尼开设第二个国际办公室。

附录2:TITAN的基本情况

“战术情报目标接入节点”/“泰坦”(TITAN)是处理太空、空中和陆基传感器数据的战术地面站,其通过融合人工智能和机器学习快速评估威胁,并向任务指挥应用和武器系统实时传递信号情报、图像情报等目标数据。有了TITAN,陆军将能够合并来自一系列快速扩散的传感器的各种数据,使前线部队能够获得态势感知,并以变革的速度做出实时决策。TITAN包括基础版和高阶版本,基础版“泰坦”将安装在美国陆军的联合轻型战术车上,没有空间下行链路包。高阶版“泰坦”将与战术卡车集成,如中型战术车家族的M1083,能够从太空系统摄取传感器数据。其建设历程如下:
2020年9月,诺斯罗普·格鲁曼公司赢得其他交易授权合同,为美陆军国家能力战术开发(TENCAP)办公室和国防创新部门(DIU)建造两个以太空能力为重点的TITAN空间预原型地面站。该项目的目标是为陆军的TITAN记录项目提供信息,并且该项目还包括交付空间地面组件套件,以便与记录项目开发的地面站整合。该项目与记录项目的整合时间计划发生在记录项目第二阶段结束时。
2021年1月,美陆军情报,电子战和传感器计划执行办公室(PEO IEW&S)向帕兰提尔(Palantir)和雷神(Raytheon)授予陆军TITAN项目第一阶段(12个月)价值850万美元的初始合同,该阶段专注于早期设计工作,包括系统设计和软件开发。
2022年6月下旬,Palantir和Raytheon分别获得了3600万美元的第二阶段合同来进行为期14个月的原型构建。Palantir和Raytheon将各自交付一个TITAN高阶版原型。
2022年11月,诺斯罗普·格鲁曼公司交付了第一个预原型,并在2022年“会聚工程”中进行了演示,演示过程中获得的经验教训将传递给记录计划。该预原型是一种天基能力,利用可用的军事和商业卫星,并向各种任务指挥应用/武器系统传递目标信息,利用的商业卫星包括Maxar Technologies的World View 1和2电光遥感鸟,以及BlackSky的14颗卫星星座。目前该预原型已被部署到陆军第一多域特遣部队,第二个预原型计划于2023财年第二季度交付到陆军。
2023年夏,美陆军计划着手开始对TITAN原型进行测试。第四季度,美陆军计划选择其中一个供应商作为TITAN的主要承包商。其接下来的主要开发工作将侧重于完善系统,并为系统集成传感器和未来的技术改进做准备。该承包商将为美国陆军生产六个高阶系统和五个基础系统,目前计划在2026财年投入生产。
附录3:由AIP引发的情报网络示意图

图片

一 END 一

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多