分享

《新加坡人工智能测试框架和工具包》12页2022.5

 星星啊月亮呀 2022-08-03 发布于北京

新加坡推出世界上第一个人工智能测试框架和工具包以提高透明度;邀请公司试点并为国际标准制定做出贡献。

新加坡推出AI Verify——世界上第一个 AI 治理测试框架和工具包,面向希望以客观和可验证的方式展示负责任的 AI 的公司。AI 验证——目前是最小可行产品 ( MVP ),旨在通过结合技术测试和流程检查来提高公司及其利益相关者之间的透明度。

在全球范围内,测试人工智能系统的可信度是一个新兴领域。随着越来越多的公司在其产品和服务中使用人工智能,培养公众对人工智能技术的信任仍然是开启人工智能变革机遇的关键。

新加坡仍处于国际人工智能伦理讨论的前沿

继新加坡于 2020 年在达沃斯推出人工智能模型治理框架(第二版)和 2019 年 11 月的国家人工智能战略之后,人工智能验证的推出。在为行业实施负责任的人工智能提供了实用的详细指导后,人工智能验证是新加坡的下一步帮助公司对其人工智能产品和服务更加透明,与利益相关者建立信任。

AI Verify 由信息通信媒体发展局 (IMDA) 和个人数据保护委员会 (PDPC) 开发。

工业的客观和可验证的测试过程

开发人员和所有者可以通过标准化测试根据一组原则验证其 AI 系统声称的性能。AI Verify将一组开源测试解决方案打包在一起,其中包括一组流程检查到一个工具包中,以便于进行自我评估。该工具包将为开发人员、管理层和业务合作伙伴生成报告,涵盖影响人工智能性能的主要领域。该方法是为了让 AI 模型声称对测试结果所做的事情具有透明度,并涵盖以下领域:

  1. 透明度:

    1. 关于使用人工智能来实现既定的结果

    2. 了解 AI 模型如何做出决策

    3. 人工智能预测的决策是否显示出无意的偏见

  2. 人工智能系统的安全性和弹性。

  3. 人工智能系统的问责制和监督。

试点测试框架和工具包:

  1. 允许 AI 系统开发人员/所有者进行自我测试 - 以维护商业需求,同时为宣布结果提供通用基础。

  2. 没有定义道德标准。它验证了 AI 系统开发人员/所有者关于其 AI 系统的方法、使用和验证性能的声明。

  3. 但是,不保证在此试点框架下测试的任何人工智能系统都不会存在风险或偏见或完全安全。

通讯及资讯部部长表示:“人工智能验证是新加坡人工智能发展的又一进步。在开发世界上第一个以客观和可验证的方式展示负责任的人工智能的产品时,我们旨在帮助企业在人工智能使用方面对其利益相关者更加透明。反过来,这将促进公众对使用人工智能的更大信任。我们邀请来自世界各地的行业合作伙伴加入我们的试点项目,为建立人工智能治理的国际标准做出贡献。”

淡马锡国际副总裁兼新加坡人工智能和数据的道德使用咨询委员会成员也对此次发布发表评论说:“我要祝贺 IMDA 将负责任的人工智能推向了下一个里程碑。这个测试框架和工具包。快速数字化导致数据的激增和算法的改进。随着各行各业的公司不断创新,该工具包将使他们能够将负责任和值得信赖的人工智能概念转化为实际应用,从而使从企业主到最终用户的所有利益相关者受益。”

与合作伙伴和行业建立可信人工智能的互操作性

在人工智能和数据的道德使用咨询委员会的指导下开发,来自不同行业和不同规模的 10 家公司已经测试和/或提供了反馈。这些公司是 AWS、星展银行、谷歌、Meta、微软、新加坡航空公司、NCS(新加坡电信集团的一部分)/陆路交通管理局、渣打银行、UCARE.AI 和 X0PA.AI。

此外,新加坡正在与其他志同道合的国家和合作伙伴合作,以增强人工智能治理框架的互操作性,并制定人工智能国际标准,例如通过新加坡参与人工智能的 ISO/IEC JTC1/SC 42。IMDA 还与美国商务部合作建立可互操作的人工智能治理框架。在 MVP 试点阶段之后,新加坡旨在与全球人工智能系统所有者/开发商合作,整理和建立行业基准。这使新加坡能够继续为制定人工智能治理国际标准做出贡献。

受邀参加试点的机构

随着 AI 治理和测试处于萌芽状态,新加坡欢迎组织参与试点MVP。参与试点的公司将有独特的机会:

  1. 尽早访问 MVP 并使用它对其 AI 系统/模型进行自我测试;

  2. 使用 MVP 生成的报告来展示透明度并与利益相关者建立信任;

  3. 帮助塑造国际适用的 MVP,以反映行业需求并为国际标准制定做出贡献。

    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多