OpenAI 推出新工具来检测 AI 生成的图像

OpenAI 推出了两项主要举措来识别人工智能生成的内容:采用 C2PA 标准并将 Google 的 SynthID 技术集成到其平台中。
OpenAI 通过宣布实施两种互补的检测技术,在应对识别人工生成图像这一日益严峻的挑战方面取得了重大进展。这些举措代表了对快速扩展的生成人工智能领域的透明度和问责制的有意义的承诺。该公司的双重方法将行业标准与尖端技术解决方案相结合,使 OpenAI 成为负责任的人工智能开发和部署的领导者。
第一个重大公告涉及 OpenAI 正式采用内容来源和真实性联盟(通常称为 C2PA),这是一项开源标准,旨在解决数字媒体的真实性和来源问题。这一决定表明 OpenAI 致力于在既定的行业框架内工作,而不是孤立地开发专有解决方案。通过采用 C2PA,OpenAI 加入了由技术公司、媒体组织和标准机构组成的不断发展的生态系统,致力于为数字内容创建可验证的监管链。
C2PA 标准使内容创建者和平台能够将加密凭证直接嵌入到数字文件中,从而创建内容来源、修改方式以及修改者的防篡改记录。这种元数据驱动的方法提供了一个基础的透明度层,可以帮助技术系统和人工审阅者确定内容是否是人为生成或操纵的。通过在其产品中实施这一标准,OpenAI 确保通过其 DALL-E 系统和其他生成模型创建的图像带有可验证的人工来源标记。
OpenAI 采用 SynthID 来补充 C2PA 集成,这是一种由 Google DeepMind 开发的复杂水印技术。与可以轻松删除或遮盖的传统可见水印不同,SynthID 的工作方式是巧妙地改变生成图像的数字特征,人类观察者无法察觉,但可以通过专门分析检测到。这种隐形水印方法提供了强大的二级检测机制,即使元数据已被剥离或修改,也可以识别人工智能生成的内容。
SynthID 水印的集成解决了内容身份验证中的一个关键差距:许多用户在跨社交媒体平台和消息应用程序共享或重新共享图像时有意或无意地删除了元数据。通过将出处信息直接嵌入到图像本身的视觉特征中,SynthID 创建了一种即使在常见文件转换和共享场景中也能持续存在的检测方法。这种分层方法将显式元数据标准与隐形水印相结合,为识别生成的内容提供了多种验证途径。
OpenAI 的宣布正值人工智能治理领域的一个特别关键时刻。随着生成式人工智能模型变得越来越复杂和易于使用,政府、媒体和公众话语中对合成媒体、深度造假和错误信息的担忧急剧升级。可靠地识别人工智能生成的内容的能力已成为维持数字信息生态系统信任的重要基础设施。通过主动实施检测技术,OpenAI 致力于领先于潜在的监管要求,同时展示对强大生成技术的负责任的企业管理。
这些实现的实际影响远远超出了 OpenAI 的直接操作范围。一旦集成到使用 OpenAI 模型的平台中,这些检测功能将可供数百万用户、内容审核者和记者使用,试图验证他们在网上遇到的图像的真实性。新闻机构可以使用这些工具来验证读者提交的内容,事实核查人员可以更有效地识别被操纵的图像,社交媒体平台可以更好地管理通过合成媒体传播的错误信息。
C2PA 标准本身代表了微软、Adobe、英特尔和 BBC 等主要技术公司以及众多小型组织和民间社会团体多年的协作努力。通过加入这个联盟,OpenAI 加强了该标准在整个行业的采用,并增加了可验证内容来源成为数字媒体生态系统中的常态而不是例外的可能性。这种标准化工作特别重要,因为它可以防止不同人工智能公司实施不兼容的专有解决方案时出现的碎片化情况。
但是,OpenAI 的举措也凸显了合成媒体检测领域持续存在的挑战。虽然水印和元数据嵌入提供了强大的工具来检测已知人工智能系统创建的内容,但它们无法针对竞争模型或泄露模型权重的未经许可的实现生成的图像提供保护。故意去除水印或元数据的不良行为者可能会降低这些工具的有效性,从而在检测和规避技术之间造成持续的军备竞赛。此外,随着人工智能模型的不断改进,生成图像的视觉质量接近真实感,使得在没有技术帮助的情况下进行人体检测变得越来越困难。
该公告还提出了有关更广泛的人工智能图像生成生态系统的重要问题。 OpenAI 仅控制着生成图像模型市场的一部分,其竞争对手包括 Stability AI、Midjourney 和众多开源项目。为了使检测标准发挥最大效力,整个行业必须广泛采用。 OpenAI 对 C2PA 等开放标准的接受鼓励了这种更广泛的采用,但自愿参与可能不足以全面应对这一挑战。
展望未来,随着人工智能检测成为数字基础设施日益重要的组成部分,这些技术的实施可能会显着发展。欧盟、美国和其他司法管辖区的监管机构正在积极制定有关合成媒体披露和内容认证的政策。 OpenAI 的主动措施使公司在新兴监管框架中处于有利地位,同时提供其他公司和平台可以构建或集成到自己系统中的技术解决方案。
C2PA 采用与 SynthID 集成的结合代表了一种深思熟虑的多层方法,可应对当代人工智能部署中最紧迫的挑战之一。通过在实施尖端检测技术的同时采用既定标准,OpenAI 表明,负责任的人工智能开发需要对透明度、验证和问责机制进行持续投资。随着人工智能越来越多地融入创意、信息和通信系统,这些对检测和身份验证基础设施的投资对于维护公众信任和在全社会实现有益的人工智能应用至关重要。
来源: TechCrunch


