AI换脸怎么识破?田天团队用贝叶斯神经网络让模型学会说“不确定”

资讯 AI 行业观察 全文 1289 字 · 约 4 分钟读完 配图 1 张 分类大模型

田天近照,AI修饰生成素描画 借助AI(人工智能)技术,AI换脸足以以假乱真。如果相关技术被恶意使用,则可能滋生制造虚假信息、诈骗等违法活动。如何识破AI换脸把戏?这是我和团队攻关的方向之一。 精准有效的检测,是实现这一目标的关键。随着AI大模型迅猛发展,伪造技术也持续“进化”。传统检测方法,就像拿着一本固定的“犯罪图

所属频道 模型发布
如何识破AI换脸把戏

田天近照,AI修饰生成素描画AI换脸在人工智能技术加持下,已经到了足以以假乱真的地步。这项技术一旦被恶意使用,虚假信息、诈骗等违法活动就可能随之滋生。怎么识破AI换脸的把戏?这正是我和团队攻关的方向之一。

要做到这一点,精准有效的检测是关键。AI大模型迅猛发展,伪造技术也跟着不断“进化”。传统检测方法好比拿一本固定的“犯罪图谱”去抓犯人——对已知的伪造技术表现尚可,碰上从未见过的新型生成方式,性能就急剧下降。另一边,算力和数据门槛降低,快速批量生成伪造文本、图片甚至视频已经做得到,检测的难度和成本又被推高了一层。

破解难题,还得靠AI。我们想用AI打造“火眼金睛”,去甄别AI换脸等风险,让AI应用更安全更可控。不过技术落地应用并不容易。新型伪造手段层出不穷,有一段时间我们总是跟在后面疲于应对,最初设计的方法准确率也不高。

与其被动“见招拆招”,能不能让AI拥有应对“未知”的能力?求学阶段在贝叶斯深度学习领域的积累,帮我打开了新视角。我想到,检测模型不必对每个样本都给出非黑即白的答案,证据不足时,为什么不能诚实承认“无法确定”?

反复论证、试验之后,我们在检测模型中引入贝叶斯神经网络,模型参数不再被视为一组固定数值,而是用概率分布描述参数可能的取值。经过多次概率采样,模型能综合不同参数假设下的判断结果:预测一致,说明证据充分;预测分歧较大,则意味着样本可能来自未知生成器、经过复杂改写,或本身处于人机混合的模糊边界。面对这类高不确定性样本,我们训练模型不再草率地给出真伪判定,而是教它承认“不确定”;在此基础上再针对此类样本进行优化,提升模型性能,使其在面对新型AI合成方法时,依然能够识别80%以上的合成数据,误判率得到有效控制。

换句话说,那些一眼就能看穿的简单样本,模型不会再耗费大量精力,注意力转而落到“不确定”的数据上。把资源投向真正棘手的地方,模型摸索识别AI内容策略的速度更快、精度更高,面对新出现的AI合成内容时也更从容。技术路线被验证的那一刻,团队成员都很振奋。过去我们只能被动追赶伪造技术,如今手里有了一套主动应对未知风险的办法——“教”AI从更深层面理解规律,识别应用风险、拒绝有害请求。

眼下,团队基于这项技术开发的AIGC(生成式人工智能)内容检测平台等产品,覆盖AI衍生安全风险治理和AI内生安全两类,已在金融、政务、公安、互联网等场景投入使用。安全焦虑让一些企业起初对大模型心存顾虑,不敢放手使用;经过我们的技术安全评测与安全加固,这些顾虑打消了,AI的便利才真正用了起来。

AI在进化,风险同样在变。智能体、具身智能机器人兴起之后,AI从“回答问题”的对话框变成了“执行任务”的行动者,风险也随之从虚拟世界蔓延到物理世界。具身智能机器人的风险来得更直接:它们在物理世界作业,碰上特殊情形一旦应对不了,就可能伤到人。用人类智慧驾驭AI,是智能时代绕不开的课题。我和团队会继续深耕AI安全研究,助力AI健康有序发展。

(作者为新一代人工智能产业技术创新战略联盟专家委员,姜子钰、喻思南采访整理)

田 天

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关 AI 工具

AI 导航
腾讯混元大模型 腾讯混元大模型由腾讯全链路自研,在文本和多模态模型性能方面表现卓越,处于业界领先水平。其混元 API 整合了… 大模型与开发平台 · tencent.com 快手可图大模型Kolors 可图大模型(Kolors)是快手大模型团队自研打造的文生图AI大模型,能够根据用户的文字输入生成风格多样、画… AI 绘画生图 · kuaishou.com 盘古大模型 华为盘古ai大模型官网入口,1100亿密集参数,40TB海量数据精细训练而成 简介 盘古NLP大模型是一项基… 大模型与开发平台 · huaweicloud.com BlueLM蓝心大模型 蓝心大模型官网,vivolm,vivo自研的通用大模型 简介 蓝心大模型(BlueLM ),强大的语言理解能… 聊天对话 · vivo.com 云知声山海大模型 云知声山海大模型是一个多功能、跨领域的智能大模型,它通过集成丰富的知识库和先进的自然语言处理技术,为用户提供… 大模型与开发平台 · unisound.com 子曰” 大模型 子曰是网易有道推出的教育领域垂直大模型,包含基于子曰大模型研发的六大创新应用——“LLM翻译”、“虚拟人口语… 聊天对话 · youdao.com 曹植大模型 曹植大语言模型是国内首个垂直行业专用的自主可控的国产GPT大语言模型,由达观数据研发。这个模型可以准确完成多… 聊天对话 · datagrand.com 西湖大模型 西湖大模型官网,智商情商俱佳的多模态大模型 简介 西湖大模型是西湖心辰开发的多模态大模型,西湖大模型既具备通… 聊天对话 · xinchenai.com

相关推荐 按相关度与热度排序

全部资讯 →
  1. AI生成的文字也将自带“防伪标签”:SpaceXAI宣布 11 月 7 日起为Grok全系列模型添加隐形水印

    随着欧盟《人工智能法案》的正式落地与持续推进,全球各大 AI 厂商正在加速合规调整。日前,SpaceXAI 官方宣布,将于11月7日起正式为旗下 Grok 系列大模型生成的文本内容全面引入隐形水印技术。 在技术实现路径上,该隐形水印并非通过在文本中插入肉眼不可见的隐藏字符或附加元数据来实现,而是直接巧妙地融入了模型在生

    来源 AI 开发者社区
  2. 中国大模型周调用量连续 27 周领跑全球:OpenRouter最新数据显示国产AI生态爆发

    11月2日消息,根据开源大模型聚合平台 OpenRouter 最新发布的数据测算显示,在刚刚过去的一周(10月26日至11月1日),全球 AI 大模型的总调用量达到了194万亿 Token,环比实现了3.19% 的稳步增长。在这场全球AI算力与模型应用的生态角逐中,中国大模型展现出了极为强劲的增长势头。 具体来看,上榜

    来源 AI 开发者社区
  3. 苹果AI国行落地:千问接入,用户为何反应平淡

    等了两年多,国行Apple智能终于叩开了中国的门。10月31日,苹果与阿里双双官宣,Apple Intelligence将于11月4日开放测试,12月随iOS 27.3正式落地,千问成为它在中国大陆的第一个大模型伙伴。相较于“纯血”版本,此次更新能力打了些折扣——首批仅覆盖iPhone,且限于iPhone 15 Pro

    来源 腾讯网
  4. 清华姚期智团队提出代数世界模型,让AI从试错走向数学证明

    清华大学姚期智和袁洋团队发布代数世界模型(AWM),试图解决大模型在复杂推理中的幻觉问题。不同于以往模型仅靠统计规律记录现象,AWM利用范畴论将环境抽象为代数结构,并通过Lean 4进行形式化证明。在ARC-AGI-3基准测试中,该方法不仅实现了99.9%的通关率,还能准确判断任务的可解性,标志着AI推理从直觉猜测向严

    来源 AI 应用前沿
  5. 沃顿教授:转行技工难以抵御 AI 冲击,四类核心能力才是破局关键

    IT之家 11 月 2 日消息,人工智能不会消失。我们该如何与它共存?说得更准确一点:在人工智能时代,我们要靠什么谋生? 常见的答案无非两种:“学会使用人工智能”,或是找一份人工智能无法替代、不会被自动化取代的职业,最好是动手类工作。 据 Business Insider 报道,伊桑 · 莫利克(Ethan Molli

    来源 AI 行业观察
  6. Oracle扩大OCI AI基础设施:引入NVIDIA Vera Rubin、Vera CPU与Google TPU

    【TechWeb】11月2日消息,Oracle在创建OCI十周年之际公布下一阶段基础设施计划,并分别宣布与NVIDIA、Google深化合作。OCI已涵盖200多项云服务;2027财年第一季度云基础设施收入74亿美元,同比增长121%,该季度新增850兆瓦数据中心容量。新计划重点是在单一云平台提供更多AI计算架构,扩展

    来源 AI 行业观察
  7. 多彩新媒IPTV实践:国产算力跑通AI,安全管控覆盖语义层

    当AI开始介入IPTV的生产和播控,怎么保证不出乱子?多彩新媒没搞花架子,而是先筑牢纵深防御的安全底座,再用国产算力解决片头片尾自动打点的实际痛点,最后给大模型加上“防御-监测-溯源”的安全锁。这套组合拳不仅让技术能手竞赛拿了奖,更证明了在广电行业,AI落地不能只拼模型参数,还得拼系统化的工程能力和安全兜底。

    来源 AI 应用前沿
  8. 中国AI首次参与攻克世界级数学难题 对话作者张洁松

    近日,困扰数学界长达31年之久的三维Ghys猜想终得攻克,国产科学大模型书生S2在其中发挥了重要作用。这是中国本土研发的AI大模型第一次参与攻克世界级数学难题并取得实质性突破。三维Ghys猜想涉及混沌系统与空间几何之间的关系。简单来说,混沌系统的运动规律往往十分复杂,例如蝴蝶效应,而数学家试图证明这样一件事:如果...

    来源 腾讯网
  9. 思科用AI重构98%遗留代码:27岁工程师获无限Token

    一位 27 岁的年轻工程师,被思科总裁兼首席产品官吉图·帕特尔(Jeetu Patel)赋予了近乎“无限”的权限——无上限的 Token 预算,以及一个雄心勃勃的目标:在 24 个月内,利用 AI 重构公司 98% 的遗留代码。

    来源 TechWeb
  10. ChatGPT规划徒步路线,可能把人带进险境

    把路线规划交给AI,听起来省事,却可能让人放弃独立思考。聊天机器人会编出并不存在的步道,也会低估山里的风险。当这样的错误发生在远离公路的荒野时,后果可能致命。本文梳理WIRED的报道,探讨大模型为何读不懂真实的山野,以及徒步者该如何与AI协作,而不被它误导。

    来源 AI 行业观察
  11. 9款大模型自主突破Circle钱包限额 仅Claude Opus 5.5守约未动

    Cornell Tech与Yale大学11月1日发布论文显示,10款主流大模型中9款通过读取邮件验证码自主提升Circle代理钱包每日消费限额,5款还在模拟攻击下转出资金,仅Claude Opus 5.5触及限额即停止并上报。该测试使用Base网络10 USDC钱包、0.01 USDC限额,暴露AI代理财务控制的访问冲

    来源 AI 行业观察
  12. 贾德伯格:未来所有药物皆由AI设计,分歧仅在时间

    贾德伯格相信,未来所有药物都将由 AI 设计,区别只在于这一目标需要多久才能实现。“这一天肯定会到来。我毫不怀疑,未来所有药物都会由 AI 设计。我只是不希望大家被动等待,结果要过 20 年甚至 50 年才能实现。”

    来源 IT之家
  13. RZR加码中国市场:北京办公室启用,AI模型Argus已上线

    RZR首席执行官Aman Sareen在启用仪式后表示,中国是RZR最重要的市场,北京不是销售办事处,而是公司构建未来的核心枢纽之一。RZR CEO Aman Sareen北京办公室的定位是这一战略的集中体现。在产品层面,Aman反复强调“一套AI系统覆盖全增长渠道”。据介绍,RZR是整合DSP,在iOS、Androi

    来源 TechWeb
  14. 美团LongCat-2.5发布:1.6万亿参数多模态模型登顶智能体基准

    11月3日消息,美团官方正式推出全新一代面向长程智能体任务的原生多模态大模型 —— LongCat-2.5。作为在 LongCat-2.0基础上的重大迭代,该模型在原生视觉理解与智能体编程能力上迎来了全面升级,并在多项权威测试中与海外顶尖大模型同台竞技并实现多项指标登顶。 核心架构与参数规模:1.6万亿总参数赋能端到端

    来源 AI 开发者社区
  15. 马斯克限制Grok Bot使用额度:增长太快,成本扛不住

    马斯克近日因“不可持续的高成本”对Grok Bot实施使用限制,而就在不久前,他还称这款产品拥有“我一生中见过的最快增长速度”。增长神话与算力账单正面相撞,暴露出AI聊天机器人免费或低门槛模式背后的经济难题。本文梳理事件始末,并分析大模型限流潮背后的行业逻辑。

    来源 AI 科技快讯
  16. Omen AI收购Aquatic Labs:1600万美元加码液冷

    Omen AI宣布以1600万美元收购Aquatic Labs,两家专注于解决数据中心水资源问题的初创公司正式合并。此次交易将Omen AI的AI优化能力与Aquatic Labs的液体冷却技术相结合,旨在为高功耗AI数据中心提供更高效的散热与节水方案,应对日益严峻的算力能耗挑战。

    来源 AI 行业观察
向下滚动自动加载更多