每个人都能拥有有检测AI造假的“照妖镜”了!
清华系独角兽初创公司,发布了面向个人的产品级检测工具,可以让AI伪造的图像、音频和视频现出原形。
而且无需上传素材,在网页和视频会议中就能主动探测内容和人脸真伪,并实时给出提示。
该工具由清华大学朱军教授与学生田天博士等一同创立的瑞莱智慧(RealAI)打造,名字叫做“尊嘟假嘟”,英文名RealBelieve。
随着视频生成模型质量的不断提高,辨别AI造假也越来越困难,为此,团队基于深度学习技术,构建了一整套多模态、多角度的AIGC检测技术体系。
“尊嘟假嘟”正是在这套技术之上建立,目前已开启内测招募,通过申请后即可体验。
从背景和人脸的替换,到利用AI模型让人做出指定的表情或动作,AI造假可谓是防不胜防。
一方面,不法分子利用AI炮制虚假内容,对受害者个人声誉和社会舆论都带来了极大的不良影响;
另一方面,AI造假也被用于诈骗活动,不仅损害被冒充者的信誉,也给受骗者带来巨大的财产损失。
今年年初,就有不法分子利用深度伪造制作了一场假的视频会议,骗走了一家公司1.8亿元的巨款。
除了正确引导和加大打击力度,让用户能够更好地判别信息真伪,也是一种重要的防护手段。
过去的AI造假检测工具主要面向专业人士,而且往往需要将内容提取后上传到检测平台中,才能进行判别。
但如果只是普通的网络视频,让吃瓜群众用这样的流程去鉴别真伪,难免显得有些繁琐。
所以在支持上传检测的同时,“尊嘟假嘟”还能主动进入视频流,用户一边吃瓜,系统就能一边判断这瓜到底“保不保熟”。
比如一进入Sora的宣传页面,系统就会针对网页里的Demo视频做出提示标注,提醒浏览者该视频“AI含量”极高。
另外针对AI诈骗日益猖獗的情况,尊嘟假嘟也支持视频通话当中进行AI合成实时监测防护。
在视频通话时,同样无需截取视频上传,尊嘟假嘟会及时主动给用户发出预警内容,提示视频对方的人脸是否存在AI合成的风险。
实时的风险提示可以帮助用户及时调整聊天方式,快速确认对方的身份,减少不必要的损失,让用户随时随地在“AI安全保障”下进行视频通话。
针对“尊嘟假嘟”背后的技术原理,瑞莱智慧联合创始人、算法科学家萧子豪透露,该产品背后的检测模型基于贝叶斯深度学习技术开发。
团队构建了一整套多模态AIGC检测技术体系,能够挖掘并建模多模态、多层次、多角度的AI合成线索,度量真假差异,并进行不确定性推理决策。
实际上,造假手段与防御方式之间,一直在进行着一场“猫鼠游戏”。
起初的AIGC内容还是“一眼假”,然后再“进化”一些之后,多加注意也依然能够通过常识进行肉眼判别,比如视频中人物的眨眼频率不合常理、部分区域的衔接不够自然等等。
但随着AIGC能力的升级,这些“常识”也逐渐被模型所掌握,靠肉眼鉴别也越来越困难了,于是检测手段也在进化,人们开始研究用机器学习的手段进行分析。
比如通过对目标内容的信号频谱进行分析,或者对图像中的噪声进行检测,挖掘内容当中的“AI痕迹”。
但这场你追我赶的争斗从未停止,一方面的原因是,用来检测AI的模型本身也是个AI,伪造者可以通过对抗训练的方式规避检测、见招拆招。
相对于造假而言,鉴别的手段似乎往往是滞后的。所以,瑞莱智慧在研究检测算法的同时,也会针对自己的方法进行防御性攻击,争取让检测走在造假的前面。
实际上,瑞莱智慧团队早在2018年成立之初,主要的研究目标就是AI合成检测技术,先后推出面向专业人士的AI内容检测平台DeepReal、人脸AI安全防火墙RealGuard等相关产品并持续迭代升级。
纵观整个行业,AI安全问题都备受关注,深度学习教父Hinton,还有ChatGPT的发明者、OpenAI前首席科学家Ilya,都一直在呼吁人们关注AI安全。
就在这两天,Ilya刚刚宣布创立了一家公司,研究的就是安全超级智能。
不过相比之下,Ilya的公司,似乎更加关注的是AI的未来,而在现在,对AI造假的判别和检测依然是一项紧迫的任务。
最新发现
相关资讯
清华独角兽成果,可以让AI伪造的图像、音频和视频现出原形。
每个人都能拥有有检测AI造假的“照妖镜”了!清华系独角兽初创公司,发布了面向个人的产品级检测工具,可以让AI伪造的图像、音频和视频现出原形。而且无需上传素材,在网页和视频会议中就能主动探测内容和人脸真伪
2025-05-25 14:18:50
一场“钢铁英雄”与AI的融合
8层楼高的挖掘机通过远程操控在极端恶劣的条件下进行矿产开采;体重500多吨的大锅炉能自如地把各类煤炭转化为气体;过去需要8人配合操作的炼焦作业通过智能化设备能够“一键完成”……当大国重器碰上智能化系统,这些
2025-05-25 13:54:50
给“后浪”做饭的AI创业者:思考如何让它穿越周期
会思考的机器——这一题材早在19世纪就已经出现在了幻想小说中。如今,人工智能(AI)依然都是科幻小说和科幻电影的重要元素。不过,虽然已经到了人人都在谈论AI的时候,但其中相当部分的人依然错误地将“人工智能”
2025-05-25 13:30:50
OpenAI停止不支持国家API,7月9日开始执行
6月25日凌晨,有部分开发者收到了OpenAI的信,“根据数据显示,你的组织有来自OpenAl目前不支持的地区的API流量。从7月9日起,将采取额外措施,停止来自不在OpenAI支持的国家、地区名单上的API使用。”
2025-05-25 13:06:50
人工智能不仅带来技术水平提高,更可提升创造力
近日,全国科技大会、国家科学技术奖励大会和中国科学院第二十一次院士大会、中国工程院第十七次院士大会在北京人民大会堂隆重召开。当前,世界百年未有之大变局加速演进,新一轮科技革命和产业变革深入发展,深
2025-05-25 12:42:50
人工智能、绿色转型、前沿创新——夏季达沃斯论坛上的中国经济“热词”
走进外形酷似钻石的大连国际会议中心,“人工智能跨越式发展”“能源转型动力强劲”“产业升级催生发展新前沿”,探讨声此起彼伏……25日,世界经济论坛第十五届新领军者年会(又称“夏季达沃斯论坛”)在这里拉开帷幕。海
2025-05-25 12:18:50
今日热榜
拜登最新签署!事关人工智能
2025-03-20 12:09:47AI语音厂商思必驰完成5亿元融资
2025-03-20 13:10:08上海推进“人工智能+”行动
2025-03-21 17:17:08英伟达新品发布,这些人工智能企业应声上涨!基金提前布局
2025-03-24 15:27:062025人工智能行业趋势报告|大模型之家年度专题
2025-03-25 11:02:09中泰证券:AI进入推理时代,看好通信板块投资机会
2025-03-26 13:06:37DeepSeek再爆火AI竞赛崛起中国创新势力
2025-03-26 13:46:47为什么说“人工智能”这个词不够准确?
2025-03-27 12:54:47人工智能是必须要拥抱的新方向
2025-04-03 12:04:18月活用户超百万AI类App达11个
2025-04-04 13:12:24热门推荐