群发资讯网

AI安全治理框架更新!AI换脸、深度伪造迎来强监管

不知道大家有没有刷到过,短视频里逼真的AI换脸视频,冒充熟人打电话的AI语音诈骗,还有一键生成的虚假图片。随着大模型快速普及,AI伪造技术门槛越来越低,普通人很难分辨真假。
就在近期,国家网络安全宣传周活动期间,《人工智能安全治理框架3.0》正式发布,针对大模型、深度伪造、AI换脸等乱象,给出更细化的治理规范,给飞速发展的人工智能戴上“安全缰绳”。
很多人觉得,AI治理只是企业和技术人员需要关心的事,和普通老百姓无关。其实恰恰相反,新规约束的内容,每一条都和我们日常生活息息相关。
最受大家关注的,就是AI换脸、深度伪造。
以前,只需要几张照片,就能一键生成虚假视频,伪造他人形象、声音,用来造谣诽谤、电信诈骗。不少骗子利用AI复刻亲人声音,打电话索要钱财,很多人上当受骗。
新版治理框架明确要求,深度伪造内容必须做好标识,不能悄无声息伪造人脸、语音;严禁利用AI技术制作虚假信息,实施诈骗、造谣等违法行为。后续这类伪造内容,会更容易识别,相关违法使用行为,监管打击力度会持续加大。
除了深度伪造,大模型本身的安全管控,也是本次框架的重点。
现在各类AI大模型遍地开花,随便输入文字就能生成文案、图片、代码。但部分模型会输出虚假信息、不良内容,还有数据泄露、窃取个人隐私的隐患。
新框架对AI企业提出要求:模型上线前要做安全评估,训练数据要合规,不能随意抓取未经授权的个人信息。一旦模型存在安全风险,企业需要及时整改,从源头降低AI带来的风险。
同时,配套的AI反诈鉴伪工具同步推出,帮助普通人辨别AI生成的假视频、假语音、假图片。以后遇到陌生视频、语音消息,可以借助工具核验真伪,减少被AI骗局蒙骗的概率。
当然,出台安全框架,不是要限制AI发展,而是护航AI良性发展。
人工智能本身是强大的生产力,在工业、医疗、教育、科研领域都有巨大价值。治理的核心逻辑:鼓励创新,守住底线。不能让AI技术变成造谣、诈骗、侵权的工具。
对于我们普通人,也要提高警惕。
1. 接到亲友通过语音、视频借钱,一定要多渠道二次核实,不要仅凭一段AI语音就转账;
2. 网络刷到名人、熟人的奇怪视频,不要立刻相信、随手转发,有可能是AI伪造;
3. 不要随意上传自己清晰人脸照片、声音素材,避免被不法分子拿去做深度伪造。
AI时代已经到来,技术本身无好坏,关键在于使用的人。有了这套安全治理框架,既能保留AI技术带来的便利,也能守住个人隐私、财产安全的底线。
未来,AI相关的法律法规还会持续完善,在技术创新和安全防护之间找到平衡,让人工智能真正服务大众,而不是变成不法分子的作案工具。

#人工智能#人工智能安全治理框架#AI
换脸#AI大模型#​