你可能已经听说过利用AI技术克隆熟人语音的诈骗电话。通常,这些攻击会伪造听起来像是你认识多年的孙辈、CEO或同事的声音,声称遇到紧急情况需要立即行动,要求汇款、透露登录凭据或访问恶意网站。
研究人员和政府官员多年来一直在警告这种威胁。网络安全和基础设施安全局在2023年表示,来自深度伪造和其他合成媒体形式的威胁已经"呈指数级增长"。去年,谷歌Mandiant安全部门报告称,此类攻击正在以"不可思议的精确度"执行,创造出更加逼真的钓鱼计划。
深度伪造诈骗电话的基本步骤包括:
首先,收集将被模仿者的语音样本。短至3秒的样本有时就足够了,这些样本可以来自视频、在线会议或之前的语音通话。
然后将样本输入基于AI的语音合成引擎,如谷歌的Tacotron 2、微软的Vall-E,或来自ElevenLabs和Resemble AI的服务。这些引擎允许攻击者使用文字转语音界面,用被模仿者的语调和对话习惯产生用户选择的词语。
可选步骤是伪造被模仿的个人或组织的电话号码,这种技术已经使用了几十年。
接下来,攻击者发起诈骗电话。在某些情况下,克隆的语音会遵循脚本。在其他更复杂的攻击中,虚假语音是实时生成的,使用语音掩蔽或转换软件。实时攻击可能更具说服力,因为它们允许攻击者回应怀疑接收者可能提出的问题。
Group-IB表示:"尽管开源项目和商业API已经展示了实时模仿技术,但实时深度伪造语音诈骗在现实中仍然有限。然而,考虑到处理速度和模型效率的持续进步,预计实时使用在不久的将来会变得更加常见。"
无论哪种情况,攻击者都会使用虚假语音为需要接收者立即采取行动制造借口。叙述可能模拟孙女入狱急需保释金、CEO指示应付账款部门某人汇款支付逾期费用,或IT人员指示员工在所谓的数据泄露后重置密码。
最后收集现金、被盗凭据或其他资产。通常,一旦采取行动,就无法逆转。
Mandiant的案例显示,其安全团队成员在模拟红队演习中执行此类诈骗的相对容易程度。红队成员收集了目标组织内某位管理者的公开语音样本,然后使用公开信息识别最可能在该被伪造者手下工作的员工并致电他们。为了让通话更有说服力,他们利用VPN服务的真实故障作为员工立即采取行动的借口。
"由于对电话中语音的信任,受害者绕过了Microsoft Edge和Windows Defender SmartScreen的安全提示,在不知情的情况下将预先准备的恶意载荷下载并执行到他们的工作站上,"Mandiant说。"载荷的成功引爆标志着演习的完成,展示了AI语音欺骗促进组织入侵的惊人容易程度。"
防止此类诈骗成功的预防措施可以很简单,比如双方约定一个随机选择的词语或短语,呼叫者必须在接收者遵从请求之前提供。接收者也可以结束通话,用已知属于呼叫者的号码回拨。但最好是遵循这两个步骤。
这两种预防措施都要求接收者保持冷静和警觉,尽管如果伪造的场景是真实的,会产生合理的紧迫感。当接收者疲劳、过度劳累或其他状态不佳时,这可能更加困难。因此,无论是否启用AI技术,所谓的语音钓鱼攻击在短期内都不太可能消失。
Q&A
Q1:AI语音深度伪造诈骗需要多长的语音样本?
A:根据安全公司Group-IB的研究,进行AI语音深度伪造诈骗时,短至3秒的语音样本有时就足够了。这些样本可以来自视频、在线会议或之前的语音通话,然后被输入到AI语音合成引擎中进行克隆。
Q2:如何防范AI语音深度伪造诈骗电话?
A:防范措施包括:双方事先约定随机选择的词语或短语,呼叫者必须提供这个暗号;接收者可以结束通话后用已知的真实号码回拨确认;最好同时采用这两种方法。关键是要保持冷静警觉,不被紧急情况的假象迷惑。
Q3:实时AI语音伪造技术目前普及程度如何?
A:根据Group-IB的报告,尽管开源项目和商业API已经展示了实时语音模仿技术,但实时深度伪造语音诈骗在现实中仍然有限。不过,随着处理速度和模型效率的持续进步,预计实时使用在不久的将来会变得更加常见。
好文章,需要你的鼓励
微软宣布为Word和Excel推出基于OpenAI的AI代理模式,通过简单提示即可自动生成文档和分析数据。Word用户可享受"氛围写作"功能,利用现有文档组装报告和提案。Excel代理能分析电子表格数据并生成可视化报告。尽管在SpreadsheetBench基准测试中准确率仅为57.2%,低于人类平均水平71.3%,但微软强调其针对实际工作场景优化。此外,微软还发布了基于Anthropic的Office代理,显示其正逐步减少对OpenAI的依赖。
苹果与清华合作提出EpiCache技术,解决AI长期对话中的记忆管理难题。该方法将对话自动分割成话题片段,为每个话题建立专门记忆库,实现智能匹配和高效检索。实验显示,EpiCache比传统方法准确率提高40%,内存使用减少4-6倍,响应速度提升2.4倍,为资源受限环境下的AI对话系统提供了实用解决方案。
OpenAI为美国ChatGPT用户推出"即时结账"功能,用户可在对话中直接购买Etsy和Shopify商品,无需跳转至外部网站。该功能支持Apple Pay、Google Pay等多种支付方式,并计划接入超过100万家Shopify商户。OpenAI还将开源其代理商务协议技术,与谷歌的代理支付协议形成竞争。这标志着电商购物模式的重大转变,AI聊天机器人可能重塑在线零售发现和支付生态系统。
清华大学与英伟达合作提出DiffusionNFT,一种革命性的AI图像生成训练方法。该方法通过对比正负样本进行学习,避免了复杂的概率计算,训练效率比传统方法提升25倍。研究团队在多项测试中验证了其优越性,不仅大幅提升了图像质量和文字渲染能力,还实现了无需分类器引导的高效训练,为AI图像生成技术的普及和应用奠定了重要基础。