凭借在模仿和破译人类思维方面的不懈努力,我们进入了人工智能(AI)时代。作为一款基于文本的AI机器人,ChatGPT因广泛应用先进的AI技术而备受关注。从准确修复编码错误、生成烹饪食谱、创建3D动画,到制作完整的歌曲,ChatGPT展现了AI的惊人能量,为世界带来了不可思议的新能力。
然而与此同时,AI也一直被视为一把“双刃剑”。多年来,全世界都在猜测AI可能即将统治世界。如今,用户可以使用AI驱动的安全工具和产品,在几乎无需人为干预的情况下应对大量网络安全事件,但业余黑客也可以利用同样的技术开发智能恶意软件程序并发起隐形攻击。
ChatGPT带来的网络安全隐患不容忽视
自去年11月底ChatGPT问世以来,全球技术专家和评论员一直在关注AI生成的内容工具所产生的影响,尤其是对网络安全的影响。那么AI软件会使网络犯罪走向普及吗?
在拉斯维加斯举行的黑帽和Defcon安全大会上,一个技术团队展示了AI在生成钓鱼邮件和鱼叉式钓鱼信息方面是如何超越人类的。
研究人员将OpenAI的GPT-3平台与其他侧重于个性分析的AI即服务产品相结合,生成了根据他们同事的背景和性格而定制的钓鱼邮件。最终,研究人员开发出一个在攻击目标之前对邮件进行梳理和完善的流程。令他们惊讶的是,这个平台还能自动提供具体内容,例如当被要求生成针对特定国家的人的内容时,会提到该国的法律。
ChatGPT的开发者明确表示,这款AI工具具有质疑错误前提和拒绝不当请求的能力。虽然该系统自带用于防止任何形式犯罪活动的护栏,但经过调整,它生成了一封看上去极其像人类写出来的近乎完美的钓鱼邮件。
采取智能化行动,实现自动化响应
根据派拓网络威胁情报团队Unit 42的调查,勒索软件攻击是最主要的安全事件,发展呈现愈演愈烈的态势——不仅案例数量超过总量的三分之一(36%),而且攻击者索要和获得的赎金也在不断增加。究其原因,主要是由于暗网中的工具价格低廉——甚至不到10美元,而且还出现了勒索软件即服务模式和ChatGPT等AI工具,大大降低了网络犯罪的门槛。
鉴于日益智能和先进的黑客技术所带来的威胁迫在眉睫,网络安全行业必须拥有同等资源才能对抗这些AI驱动的攻击。从长远来看,安全行业的目标不是仅让一群人类威胁猎手通过猜测来零散地解决问题。
当务之急是采取智能化的行动来化解这些不断发展的威胁。好消息是自主响应如今能够在无需人类干预的情况下有效解决威胁。但随着AI驱动的攻击成为常态,受到自动化恶意软件攻击的企业、政府和个人需要越来越多地依靠AI和机器学习(ML)等新兴技术做出自动化响应。
更负责且道德地使用AI工具
从技术的复杂性到人为因素,企业在确保AI网络安全的过程中面临着诸多挑战,尤其是需要高度重视机器、人类和道德因素之间的平衡。
制定企业策略对于兼顾经营道德和网络安全至关重要。建立有效的治理和法律框架能够增强人们对AI技术的信任,并促进社会公平和可持续发展。因此,AI和人类之间的微妙平衡将成为实现网络安全的关键因素,其中信任、透明度和责任感为机器带来了补充优势。
好文章,需要你的鼓励
苏州大学研究团队提出"语境降噪训练"新方法,通过"综合梯度分数"识别长文本中的关键信息,在训练时强化重要内容、抑制干扰噪音。该技术让80亿参数的开源模型在长文本任务上达到GPT-4o水平,训练效率比传统方法高出40多倍。研究解决了AI处理长文档时容易被无关信息干扰的核心问题,为文档分析、法律研究等应用提供重要突破。
在Cloudera的“价值观”中,企业智能化的根基可以被概括为两个字:“源”与“治”——让数据有源,智能可治。
清华大学团队首次揭示了困扰AI训练领域超过两年的"幽灵故障"根本原因:Flash Attention在BF16精度下训练时会因数字舍入偏差与低秩矩阵结构的交互作用导致训练崩溃。研究团队通过深入分析发现问题源于注意力权重为1时的系统性舍入误差累积,并提出了动态最大值调整的解决方案,成功稳定了训练过程。这项研究不仅解决了实际工程问题,更为分析类似数值稳定性挑战提供了重要方法论。