未来,只有AI驱动的企业与其他企业。
然而随着AI技术的不断渗透,企业就需要在基础设施、数据和应用程序的三层架构中,增加AI这一全新层次,这也产生了如何保证AI应用安全性的新问题。
在网络安全领域,AI对抗AI已成为共识。思科亚太、日本及大中华区总裁Dave West认为,随着世界变化加速,我们必须迅速行动,但不能以牺牲安全为代价追求速度,也不能为了确保安全而牺牲速度。
速度与安全如何兼得?
“模型是非确定性的、动态的,这就会创造出新的风险向量。”思科亚太、日本及大中华区网络销售和解决方案工程副总裁Raymond Janse van Rensburg谈到,当模型崩溃时,可能会发生严重的问题,这就需要对模型和应用程序进行保护。
AI应用面临的风险主要包括Safety(安全)和Security(保障)两大类。Safety涉及模型的“毒性”问题,例如偏差注入,意味着模型未能按预期执行任务或行为;Security则聚焦于保护模型免受外部攻击,如攻击者试图改变模型行为,随着攻击手段不断演变,如何有效保护模型变得愈加复杂。
如今,企业需要一个集成的安全平台,而不是哪里漏了堵哪里的单点解决方案。近期思科发布了思科人工智能防御系统(Cisco AI Defense),帮助企业AI转型过程中,可以在确保安全的同时实现无缝创新。


思科人工智能防御系统(Cisco AI Defense)
思科人工智能防御系统的主要目标是简化AI管理,重点解决两个核心问题,第一,确保AI应用的访问安全:保护用户、员工以及使用应用程序的人员(例如ChatGPT等AI工具用户)的安全;第二,开发与部署安全的AI应用:确保AI应用程序开发者在构建和开发智能体时能够获得必要的安全保障。
思科全球人工智能软件和平台副总裁DJ Sampath强调,思科人工智能防御系统首先可以为员工使用AI应用程序时提供完整的可视化,了解员工使用的未授权和已授权的AI应用;其次,通过实施访问控制策略,限制员工对未授权AI工具的访问;最后,持续防范威胁和数据泄露,确保合规性和机密数据的保护。
同样开发者也需要一套适用于所有应用的AI安全防护措施,思科人工智能防御系统则可以满足AI检测、模型验证、运行时安全。
AI检测:安全团队需要了解构建应用的主体以及其使用的训练源。思科人工智能防御系统能够在公有云和私有云中检测到未授权和已授权的AI应用。
模型验证:模型调整可能导致有害或意外结果。思科人工智能防御系统的自动化测试可检查人工智能模型中数百种潜在的安全问题。这支由人工智能驱动的算法红队能够识别潜在漏洞,并为安全团队推荐思科人工智能防御系统中的防护措施。
运行时安全:持续验证能够防范潜在的安全威胁,如提示注入、拒绝服务和敏感数据泄露等。
与单一AI模型中的安全措施不同,思科人工智能防御系统提供适用于多模型环境的一致性控制。该系统具备自我优化能力,基于思科独有的机器学习模型,并结合Talos威胁情报数据,实时识别和应对不断演变的AI安全挑战。使用思科人工智能防御系统的Splunk客户,将接收到来自整个生态系统的丰富警报。
同时,思科人工智能防御系统能够无缝集成现有的数据流,提供卓越的可视化与控制力,并深度融入思科推出的统一化、由人工智能驱动的跨领域安全平台——思科安全云。
DJ Sampath表示,如果企业只是保护应用程序,5分钟内即可部署AI云可视性解决方案,如果需保护员工,使用思科安全访问解决方案即可轻松实现。无论是使用AI应用还是开发AI应用,思科都能提供无缝的工具支持。
思科一直与合作伙伴在安全领域保持紧密合作,97%的业务来自于合作伙伴。未来,思科将继续与情报合作伙伴协作,进一步增强人工智能防御系统的能力。同时,思科正将所有解决方案整合到“思科安全云”控制台,MSP可以通过该控制台配置和管理所有安全功能,从而提升服务能力。
Dave West最后呼吁,CIO们应认识到人工智能防御、可视性和可观察性是未来成功的基础,这些因素将决定企业在AI时代的竞争力与安全性。
好文章,需要你的鼓励
Anthropic发布SCONE-bench智能合约漏洞利用基准测试,评估AI代理发现和利用区块链智能合约缺陷的能力。研究显示Claude Opus 4.5等模型可从漏洞中获得460万美元收益。测试2849个合约仅需3476美元成本,发现两个零日漏洞并创造3694美元利润。研究表明AI代理利用安全漏洞的能力快速提升,每1.3个月翻倍增长,强调需要主动采用AI防御技术应对AI攻击威胁。
NVIDIA联合多所高校开发的SpaceTools系统通过双重交互强化学习方法,让AI学会协调使用多种视觉工具进行复杂空间推理。该系统在空间理解基准测试中达到最先进性能,并在真实机器人操作中实现86%成功率,代表了AI从单一功能向工具协调专家的重要转变,为未来更智能实用的AI助手奠定基础。
Spotify年度总结功能回归,在去年AI播客功能遭遇批评后,今年重新专注于用户数据深度分析。新版本引入近十项新功能,包括首个实时多人互动体验"Wrapped Party",最多可邀请9位好友比较听歌数据。此外还新增热门歌曲播放次数显示、互动歌曲测验、听歌年龄分析和听歌俱乐部等功能,让年度总结更具互动性和个性化体验。
这项研究解决了现代智能机器人面临的"行动不稳定"问题,开发出名为TACO的决策优化系统。该系统让机器人在执行任务前生成多个候选方案,然后通过伪计数估计器选择最可靠的行动,就像为机器人配备智能顾问。实验显示,真实环境中机器人成功率平均提升16%,且系统可即插即用无需重新训练,为机器人智能化发展提供了新思路。