据 The Information 今天报道,微软的工程师正在为其数据中心开发一种定制网卡。
一位消息人士向该刊透露,这项开发工作可能需要一年多的时间。据悉,该项目目前由Pradeep Sindhu领导,他是网络设备制造商Juniper Networks的共同创始人及前首席执行官。作为一笔价值140亿美元的交易的一部分,该公司目前正在被惠普收购。
数据中心的服务器通过网络连接在一起,这让它们可以相互共享信息。流量并不直接从服务器传输到其所连接的数据中心网络,而是要经过一个称为网卡或适配器的中介。这是一种专用芯片,可以帮助将每个数据包路由到目的地,并经常执行优化连接速度等相关任务。
据报道,微软计划在其人工智能基础设施中使用该定制网卡。其中,重点是管理配备了英伟达显卡的服务器的网络流量。据报道,微软希望该定制网卡能帮助加快人工智能工作负载的处理速度,并在此过程中降低硬件采购成本。
The Information的消息来源称,该卡类似于英伟达的ConnectX-7系列网络适配器。后者每秒可处理高达400千兆比特的流量。它同时支持以太网和InfiniBand,这两种通信标准是大多数数据中心网络的基础。
为了协同工作,组成人工智能集群的服务器需要能够共享各自内存池中存储的数据。数据共享请求通常必须通过服务器的中央处理单元。英伟达的ConnectX-7适配器包含一种名为RDMA的技术,可以绕过CPU,从而大大加快数据检索速度。
该设备还具有其他一些性能优化功能。值得注意的是,它可以执行网络安全任务,如加密原本由服务器CPU处理的数据流量,从而将更多的CPU容量留给应用程序。ConnectX-7还能解放检测数据传输错误的部分计算。
微软可能会通过该定制网卡来实现这些功能。微软于2023年收购了Sindhu创办的一家名为Fungible初创公司,他随之加入微软,据传他在负责该网卡的开发。Fungible开发的芯片与英伟达的ConnectX-7 类似,可以将CPU从某些网络安全任务和相关的计算中解放出来,从而提高应用性能。
据报道,微软的网卡将加入该公司内部开发的众多数据中心组件的行列。该公司最近详细介绍了一款定制的人工智能加速器Maia 100,以及配套的服务器机架和液冷系统。微软计划在其数据中心部署该加速器,同时部署Cobalt 100——这是该公司的工程师基于Arm Holdings plc设计的一款CPU。
好文章,需要你的鼓励
Atlassian、Intuit和AWS三大企业巨头正在为智能代理时代做准备,重新思考软件构建方式。当前企业API为人类使用而设计,未来API将成为多模型原生接口。Intuit在QuickBooks中应用自动发票生成,使企业平均提前5天收款;AWS通过AI辅助迁移服务显著提升效率;Atlassian推出内部员工入职代理和客户代理,节省大量时间成本。专家强调需要建立强大的数据架构和信任机制。
这项研究首次系统评估了AI代码智能体在科学研究扩展方面的能力。研究团队设计了包含12个真实研究任务的REXBENCH基准,测试了九个先进AI智能体的表现。结果显示,即使最优秀的智能体成功率也仅为25%,远低于实用化要求,揭示了当前AI在处理复杂科学推理任务时的显著局限性。
MIT研究发现,使用生成式AI完成任务时,大脑运作方式与单纯依靠自身思考存在显著差异。研究显示,使用ChatGPT等工具的用户记忆力更差,神经连接活动减少,对所写内容的回忆能力明显下降。虽然AI工具能提高效率,但可能导致用户缺乏对知识的深度理解和掌控感。研究强调需要更多科学数据来了解AI使用对人类认知的长期影响。
俄罗斯莫斯科国立大学研究团队开发出MEMFOF光流估计新方法,在保持顶尖精度的同时将1080p视频分析的GPU内存消耗从8GB降至2GB,实现约4倍内存节省。该方法通过三帧策略、相关性体积优化和高分辨率训练在多个国际基准测试中取得第一名成绩,为高清视频分析技术的普及奠定基础。