世界领先的高性能计算、数据中心端到端互连方案提供商宣布, 互联网搜索巨头百度公司现已采用Mellanox端到端RDMA以太网互连解决方案为其打造全球顶尖的AI平台。在全球计算机系统领域的顶级会议——第26届操作系统原理大会(SOSP’17)上,百度提交了关于 “高性能RDMA协议栈关键技术” 的Poster。该Poster展示通过建立一种类Socket的RDMA通信库,可将现有业务无缝迁移到高性能RDMA协议栈。百度是国内第一家大规模部署Mellanox 100G RDMA (支持RoCE v2) 以太网网络的企业,Mellanox与百度精诚合作,引领了网络技术的快速发展。
随着人工智能和5G网络的兴起,“唤醒万物,万物互联”的时代已经来临。在人工智能领域,计算量需求的爆发式增长无疑对网络提出了更苛刻的要求。百度AI算法具有高流量突发的网络特征,而且对网络的时延、带宽以及吞吐量的需求也很高。百度类Socket通信库底层采用Mellanox 100G RDMA以太网,使得百度AI集群的训练速度获得了大幅度的提升,AI训练参数的同步时间也进一步缩短。
作为高性能互连网络的核心组件,基于RDMA技术的Mellanox以太网解决方案在百度HPC集群和高性能存储集群中也发挥了关键作用。百度云旗下的块存储服务——云磁盘(CDS)采用NVMe介质,其读写时延已低于传统TCP网络的通信时延,网络因此成为了最大的瓶颈。结合25G RDMA以太网解决方案,百度对其底层的Baidu RPC(brpc)进行了改造。测试结果表明,改造后brpc的延迟可降低20% - 60%,QPS(每秒查询率)可提升40% - 80%。相应的,云磁盘(CDS)的读写时延可降低10%-40%。
“无论是传统的HPC应用还是新兴的人工智能平台,都离不开高性能RDMA网络的支持”,Mellanox公司亚太及中国区市场开发高级总监刘通表示。“我们很荣幸与百度公司合作,为业界领先的AI开放生态架构提供支持,共同构建更高效的网络协议堆栈,推动网络革新,共同引领100G RDMA以太网大规模部署,打造AI平台的网络新引擎。”
目前, 百度人工智能研究成果已全面应用于百度产品, 让数亿网民从中受益; 同时, 百度还将语音、图像、机器翻译等难度高、投入大的领先技术向业界开放, 以降低大众创业、万众创新的门槛, 进一步释放创业创新活力。
好文章,需要你的鼓励
OpenAI研究科学家Alexander Wei宣布,公司一个未发布的实验模型在国际数学奥林匹克竞赛中解决了六道题目中的五道,获得42分中的35分,达到金牌水平。该模型展现出类似人类数学家的推理能力,能够构建复杂严密的论证。这标志着AI在创造性问题解决方面的重要突破,不过该技术预计数月内不会公开发布。
哈佛和MIT研究团队通过创新的"归纳偏差探测"方法,发现AI基础模型虽然在预测任务上表现出色,但实际上并未真正理解世界的基本规律。研究以天体物理学为例,揭示了AI模型更像是依赖启发式策略的"经验主义者",而非掌握深层原理的"理论家",为AI发展指明了新方向。
本文探讨了判断AI是否达到通用人工智能(AGI)和人工超级智能(ASI)水平所需的问题数量。目前缺乏确定的测试方法来评估是否达到顶级AI水平。基于图灵测试的分析,作者提出仅通过少量问题难以全面评估智能水平。参考美国国会图书馆主题标引(LCSH)的40万个主题领域,如果每个领域提出1万个问题,将需要40亿个问题来全面测试AGI。这种大规模测试虽然在逻辑上合理,但在实际操作中面临巨大挑战。
西蒙弗雷泽大学研究团队开发了CLiFT压缩光场令牌技术,用创新的数据压缩方法解决虚拟现实中的存储和传输难题。该技术能够用原来十分之一的数据量实现相同的视觉质量,同时支持根据用户需求动态调整渲染效果。在实际测试中,CLiFT在保持高质量视觉效果的同时,相比现有方法实现了5-7倍的数据压缩率,为虚拟现实技术在移动设备和网络受限环境中的应用开辟了新的可能性。