AIGC的爆发除了带来算力上的挑战,对网络的要求也达到了前所未有的高度。
6月26日,腾讯云首次对外完整披露自研星脉高性能计算网络:星脉网络具备业界最高的3.2T通信带宽,能提升40%的GPU利用率,节省30%~60%的模型训练成本,为AI大模型带来10倍通信性能提升。基于腾讯云新一代算力集群HCC,可支持10万卡的超大计算规模。
(相关资料图)
腾讯云副总裁王亚晨表示:“星脉网络是为大模型而生。它所提供的大带宽、高利用率以及零丢包的高性能网络服务,将助力算力瓶颈的突破,进一步释放AI潜能,全面提升企业大模型的训练效率,在云上加速大模型技术的迭代升级和落地应用。”
构建大模型专属高性能网络,提升40%GPU利用率
AIGC的火爆带来AI大模型参数量从亿级到万亿级的飙升。为支撑海量数据的大规模训练,大量服务器通过高速网络组成算力集群,互联互通,共同完成训练任务。
大集群不等于大算力,相反,GPU集群越大,产生的额外通信损耗越多。大带宽、高利用率、信息无损,是AI大模型时代网络面临的核心挑战。
千亿、万亿参数规模的大模型,训练过程中通信占比最大可达50%,传统低速网络的带宽远远无法支撑。同时,传统网络协议容易导致网络拥塞、高延时和丢包,而仅0.1%的网络丢包就可能导致50%的算力损失,最终造成算力资源的严重浪费。
基于全面自研能力,腾讯云在交换机、通信协议、通信库以及运营系统等方面,进行了软硬一体的升级和创新,率先推出业界领先的大模型专属高性能网络——星脉网络。
在硬件方面,星脉网络基于腾讯的网络研发平台,采用全自研设备构建互联底座,实现自动化部署和配置。
在软件方面,腾讯云自研的TiTa网络协议,采用先进的拥塞控制和管理技术,能够实时监测并调整网络拥塞,满足大量服务器节点之间的通信需求,确保数据交换流畅、延时低,实现高负载下的零丢包,使集群通信效率达90%以上。
此外,腾讯云还为星脉网络设计了高性能集合通信库TCCL,融入定制化解决方案,使系统实现了微秒级感知网络质量。结合动态调度机制合理分配通信通道,可以避免因网络问题导致的训练中断等问题,让通信时延降低40%。
网络的可用性,也决定了整个集群的计算稳定性。为确保星脉网络的高可用,腾讯云自研了端到端的全栈网络运营系统,通过端网立体化监控与智能定位系统,将端网问题自动定界分析,让整体故障的排查时间由天级降低至分钟级。同时,大模型训练系统的整体部署时间从19天缩减至4.5天,保证基础配置100%准确。
历经三代技术演进,软硬一体深耕自研
星脉网络全方位的升级背后,是腾讯数据中心网络历经三代技术演进的成果。
在腾讯发展初期,数据中心网络流量主要由用户访问数据中心服务器的南北向流量构成,网络架构以接入、汇聚、出口为主。这一阶段主要使用了商用网络设备,搭建标准化数据中心网络,支撑QQ在线人数增长超过1亿,服务器规模增长超10万。
随着大数据和云计算的兴起,服务器之间的东西向流量逐渐增多,云租户对网络产生了虚拟化和隔离的要求。数据中心网络架构逐渐演变为同时承载南北向和东西向流量的云网络架构,腾讯云构建了全自研网络设备与管理系统,打造超大规模数据中心网络,服务器规模近200万台。
如今随着AI大模型的出现,腾讯云在国内率先推出高性能计算网络,采用东西向、南北向流量的分离架构。构建了独立的超大带宽、符合AI训练流量特征的网络架构,并配合自研软硬件设施,实现整套系统的自主可控,满足超强算力对网络性能的新需求。
日前,腾讯云发布的新一代HCC高性能计算集群,正是基于星脉高性能网络打造,可以实现3.2T超高互联带宽,算力性能较前代提升3倍,为AI大模型训练构筑可靠的高性能网络底座。
未来,腾讯云还将持续投入基础技术的研发,为各行各业的数智化转型提供有力的技术支撑。
标签:
面向AI大模型,腾讯云首次完整披露自研星脉高性能计算网络 AIGC的爆发除了带来算力上的挑战,对网络的要求也达到了前所未有的高度
你知道 什么是纤夫吗?纤夫的忌讳有哪些? 环球看点 纤夫的意思是专以纤绳帮人拉船为生的人。在古代,船运是一种必不可
庙岛地图,庙岛旅游攻略_最新消息 庙岛群岛,古称长岛、庙岛,古称沙门岛。
ff14陆行鸟怎么领取?ff14军票如何刷? 世界讯息 小伙伴们你们对ff14陆行鸟了解多少?ff14陆行鸟怎么领取?你知道吗?想
什么是权重股?怎么看股票是不是权重股? 全球今热点 权重股是指总股本较大的股票,它的股票占比数较整个股票市场的比重
故园无此声的此声指的是什么?故园无此声的故园指的是什么? 天天热门 故园无此声的此声指的是什么?故园无此声的此声是指:风雪交加的声音
什么是黑色金属 有色金属指的是什么? 黑色金属①黑色金属又称钢铁材料,包括杂质总含量<0 2%及含碳量不超
闽东电力是电力龙头吗?闽东电力是央企还是国企? 环球热议 闽东电力是电力龙头吗?作为福建省电力领域的大型企业,闽东电力在当
Better Brand获得600万美元A轮融资 (相关资料图)Better Brand是一家消费食品技术研发商,该公司围绕精
成语一衣带水中的水原指哪条河流(一衣带水是什么典故) 成语一衣带水中的水原指哪条河流(一衣带水是什么典故),一起来了解
环球最新:微信怎么设置弹出消息内容?微信怎么隐藏聊天记录? 微信怎么设置弹出消息内容?设置弹出信息的方法如下:打开界面,找到
快看:如何查看电脑tcp/ip协议设置?tcp连接的服务器地址怎么看? 如何查看电脑tcp ip协议设置?1 点击 "开始 "。2 点击 "设置 "。
想让花呗额度提高怎么弄?支付宝花呗额度冻结怎么解除?|天天要闻 想让花呗额度提高怎么弄?花呗可以通过以下方法来提高额度:1、尽量
全球观热点:南京新百真正价值?南京新百属于哪个区? 南京新百真正价值?南京新百在大健康产业上已完成脐带血干细胞存储、
ceb文件如何打开?手机中的CEB文件怎么打开?_速看料 ceb文件如何打开?1、网页搜索ceb阅读器。2、找到ceb阅读器绿色版,
环球快看:你知道纤夫是什么意思吗? 纤夫的特点有哪些? 纤夫的意思是专以纤绳帮人拉船为生的人。在古代,船运是一种必不可
超级动产抵押权是什么意思?超级动产抵押权可以对抗留置权吗? 全球速递 超级动产抵押权是什么意思?超级动产抵押权是指动产抵押担保的主要债
广运整形院长魏广运——华中地区面部除皱抗衰领域权威专家 魏广运,广运整形医院院长,华中地区面部除皱抗衰领域权威专家。是第六代SMAS面部除皱术的开创者,在中国整形美容协会中西医结合分会SMAS除
民事调解一般去哪调解?民事调解会有案底吗? 民事调解一般去哪调解?民事调解是指民事案件中双方当事人在法院审判
环球热门:追认是单方法律行为吗?追认权是形成权吗? 追认是单方法律行为吗?追认是指事后认可的意思。限制民事行为能力人
面向AI大模型,腾讯云首次完整披露自研星脉高性能计算网络 AIGC的爆发除了带来算力上的挑战,对网络的要求也达到了前所未有的高度
青岛海关:30条新政促进跨境贸易便利化 全球热讯 (相关资料图)聚焦服务重大国家战略、智慧口岸建设、打造国际物流枢
你知道萨克斯的种类有几种吗?萨克斯简介|世界焦点 萨克斯的种类繁多,有低音萨克斯、上低音萨克斯、次中音萨克斯、中
焦点快报!酵母菌是不是真菌? 酵母菌生殖方式是怎样的? 酵母菌是一些单细胞真菌,可在缺氧环境中生存,是人类直接食用量最
《狐妖小红娘》分为几篇?月红篇和竹业篇的关系是什么? 我们经常会听到狐妖小红娘这一词。那狐妖小红娘分为几篇?下面小编带
股市底部有多少种形态? 股票底部放量下跌是什么意思? 股市底部有多少种形态?一、平台底股价在5日均线附近连续平盘三天,
你知道 什么是纤夫吗?纤夫的忌讳有哪些? 环球看点 纤夫的意思是专以纤绳帮人拉船为生的人。在古代,船运是一种必不可
我国最高权力机关是什么?中华人民共和国宪法第五十七条的内容是什么? 我国国家最高权力机关为全国人民代表大会,在闭会期间,由人民代表
炒黄金如何开户?如何开户黄金交易 炒黄金如何开户?黄金交易的开户方式通常包括内部市场开户和国际市场
太空行动冒充者如何获胜?太空行动一共有几个模式? 太空行动冒充者如何获胜?学会虚张声势作为冒充者,最重要的策略就是
【全球播资讯】Redmi Note 13首曝:无塑料支架极窄柔性OLED屏幕 (资料图片)近日,数码博主"数码闲...
广运整形院长魏广运——华中地区面部除皱抗衰领域权威专家 魏广运,广运整形医院院长,华中地...
2023深圳国际细胞治疗与再生医学大会将于7月举办 细胞疗法改变了人类治疗遗传疾病与...
环球今日讯!苹果手机相片自动旋转怎么调?苹果手机相机怎么设置九宫格? 苹果手机相片自动旋转怎么调?打开...
世界互联网大会数字文明尼山对话在山东举行 世界观天下 6月26日,世界互联网大会数字文明...
AI赋能文明发展 文明铸魂技术创新|全球聚焦 6月26日,世界互联网大会数字文明...
撤销权是形成权吗?行使撤销权的条件有哪些? 撤销权是形成权吗?撤销权的性质为...
庞氏骗局是什么 庞氏骗局它具有哪些显著特征?_观察 庞氏骗局是什么庞氏骗局是金融领域...
天天短讯!排污阀的工作原理是什么?节流截止阀和阀套式排污阀的区别有哪些? 排污阀的工作原理是什么?1、阀门开...
焦点精选!b站工房怎么邀请好友入驻?怎么取消闲鱼上预约回收? b站工房怎么邀请好友入驻?首先,进...
中国企业上市形式是什么 全面注册制是利好还是利空?-环球今头条 中国企业上市形式是什么目前,中国...
基金转换为什么还有退款?基金转换退回金额是什么意思 全球时快讯 基金转换为什么还有退款?在转换过...
社保基金入市的作用是什么?社保利率是多少?|今头条 社保基金入市的作用是什么?1、社保...
短讯!第一款基于OpenAI的ChatGPT GPT-4技术的冥想应用Ogimi.ai:为用户提供个性化冥想体验 (资料图片仅供参考)Ogimi是一款基...
你知道蚝油生菜的做法是怎样的吗?蚝油生菜怎么做? 把生菜掰开并清洗;大蒜剁成蒜末,...
太空行动内鬼如何玩?太空行动哪个角色适合新手? 太空行动内鬼如何玩?1、通常情况下...
魔兽世界伐木机操作手册哪里掉?魔兽世界伐木机操作手册有什么用?|天天新视野 魔兽世界伐木机操作手册哪里掉:1...
推出奥迪A3 1.4 TFSI Ultra 奥迪正在用新的汽油版本扩展当前A3...
小米手机如何打开私密相册?相册设置的隐私密码忘记了怎么办?_全球快资讯 小米手机如何打开私密相册?1、找到...
股票的钱没法提现是什么情况?沪市刚卖的股票为什么不能提现? 股票的钱没法提现什么情况?证券转...
世界新资讯:常见的排污阀有哪些分类?快速排污阀型号有哪些? 常见的排污阀有哪些分类?常见的排...
visa卡怎么办?银联卡与visa卡的区别是什么? visa卡怎么办?满足以下条件就能办...
全球球精选!债券久期是什么意思 债券久期计算的公式是什么? 债券久期是什么意思债券久期也叫做...
环球今头条!魔兽世界怀旧服奥法师的食谱有什么用?魔兽世界怀旧服奥法师的食谱奖... 魔兽世界怀旧服奥法师的食谱作用:...
基金分红好处有哪些?基金有哪几种分红方式? 基金分红好处有哪些?基金有哪几种...
【全球播资讯】Redmi Note 13首曝:无塑料支架极窄柔性OLED屏幕 (资料图片)近日,数码博主"数码闲...