百度百舸AI计算平台4.0正式发布

热点聚焦3周前发布 AIStore
190 0 0
鞭牛士 9月25日消息,2024百度云智大会今日举行,会上,百度智能云宣布将百舸AI异构计算平台升级至4.0版本。

 

百度百舸AI计算平台4.0正式发布

 

据介绍,百舸4.0对“多芯混训”能力进行了重点升级,实现了在万卡规模集群上95%的多芯混合训练效能。

在集群部署环节,升级后的百舸能够实现工具层面的秒级部署,将万卡集群运行准备时间从数周最快缩减至1小时。

 

百度百舸AI计算平台4.0正式发布

 

针对大模型训练过程中故障频发的问题,百舸4.0全面升级了故障检测手段和自动容错机制,可以有效降低故障发生频次,大幅减少集群故障处置时间,在万卡集群上实现了超过99.5%的有效训练时长。

在模型推理上,百舸4.0整体上做了推理速度和成本优化,长文本推理效率提升了1倍以上。

© 版权声明

相关文章

暂无评论

暂无评论...