扫一扫 扫一扫
百度BCCL万卡集群:专为大模型训练优化的故障快速定位解决方案

百度BCCL万卡集群:专为大模型训练优化的故障快速定位解决方案

2025-02-16

文章浏览阅读1.4k次,点赞31次,收藏23次。本文探讨了集合通信在分布式训练中的重要性,特别是大模型训练中的挑战。百度的BCCL库通过优化性能、增强可观测性、故障诊断和稳定性

文心一言用户突破3亿,百度优化大模型及学习平台再升级

文心一言用户突破3亿,百度优化大模型及学习平台再升级

2025-01-16

“文心一言累计用户规模已达3亿,日调用次数达到了5亿。”在6月28日举办的WAVE SUMMIT深度学习开发者大会2024上,百度发布了文心大模型4.0 Turbo

探索大模型应用新范式:统一特征表示优化(UFO)的奥秘

探索大模型应用新范式:统一特征表示优化(UFO)的奥秘

2024-09-28

大模型一次次刷新了记录,展现出惊人的效果,但对于工业界而言,势必要面对如何应用落地的问题。百度提出的统一特征表示优化技术(UFO)