欢迎来车东西
登录
免费注册
我的订阅
关注我们
智东西
车东西
芯东西
智猩猩
快手在GTC大会公布大模型训练解决方案
2024-03-23
36氪
10
智东西3月23日消息,36氪获悉,3月21日,快手在英伟达GTC大会上公布了大模型训练解决方案,分享在计算通信重叠系列优化和超长文本场景下的实践,通过计算通信重叠、异构存储利用、通信资源管控、算子优化等手段,可支持百万级别超长文本训练,并在训练性能上比SOTA开源方案快30%以上。
快手