钛媒体 App 11 月 20 日消息,蚂蚁集团宣布开源万亿参数强化学习高性能权重交换框架 Awex。据介绍,今年 10 月,蚂蚁集团开源了两款万亿参数旗舰模型,包括非思考的 Ling-1T 和思考模型 Ring-1T。其中 Ring-1T 基于其自研的高性能权重交换框架 Awex(Asystem Weight Exchange Framework),实现了在数千卡 GPU 集群上 5-10 秒内完成万亿参数级别的权重同步。(广角观察)

钛媒体 App 11 月 20 日消息,蚂蚁集团宣布开源万亿参数强化学习高性能权重交换框架 Awex。据介绍,今年 10 月,蚂蚁集团开源了两款万亿参数旗舰模型,包括非思考的 Ling-1T 和思考模型 Ring-1T。其中 Ring-1T 基于其自研的高性能权重交换框架 Awex(Asystem Weight Exchange Framework),实现了在数千卡 GPU 集群上 5-10 秒内完成万亿参数级别的权重同步。(广角观察)
登录后才可以发布评论哦
打开小程序可以发布评论哦