跳到正文
原文
The Decoder· Matthias Bastian·· 3 小时前AI 评分72

Reka AI 发布 Rho-1 全模态模型研究预览

Reka AI's omni-model Rho-1 handles text, images, video, and robot control in a single model

AI 导读

Reka AI 发布 Rho-1 研究预览,这款 19B 参数的全模态模型在单一神经网络中处理并生成文本、图像、视频和机器人控制动作。Rho-1 将所有模态作为 token 放入共享上下文窗口,无需工具调用或外部模型,还能实时生成连续视频并根据新指令调整。为缓解机器人训练数据稀缺,Reka AI 使用逆动力学模型从普通互联网视频中提取控制信号,并在 320 张 H100 GPU 上训练约三个月。

来源:The Decoder · the-decoder.com