跳到正文
原文
The Decoder· Matthias Bastian·· 11 小时前AI 评分49

Reka AI 发布研究预览版全模态模型 Rho-1,单一神经网络统一处理文本、图像、视频与机器人控制

Reka AI's omni-model Rho-1 handles text, images, video, and robot control in a single model

AI 导读

Reka AI 发布了 19B 参数全模态模型 Rho-1 的研究预览,单一神经网络可处理和生成文本、图像、视频与机器人控制动作,无需借助工具调用或外部模型即可在共享上下文窗口中将所有模态作为 token 处理。该模型支持实时连续视频生成并即时响应新指令,相同权重既预测摄像头画面也驱动机器人运动。训练使用 320 块 H100 GPU,历时约三个月。

来源:The Decoder · the-decoder.com