跳到正文

技术方向

多模态 最新动态

文字之外的能力:看懂图片、图文混合理解、音视频输入输出的模型与产品进展。

1 条精选近 30 天 1 条共收录 7 条

更新

多模态的精选

10月28日周三第 1–1 条
  1. Google DeepMind72

    Google DeepMind 发布世界模型 Genie 4,原生生成音频并支持实时交互

    Google DeepMind 发布世界模型 Genie 4,可在实时交互中生成带原生音频的模拟世界。Genie 4 为原生多模态,能同时生成音乐、环境音与交互对话,并由 Gemini 3.8 Flash 在循环中拆解目标、核查每帧画面,以维持因果与多步推理;Gemini 4 Argon 与 Genie 4 还被用于模拟 Apptronik Apollo 人形机器人下棋。

    推荐理由:Genie 4 把实时交互、原生音频与 Gemini 的推理串在一起,可据此判断世界模型在机器人训练和内容预演中的用法。