谷歌推出 Magenta RealTime 2:本地实时音乐 AI,延迟降至 200 毫秒

谷歌推出 Magenta RealTime 2 本地实时音乐 AI 模型:延迟降低至 1/15

精选理由

音乐创作者和 AI 爱好者终于有了能实时合奏的本地模型——延迟从 3 秒降到 200 毫秒,用 MacBook 就能跑,建议玩电子乐或编曲的人直接下载 Jam 试试。

AI 摘要

谷歌 Magenta 团队发布 Magenta RealTime 2(MRT2),一款可在本地实时运行的 AI 音乐模型,支持与用户即兴合奏。MRT2 推出两种规模:24 亿参数的高质量模型 mrt2_base 和 2.3 亿参数的高速模型 mrt2_small,后者针对苹果 Apple Silicon 优化,可在 M1 及以上芯片的 Mac 上实时运行。相比前代,MRT2 将控制延迟从约 3 秒降至约 200 毫秒(降低至 1/15),采用逐帧生成(每帧 40 毫秒),更接近真实乐器演奏体验。模型支持文本、音频风格提示以及 MIDI 控制,并免费提供 Jam 应用和 DAW 插件。

AI 翻译 · 中文

谷歌 Magenta 团队发布 Magenta RealTime 2(MRT2),一款可在本地实时运行的 AI 音乐模型,支持与用户即兴合奏。MRT2 推出两种规模:24 亿参数的高质量模型 mrt2_base 和 2.3 亿参数的高速模型 mrt2_small,后者针对苹果 Apple Silicon 优化,可在 M1 及以上芯片的 Mac 上实时运行。相比前代,MRT2 将控制延迟从约 3 秒降至约 200 毫秒(降低至 1/15),采用逐帧生成(每帧 40 毫秒),更接近真实乐器演奏体验。模型支持文本、音频风格提示以及 MIDI 控制,并免费提供 Jam 应用和 DAW 插件。

IT之家IT之家 6 月 5 日消息, 谷歌 Magenta 团队昨日(6 月 4 日)发布 Magenta RealTime 2(MRT2)模型 ,并同步免费放出乐器应用 Jam 以及 DAW 插件 MRT2。 MRT2 定位是可与用户“即兴合奏”的本地实时音乐模型,共有 2 种规模,其一是高质量模型 mrt2_base,参数量为 24 亿;其二是高速模型 mrt2_small,参数量为 2.3 亿。 谷歌表示上述两个版本均针对苹果 Appl