AI模型精选

Kyutai 发布 MuScriptor:开源权重的多乐器音乐转录模型

Kyutai Releases MuScriptor: An Open-Weight Decoder-Only Transformer for Multi-Instrument Music Transcription to MIDI

精选理由

想做多乐器音乐自动转录?Kyutai 开源了 MuScriptor,训练数据 160 多万条,比 YourMT3+ 更准,还带交互演示。

AI 摘要

Kyutai 与 Mirelo 联合发布 MuScriptor,一个基于解码器-only Transformer 的开源权重模型。该模型在 17 万条真实录音和 145 万条合成 MIDI 数据上训练,可将包含多种乐器的混音直接转录为 MIDI 格式。与 YourMT3+ 等基线相比,MuScriptor 在多项基准测试中取得了更优的转录准确率,并支持乐器条件控制。

图片来源 · marktechpost
AI 翻译 · 中文

Kyutai 与 Mirelo 联合发布 MuScriptor,一个基于解码器-only Transformer 的开源权重模型。该模型在 17 万条真实录音和 145 万条合成 MIDI 数据上训练,可将包含多种乐器的混音直接转录为 MIDI 格式。与 YourMT3+ 等基线相比,MuScriptor 在多项基准测试中取得了更优的转录准确率,并支持乐器条件控制。

marktechpostMuScriptor is an open-weight, decoder-only Transformer from Kyutai and Mirelo. Trained on 170k real recordings plus 1.45M synthetic MIDIs, it transcribes full multi-instrument mixes into MIDI. The article covers its thre