Hugging Face · 每日论文· 媒体 / 作者来源·精选
DuET:用双编码器 Transformer 把钢琴演奏转录为乐谱
原文标题
DuET: Note-Frame Dual Encoding for Piano Performance-to-Score Transcription
AI 导读
研究提出 DuET 双编码器 Transformer,把音符级演奏 MIDI 转乐谱(PM2S)转录与帧级节拍、强拍跟踪联合学习,并用双向交叉注意力连接两个编码器、自回归解码器交替预测乐谱属性;同时引入 TimeRoPE 和 TPRoPE 编码相对时间与音高关系。在 ASAP 与自建 Gangqinpu 数据集上,MUSTER 平均误差分别从 11.30% 降至 11.22%、从 6.56% 降至 3.64%,代码、权重与演示已开源。
来源:Hugging Face · 每日论文 · arxiv.org
导读与选稿说明
把节拍帧级信息引入音符级转谱,缓解无音符起音处节拍缺失的问题,改善时值与记谱时长,代码权重开源可供音乐转录研究直接复用。
导读由模型辅助整理,非独立核验。完整信息见原文。