智能音频转MIDI插件！DamRsn NeuralNote v2.0.0 WIN&MAC（带离线模型、安装教程）
核心亮点
一款基于深度学习的音频转MIDI插件，可把整段混音或单个乐器音频转成MIDI，并内置多乐器合成器试听结果。
- 基于深度学习的音频转MIDI插件，支持独立运行及VST3、AU格式。
- v2采用MuScriptor模型，替代Basic Pitch，参数规模103M至1.4B。
- 支持多乐器转录，可处理完整混音，并按乐器分组显示音符。
- 内置多乐器合成器，可逐件试听，支持增益、静音和独奏。
- 转录完全本地运行，可选GPU或CPU，音频不会离开本机。
- 提供小、中、大三档模型，在速度与质量之间取舍。
产品概述
DamRsn NeuralNote 是一款基于深度学习的音频转 MIDI 插件，可将音频转录为 MIDI 并带入常用的数字音频工作站中。它提供独立运行程序以及 VST3、AU 插件格式，支持 Windows 与 Mac。
v2 版本采用 MuScriptor 转录模型，替代 Spotify 的 Basic Pitch。该模型为 transformer 架构，参数量从 1.03 亿到 14 亿，而 Basic Pitch 不足 1.7 万参数。
核心功能
支持多乐器转录，可转录完整混音而非一次只处理一件乐器，音符按乐器分组。
内置多乐器合成器，可试听每件已转录乐器，并提供每件乐器的增益、静音和独奏控制。
采用全新的现代界面设计。
转录在本地运行，使用 GPU 或 CPU，音频不会离开本机。NeuralNote 仅在下载模型和检查更新时联网。
转录流程
NeuralNote 是简单的 AudioFX 插件（VST3／AU／独立程序），将其加载到需要转录的音轨上即可使用。
可通过点击录音采集音频，录音在实时录制和 DAW 播放音轨时均有效；也可将音频文件拖放到插件上，支持 .wav、.aiff、.flac、.mp3 和 .ogg（vorbis）。
在左侧面板选择要转录的乐器，或选择 Automatic 让模型自动检测。给定正确的乐器集合时，转录效果通常更好。
点击 Transcribe 后转录在后台运行，MIDI 随解码过程填入钢琴卷帘，运行期间显示进度指示和取消按钮。
点击播放可不等待转录完成即试听结果，仅播放已解码部分。可调整源音频与合成转录之间的混合比例，以及每件乐器的电平。
满意后可将 MIDI 从插件拖放到 MIDI 轨道，或将 MIDI 文件保存到电脑。
模型与性能
MuScriptor 提供小、中、大三档，在速度与质量之间取舍。NeuralNote 从 Hugging Face 的 DamRsn/muscriptor-gguf 以 GGUF 文件形式下载模型。未安装模型时，三档均可下载。顶部栏的 Model 按钮可切换已安装模型、下载其他档位，并打开模型存储文件夹。
下载大小约为：小档 210 MB、中档 620 MB、大档 2.7 GB。也可手动将模型文件放入对应文件夹，需使用 HF 仓库 v1/ 中未改动且保留原文件名的文件（如 muscriptor-medium-f16.gguf）。NeuralNote 只识别名称和大小与下载文件匹配的模型。删除模型文件夹中的文件即可移除模型，之后可随时重新下载。
硬件与运行表现
转录速度主要取决于模型大小和硬件。GPU 可用时会启用，macOS 通过 Metal、Windows 和 Linux 通过 Vulkan 调用。中档和大档模型强烈建议使用 GPU。Settings > Compute device 可选择设备：Auto（默认，会显示所选设备）、指定 GPU 或 CPU。选择从下次转录起生效，之后新增或移除的 GPU 需重启 NeuralNote（或 DAW）后才会列出。
目前仅测试了少量 GPU。若转录失败、结果异常或速度异常缓慢，可提交 issue，并附上操作系统、GPU 和模型大小。在 Apple M1 Pro 上测得的近似实时倍率（高于 1× 表示快于实时）：小档 GPU（Metal）约 3.5×、CPU 约 2×；中档 GPU 约 1.5×、CPU 约 0.7×；大档 GPU 约 0.5×，不建议使用 CPU。
官网信息
- 发布
评论区 0 条讨论
遇到闪退、入库或解压异常？请附带你的系统版本与宿主环境留言
发表留言
请遵守当地法律法规，发表友好言论
暂无讨论，欢迎分享你的使用体验。