Introduction
NeuralNote est un plugin audio révolutionnaire qui intègre la conversion Audio-MIDI de pointe dans votre station de travail audio numérique (DAW) préférée. Cette technologie innovante permet une transcription polyphonique, la détection de pitch bend et une transcription légère et rapide. Les utilisateurs peuvent ajuster les paramètres en temps réel tout en écoutant la transcription.
Contexte Technique
NeuralNote utilise le modèle de base de Spotify's basic-pitch, combiné avec RTNeural pour la partie CNN et ONNXRuntime pour le calcul de la transformée de Constant-Q et le empilement harmonique. Le plugin est disponible sous forme de plugin AudioFX (VST3/AU/Standalone) et peut être appliqué à une piste pour transcrire l'audio en MIDI. Les utilisateurs peuvent charger un fichier audio ou enregistrer directement depuis leur DAW.
Le workflow est simple : il suffit de charger un fichier audio, de cliquer sur le bouton d'enregistrement, et la transcription MIDI apparaît instantanément dans la section piano roll. Les utilisateurs peuvent ajuster les paramètres de transcription en temps réel, ajuster le niveau de l'audio source et de la transcription synthétisée, puis exporter la transcription MIDI par glisser-déposer.
Analyse et Implications
NeuralNote ouvre de nouvelles perspectives pour les musiciens et les producteurs de musique. La transcription polyphonique et la détection de pitch bend permettent une grande précision dans la transcription de l'audio en MIDI. Cependant, il est important de noter que le plugin n'est pas conçu pour une transcription en temps réel en raison de la latence élevée due à la transformée de Constant-Q et à l'algorithme de création d'événements de notes.
Les utilisateurs doivent également être conscients des limitations du plugin, notamment la nécessité d'avoir un ordinateur puissant pour traiter les données audio et la possibilité de bugs ou d'erreurs dans le code. Cependant, le plugin est open-source et les contributeurs sont invités à participer à son développement et à son amélioration.
Perspective
NeuralNote est un outil puissant pour les musiciens et les producteurs de musique. Les prochaines étapes pourraient inclure l'amélioration de la latence, l'ajout de nouvelles fonctionnalités et l'intégration avec d'autres outils de production musicale. Les utilisateurs sont invités à partager leurs idées et à participer à la communauté pour faire évoluer le plugin et en faire un outil encore plus puissant pour la création musicale.
