pianotrans

GUI simple pour la transcription du piano de Bytedance avec pédales

La transcription du piano de ByTedance est la mise en œuvre pytorch du système de transcription du piano, "Transcription de piano haute résolution avec pédales en régressant les ensembles et les compensations de temps [1] ".

En utilisant cela, nous pouvons transcrire des enregistrements de piano dans des fichiers MIDI avec des pédales.

Il s'agit d'une interface graphique simple et d'un emballage pour Windows et Nix sur Linux / MacOS.

Exigence

• OS: Windows 7 ou version ultérieure (64 bits), Linux, macOS (Intel / M1)
• Mémoire: au moins 4G

Seuls Windows 10, Debian Linux 10 et MacOS 12.1 M1 sont testés.

Comment utiliser sur Windows

1. Télécharger Microsoft Visual C ++ Redistribuable pour Visual Studio 2015, 2017 et 2019 vc_redist_x64.exe et installer
2. Télécharger et déballer Pianotrans-V1.0.7Z (téléchargement de 1,5 Go, déballer en utilisant 7ZIP)
3. Fermez les autres applications dans la mémoire gratuite, nécessitant au moins 2 g de mémoire libre
4. Run PianoTrans.exe in PianoTrans Directory
5. Choisissez des fichiers audio / vidéo, maintenez CTRL pour sélectionner plusieurs fichiers
6. Les fichiers MIDI de résultats sont dans le même répertoire que les fichiers d'entrée

Si vous souhaitez un menu de clic droit, exécutez RightClickMenuRegister.bat , vous pouvez sélectionner plusieurs fichiers audio / vidéo, cliquez avec le bouton droit et choisissez Piano Transcribe .

Pianotrans utilise automatiquement le GPU pour l'inférence, si vous rencontrez un problème, vous pouvez essayer PianoTrans-CPU.bat pour forcer l'utilisation de CPU.

Comment utiliser sur Linux / MacOS à l'aide de NIX

Remarque: Cet HowTo est pour Nix sur Linux / MacOS, si vous n'utilisez pas NIX, vous pouvez également suivre le guide d'installation et d'utilisation en amont pour Python PIP à la place.

1. Ouvrir le terminal
2. Installer et configurer NIX:

   sh <( curl -L https://nixos.org/nix/install ) --daemon
   mkdir -p ~ /.config/nix
   echo ' experimental-features = nix-command flakes ' > ~ /.config/nix/nix.conf

   Voir https://nixos.org/download.html pour plus de détails
3. Utilisez Nix pour installer des pianotrans:

   nix profile install github:azuwis/pianotrans

4. Exécutez pianotrans pour ouvrir l'interface graphique, choisissez des fichiers audio / vidéo, maintenez CTRL ( ⌘ pour macOS) pour sélectionner plusieurs fichiers

Pour l'utilisation de CLI, exécutez pianotrans file1 file2 ...

Pour mettre à niveau les pianotrans, exécutez:

$ nix profile list
0 github:azuwis/pianotrans#defaultPackage.aarch64-linux github:azuwis/pianotrans/e19d5fd12f4295816fad49f6398e2e53ed2d2b7a#defaultPackage.aarch64-linux /nix/store/zdalndvcralish8d43drzslv0p4pm97v-python3.9-pianotrans-0.2.1
# list nix profiles, `0` is pianotrans
$ nix --option tarball-ttl 1 profile upgrade 0
$ nix profile list
0 github:azuwis/pianotrans#defaultPackage.aarch64-linux github:azuwis/pianotrans/e944720dd0dfcc2b87dcc39c1fdaab086eba4ca6#defaultPackage.aarch64-linux /nix/store/rv5iikrdvc7jrc7mqs8mkc21qh2gklhx-python3.9-pianotrans-1.0
# pianotrans upgraded to v1.0

FAQ

Q: Pouvez-vous améliorer le résultat de la transcription?

R: Ce projet concerne l'emballage pour https://github.com/bytedance/piano_transcription, tant qu'il vous donne des fichiers MIDI, tous les autres problèmes sont hors de portée de ce projet.

Vous devez vous présenter au projet en amont ici https://github.com/bytedance/piano_transcription/issues

Changelog

[1.0.1] - 2023-02-09

• Ajouter --cli Option pour forcer la désactivation de l'interface graphique
• Retirez les filetypes Arg de AskOpenFilenames pour éviter un crash
• Mettez à jour Nix Flake et supprimez la superposition de l'inférence Mido / Soundfile / Torchlibrosa / Piano-Transcription, tous les correctifs acceptés dans NixPKGS, cela signifie que plus de dépendances peuvent être récupérées directement à partir du cache binaire Nix, moins de versions locales
• Ajouter un flux de travail de test GitHub

[1.0] - 2022-02-21

• Prise en charge de Linux / MacOS en utilisant NIX
• Toutes les plateformes:
  • Ajouter de la vraie GUI aux côtés de CLI
  • GUI Autoriser l'ajout de fichiers pour transcrire la file d'attente
• Windows:
  • Le menu de clic droit prend en charge plusieurs fichiers (Besoin de réécrire RightClickMenuRegister.bat )
  • Mettez à jour Pytorch à 1.10.2

[0.2.1] - 2021-12-23

• Mettez à jour Pytorch à 1.10.1.
• Mettre à jour l'inférence du piano-transcription à 0,0,5

[0.2] - 2021-09-27

• Mettez à jour Pytorch à 1.9.1.
• Ajouter des pianotrans-cpu.bat pour forcer l'utilisation du processeur pour l'inférence.

[0.1] - 2021-02-02

• Libération initiale.

Citer

[1] Qiuqiang Kong, Bochen Li, Xuchen Song, Yuan Wan et Yuxuan Wang. "Transcription de piano à haute résolution avec pédales en régressant les temps et les temps de décalage." ARXIV Préprint Arxiv: 2010.01815 (2020). [PDF]