pianotrans

GUI simples para a transcrição de piano de Bytedance com pedais

A transcrição de piano de Bytedance é a implementação de Pytorch do sistema de transcrição de piano, "transcrição de piano de alta resolução com pedais regredindo o onsets e compensações [1] ".

Usando isso, podemos transcrever gravações de piano para arquivos MIDI com pedais.

Esta é uma GUI simples e embalagem para Windows e Nix no Linux/MacOS.

Exigência

• OS: Windows 7 ou posterior (64 bits), Linux, MacOS (Intel/M1)
• Memória: pelo menos 4g

Somente o Windows 10, o Debian Linux 10 e o MacOS 12.1 M1 são testados.

Como usar no Windows

1. Baixe o Microsoft Visual C ++ Redistribuível para Visual Studio 2015, 2017 e 2019 vc_redist_x64.exe e instale
2. Faça o download e descompacte pianotrans-v1.0.7z (download de 1,5 GB, descompacte usando 7zip)
3. Feche outros aplicativos para a memória livre, precisa de pelo menos 2G de memória livre
4. Executar PianoTrans.exe no diretório PianoTrans
5. Escolha arquivos de áudio/vídeo, segure CTRL para selecionar vários arquivos
6. Resultado Os arquivos MIDI estão no mesmo diretório que os arquivos de entrada

Se você deseja clicar com o botão direito do mouse, execute Piano Transcribe RightClickMenuRegister.bat .

O Pianotrans usa automaticamente a GPU para inferência, se você encontrar algum problema, poderá experimentar PianoTrans-CPU.bat para forçar o uso da CPU.

Como usar no Linux/MacOS usando Nix

Nota: Este é o NIX no Linux/MacOS, se você não usar o NIX, também poderá seguir o guia de instalação e uso a montante para Python Pip.

1. Abra o terminal
2. Instale e configure nix:

   sh <( curl -L https://nixos.org/nix/install ) --daemon
   mkdir -p ~ /.config/nix
   echo ' experimental-features = nix-command flakes ' > ~ /.config/nix/nix.conf

   Consulte https://nixos.org/download.html para obter mais detalhes
3. Use o Nix para instalar Pianotrans:

   nix profile install github:azuwis/pianotrans

4. Execute pianotrans para abrir a GUI, escolha arquivos de áudio/vídeo, segure CTRL ( ⌘ para macOS) para selecionar vários arquivos

Para uso da CLI, execute pianotrans file1 file2 ...

Para atualizar pianotrans, corra:

$ nix profile list
0 github:azuwis/pianotrans#defaultPackage.aarch64-linux github:azuwis/pianotrans/e19d5fd12f4295816fad49f6398e2e53ed2d2b7a#defaultPackage.aarch64-linux /nix/store/zdalndvcralish8d43drzslv0p4pm97v-python3.9-pianotrans-0.2.1
# list nix profiles, `0` is pianotrans
$ nix --option tarball-ttl 1 profile upgrade 0
$ nix profile list
0 github:azuwis/pianotrans#defaultPackage.aarch64-linux github:azuwis/pianotrans/e944720dd0dfcc2b87dcc39c1fdaab086eba4ca6#defaultPackage.aarch64-linux /nix/store/rv5iikrdvc7jrc7mqs8mkc21qh2gklhx-python3.9-pianotrans-1.0
# pianotrans upgraded to v1.0

Perguntas frequentes

P: Você pode melhorar o resultado da transcrição?

R: Este projeto trata de embalagem para https://github.com/bytedance/piano_transcription, desde que ofereça arquivos MIDI, todos os outros problemas estão fora do escopo deste projeto.

Você deve se reportar ao projeto upstream aqui https://github.com/bytedance/piano_transcription/issues

Changelog

[1.0.1]-2023-02-09

• Adicionar --cli opção para forçar a desativação da GUI
• Remova os arquivos Arg de AskopenFileNames para evitar falhas
• Atualize o Nix Flake e remova a sobreposição de inferência de minuto/arquivo de som/torchlibrosa/piano-transcrição, todos os patches aceitos em nixpkgs, isso significa que mais dependências podem ser buscadas diretamente do cache binário nix, menos construções locais
• Adicionar fluxo de trabalho de teste do GitHub

[1.0]-2022-02-21

• Suporte Linux/MacOS usando Nix
• Todas as plataformas:
  • Adicione GUI real ao lado da CLI
  • GUI permitem adicionar arquivos para transcrever a fila
• Windows:
  • Clique com o botão direito do mouse, o menu suporta vários arquivos (precisa re-executar RightClickMenuRegister.bat )
  • Atualize o Pytorch para 1.10.2

[0.2.1]-2021-12-23

• Atualize o Pytorch para 1.10.1.
• Atualize a Inferência de Piano-Transcrição para 0,0.5

[0.2]-2021-09-27

• Atualize o Pytorch para 1.9.1.
• Adicione pianotrans-cpu.bat para forçar o uso da CPU para inferência.

[0.1]-2021-02-02

• Liberação inicial.

Citar

[1] Qiuqiang Kong, Bochen Li, Xuchen Song, Yuan Wan e Yuxuan Wang. "Transcrição de piano de alta resolução com pedais, regredindo o Onsets and Ofsets Times". Arxiv pré -impressão Arxiv: 2010.01815 (2020). [PDF]