Ein interaktives Visualisierungssystem, mit dem NLP-Forscher und -Praktiker helfen sollen, Aufmerksamkeitsgewichte in transformatorbasierten Modellen mit sprachlichem Wissen zu analysieren und zu vergleichen.
Weitere Informationen finden Sie in unserem Manuskript:
Dodrio: Erforschung von Transformatormodellen mit interaktiver Visualisierung . Zijie J. Wang, Robert Turko und Duen Horng Chau. Arxiv Preprint 2021. ARXIV: 2103.14625.
Für eine Live -Demo besuchen Sie: http://poloclub.github.io/dodrio/
Klonen oder herunterladen dieses Repository:
git clone [email protected]:poloclub/dodrio.git
# use degit if you don't want to download commit histories
degit poloclub/dodrioInstallieren Sie die Abhängigkeiten:
npm installDann führen Sie Dodrio aus:
npm run devNavigieren Sie zu Localhost: 5000. Du solltest Dodrio in deinem Broswer laufen sehen :)
Um zu sehen, wie wir den Transformator trainiert haben oder die Visualisierung mit einem anderen Modell oder Datensatz anpassen, besuchen Sie das ./data-generation/ .
Dodrio wurde von Jay Wang, Robert Turko und Polo Chau geschaffen.
@inproceedings { wangDodrioExploringTransformer2021 ,
title = { Dodrio: {{Exploring Transformer Models}} with {{Interactive Visualization}} } ,
shorttitle = { Dodrio } ,
booktitle = { Proceedings of the 59th {{Annual Meeting}} of the {{Association}} for {{Computational Linguistics}} and the 11th {{International Joint Conference}} on {{Natural Language Processing}}: {{System Demonstrations}} } ,
author = { Wang, Zijie J. and Turko, Robert and Chau, Duen Horng } ,
year = { 2021 } ,
pages = { 132--141 } ,
publisher = { {Association for Computational Linguistics} } ,
address = { {Online} } ,
language = { en }
}Die Software ist unter der MIT -Lizenz verfügbar.
Wenn Sie Fragen haben, können Sie ein Problem öffnen oder Jay Wang wenden.