Les modèles de langue et les intérêts des mots utilisés aujourd'hui ont utilisé d'énormes quantités de données de biais non marquées pour leur phase de formation respective , qui a été augmentée par le mécanisme d'attention des nouveaux transformateurs en tant que nouvelle technique d'apprentissage non supervisée.
Avec tous ces échantillons d'entraînement, il y a forcément des échantillons biaisés qui affectent les résultats des systèmes résultants.
Parfois, nous devons prendre des décisions biaisées avec nos systèmes, mais il est également agréable de connaître le biais de notre modèle.
Bisexploration4j permet une exploration de l'intégration des mots et une mesure de la tendance du modèle de langage basé sur Bert, ce dernier basé sur (Nangia et al., 2020), pour explorer différents biais dans le système donné.
Cet outil est composé par différentes classes qui vise à évaluer certains aspects du biais afin que vous puissiez l'instatier où vous le souhaitez.
# Clone the repository
git clone https://github.com/LMartinezEXEX/BiasExploration4J.git
# Change CWD inside the cloned repository
cd BiasExploration4J
# For use as a dependency from other projects
mvn clean installConsultez nos pages wiki où vous trouverez des informations, des notes et des conseils sur la façon d'utiliser BisexPloration4J , les définitions des concepts de base et certaines limitations à garder à l'esprit lors de l'exploration du biais dans vos données, ainsi que des exemples pour vous aider à mieux y internaliser.
Ce projet est sous une licence MIT.