BiasExploration4J

Biasexploration4j

Keterangan

Model bahasa dan embedding kata yang digunakan saat ini memanfaatkan sejumlah besar data bias yang tidak berlabel untuk fase pelatihan masing -masing , yang ditingkatkan dengan mekanisme perhatian transformator baru sebagai teknik pembelajaran baru tanpa pengawasan.

Dengan semua sampel pelatihan ini, pasti ada sampel bias yang mempengaruhi hasil sistem yang dihasilkan.

Terkadang kita harus membuat keputusan yang bias dengan sistem kita, tetapi juga menyenangkan untuk mengetahui bias dalam model kita.

Biasexploration4j memungkinkan eksplorasi penyembatan kata dan pengukuran kecenderungan model bahasa berbasis Bert, yang terakhir berdasarkan (Nangia et al., 2020), untuk mengeksplorasi bias yang berbeda dalam sistem yang diberikan.

Unduh dan gunakan

Alat ini disusun oleh kelas yang berbeda yang bertujuan untuk mengevaluasi beberapa aspek bias sehingga Anda dapat mendatanginya di mana pun Anda suka.

 # Clone the repository
git clone https://github.com/LMartinezEXEX/BiasExploration4J.git

# Change CWD inside the cloned repository
cd BiasExploration4J

# For use as a dependency from other projects
mvn clean install

Cara menggunakan dan dokumentasi

Lihatlah halaman wiki kami di mana Anda akan menemukan informasi, catatan, dan tip tentang cara menggunakan biasexploration4j , definisi konsep inti, dan batasan tertentu yang perlu diingat ketika menjelajahi bias dalam data Anda, serta contoh untuk membantu Anda menginternalisasi semuanya dengan lebih baik.

Informasi lisensi

Proyek ini berada di bawah lisensi MIT.