ดาวน์โหลด SanskritShala - SanskritShala ซอร์สโค้ดดาวน์โหลดดาวน์โหลด

SanskritShala

ข้อมูลเว็บไซต์

1.0.0

ดาวน์โหลด

Sanskritshala: ชุดเครื่องมือ Sanskrit NLP NLP

รหัสอย่างเป็นทางการสำหรับกระดาษ "Sanskritshala: ชุดเครื่องมือ NLP ภาษาสันสกฤต Neural พร้อมอินเทอร์เฟซบนเว็บเพื่อจุดประสงค์ในการสอนและคำอธิบายประกอบ" หากคุณใช้รหัสนี้โปรดอ้างอิงกระดาษของเรา

เครื่องมือบนเว็บ

คุณสามารถโต้ตอบกับแพลตฟอร์มบนเว็บของ Sanskritshala: Link เราขอแนะนำให้คุณตรวจสอบวิดีโอสาธิตของเราเพื่อทำความคุ้นเคยกับแพลตฟอร์มของเรา

โมดูลประสาทของภาษาสันสกฤตชาลาสำหรับงาน 4 NLP

คุณอาจพบรายละเอียดเพิ่มเติมของรหัสฐานในโฟลเดอร์ Neural Modules สำหรับการแยกคำว่าการติดแท็กทางสัณฐานวิทยาการแยกวิเคราะห์ depedency และงานการระบุประเภทสารประกอบ

ปรับใช้ภาษาสันสกฤตบนเครื่องในพื้นที่ของคุณ

ก่อนอื่นคุณต้องติดตั้งแต่ละโมดูลบนเครื่องของคุณตามคำแนะนำในส่วนด้านบน คุณไม่จำเป็นต้องมี GPU ใน Oder เพื่อให้ระบบที่ผ่านการฝึกอบรมเหล่านี้ทำงานบนเครื่องในท้องถิ่นของคุณ คุณอาจพบรายละเอียดเพิ่มเติมเกี่ยวกับวิธีการปรับใช้ชุดเครื่องมือบนเครื่องในเครื่องของคุณในโฟลเดอร์ SanShala-Web

Evalsan: ชุดเครื่องมือประเมินผลสำหรับการฝังของสันสกฤต

Saneval เป็นชุดเครื่องมือสำหรับการประเมินคุณภาพของการฝังภาษาสันสกฤต เราประเมินพลังการวางนัยทั่วไปของพวกเขาโดยใช้พวกเขาเป็นคุณสมบัติในชุดงานที่กว้างและหลากหลาย เรารวมชุดของ 4 งานที่แท้จริง ซึ่งประเมินเกี่ยวกับคุณสมบัติทางภาษาที่เข้ารหัสในการฝังคำ เป้าหมายของเราคือการผ่อนคลายการศึกษาและการพัฒนาการเป็นตัวแทนคำขนาดคงที่ขนาดคงที่สำหรับภาษาสันสกฤต คุณอาจพบรายละเอียดเพิ่มเติมของรหัสฐานในโฟลเดอร์ EvalSan

งานประเมินผล

งานที่แท้จริง

Saneval รวมถึงชุดของงาน ที่แท้จริง เพื่อประเมินคุณสมบัติทางภาษาที่เข้ารหัสในการฝังคำของคุณ
เราใช้ SLP1 รูปแบบการถอดรหัสสำหรับข้อมูลของเรา คุณสามารถเปลี่ยนเป็นโครงการอื่นโดยใช้รหัสนี้

งาน	ตัวชี้วัด	#DEV	#ทดสอบ
ความเกี่ยวข้อง	คะแนน F	4.5k	9K
ความคล้ายคลึงกัน	ความแม่นยำ	นา	3K
การจัดหมวดหมู่วากยสัมพันธ์	ความบริสุทธิ์	นา	1.1k
การจัดหมวดหมู่ความหมาย	ความบริสุทธิ์	นา	150
การเปรียบเทียบทางวากยสัมพันธ์	ความแม่นยำ	นา	10k
เปรียบเทียบความหมาย	ความแม่นยำ	นา	6.4K

การฝังคำศัพท์ที่ผ่านมาก่อน

คุณสามารถดาวน์โหลดรุ่นที่ผ่านการฝึกอบรมได้จากลิงค์นี้ README.md มอบให้สำหรับแต่ละรุ่น
วางโฟลเดอร์ models ในเส้นทางไดเรกทอรีหลัก
เวกเตอร์ที่ผ่านการฝึกอบรมสามารถดาวน์โหลดได้จากลิงค์นี้ วางโฟลเดอร์นี้ใน EvalSan/evaluations/Intrinsic/ Path เวกเตอร์นี้ใช้ในสคริปต์การประเมินผล
LCM pretraining ที่เสนอของเรามีอยู่ที่โฟลเดอร์ EvalSan/LCM สำหรับรายละเอียดเพิ่มเติมกรุณาเยี่ยมชมลิงค์นี้

การอ้างอิง

หากคุณใช้เครื่องมือของเราเราจะขอบคุณถ้าคุณอ้างอิงกระดาษของเรา:

 @misc{Sandhan_SanskritShala,
  doi = {10.48550/ARXIV.2302.09527},
  url = {https://arxiv.org/abs/2302.09527},
  author = {Sandhan, Jivnesh and Agarwal, Anshul and Behera, Laxmidhar and Sandhan, Tushar and Goyal, Pawan},
  keywords = {Computation and Language (cs.CL), FOS: Computer and information sciences, FOS: Computer and information sciences},
  title = {SanskritShala: A Neural Sanskrit NLP Toolkit with Web-Based Interface for Pedagogical and Annotation Purposes},
  publisher = {arXiv},
  year = {2023},
  copyright = {Creative Commons Attribution 4.0 International}
}