หน้าแรก>การเขียนโปรแกรมที่เกี่ยวข้อง>ซอร์สโค้ดอื่น ๆ
ดาวน์โหลด
การค้นหาอัลกุรอาน

การค้นหาคำศัพท์/ความหมายของคัมภีร์อัลกุรอาน

เว็บแอปพลิเคชันที่ใช้การเรียนรู้ของเครื่องจักรในการดึงข้อมูลจากอัลกุรอานโดยใช้ NLP

สารบัญ

  • เกี่ยวกับโครงการ
    • ภาพหน้าจอ
    • การค้นหาอัลกุรอานคืออะไร
    • ทำไมต้องค้นหาอัลกุรอาน
      • ปัญหาเกี่ยวกับการค้นหาคำศัพท์แบบดั้งเดิม
      • โซลูชันด้วยการค้นหาความหมาย
      • คุณสมบัติ
    • การค้นหาอัลกุรอานทำงานอย่างไร
    • ซ้อนเทคและเครื่องมือ
  • โครงสร้างไดเรกทอรีซอร์สโค้ด
  • เริ่มต้น
    • ข้อกำหนดเบื้องต้น
    • ดำเนินการเพื่อการพัฒนา
  • ใบอนุญาต

- เกี่ยวกับโครงการ

การดึงข้อมูลจากอัลกุรอานเป็นสาขาที่สำคัญสำหรับนักวิชาการอัลกุรอานนักวิจัยมุสลิมและผู้ที่ชื่นชอบภาษาอาหรับโดยทั่วไป มีเทคนิคการค้นหาคัมภีร์อัลกุรอานสองประเภท: คำศัพท์หรือคำหลักและความหมายหรือแนวคิดที่ใช้เป็นงานที่ท้าทายโดยเฉพาะอย่างยิ่งในคลังข้อมูลที่ซับซ้อนเช่นอัลกุรอาน Quranic Search หมายถึงคำศัพท์และความหมายในอัลกุรอาน

- ภาพหน้าจอ

บ้านผลลัพธ์

- การค้นหาอัลกุรอานคืออะไร

การค้นหาอัลกุรอานได้รับการพัฒนาขึ้นเพื่อช่วยเหลือทุกคนโดยเฉพาะชาวมุสลิมในการจัดการกับอัลกุรอานที่ง่ายขึ้นและเร็วขึ้นทำให้พวกเขาสามารถค้นหาในคัมภีร์อัลกุรอานสำหรับโองการที่เฉพาะเจาะจงโดยคำหลักหรือหัวข้อแนวคิด

- ทำไมต้องค้นหาอัลกุรอาน

อัลกุรอานได้รับการพิจารณาว่าเป็นการอ้างอิงหลักถึงชาวมุสลิมประมาณ 1.6 พันล้านคนทั่วโลกและเป็นทรัพยากรชั้นนำสำหรับภาษาอาหรับคลาสสิก ชาวมุสลิมเช่นเดียวกับผู้ที่ไม่ใช่มุสลิมจำเป็นต้องค้นหาข้อมูลบางอย่างจากอัลกุรอานหรือดึงข้อที่พูดถึงหัวข้อเฉพาะมีหัวข้อต่าง ๆ เพื่อพูดคุยเช่น; จริยธรรมกฎหมายอิสลามกฎหมายสมรสและครอบครัวการทำธุรกรรมทางการเงินศีลธรรมและความสัมพันธ์ระหว่างศาสนาอิสลาม/มุสลิมและศาสนาโลกอื่น ๆ

- ปัญหาเกี่ยวกับการค้นหาคำศัพท์แบบดั้งเดิม

  • ผลลัพธ์ที่ไม่สมบูรณ์โดยใช้คำสำคัญ
  • การค้นหาคำศัพท์ไม่ได้ขึ้นอยู่กับความหมายของข้อความค้นหา

- โซลูชันด้วยการค้นหาความหมาย

  • ข้อที่เกี่ยวข้องตามความหมายปรับปรุงความแม่นยำของการค้นหา
  • การจัดอันดับที่ดีที่สุดของข้อที่คล้ายกันมากที่สุดโดยขึ้นอยู่กับการเป็นตัวแทนการฝังคำ

- คุณสมบัติ

  • การประมวลผลภาษาธรรมชาติตาม
  • การแสดงผลลัพธ์ 50 รายการแรกตามการจัดอันดับที่ดีที่สุด
  • การใช้โมเดล Word2vec ที่ผ่านการฝึกอบรมมาล่วงหน้าที่ดีที่สุด
  • การสร้างแบบจำลองการฝังประโยคตาม Word2vec (สถาปัตยกรรม CBOW)
  • ใช้วิธีการต่าง ๆ เพื่อแสดงเวกเตอร์ประโยค
    • คะแนนความคล้ายคลึงกันสูงสุดระหว่างสองคำ (คำในแบบสอบถามและคำในข้อ)
    • คะแนนความถี่สูงสุดของความคล้ายคลึงกันเฉพาะ (0.3) ระหว่างสองคำ
    • คะแนนความคล้ายคลึงกันโดยเฉลี่ยระหว่างสองคำ
    • การรวม; การรวมสูงสุดและการรวมกลุ่มโดยเฉลี่ย
  • การประมวลผลล่วงหน้าของการสืบค้นจะดำเนินการตามการประมวลผลล่วงหน้าของการฝึกอบรมของแบบจำลองเพื่อค้นหาการเปรียบเทียบที่ดีที่สุดของเวกเตอร์
  • ทำงานก่อนในระดับคำเดียว
    • จากนั้นเราก็วนซ้ำตลอดทั้งการสืบค้นและประโยคเพิ่มคำศัพท์ทั้งหมดด้วยผลลัพธ์โดยรวมผลลัพธ์ของวิธีการสำหรับทุกสองคำ (ในแบบสอบถามและข้อ) เพื่อเปรียบเทียบกับเอกสารทั้งหมดของข้อความอัลกุรอาน
  • การรวมวิธีการผลลัพธ์และแบบจำลองเพื่อให้ได้ผลลัพธ์ที่ดีที่สุด
  • เร็วด้วยต้นทุนต่ำซึ่งแตกต่างจากการใช้หม้อแปลง
  • โอเพ่นซอร์ส

- การค้นหาอัลกุรอานทำงานอย่างไร

เมื่อคุณทำการค้นหาคำศัพท์:

  • คำศัพท์การค้นหา Django API โต้ตอบกับ React UI
  • โองการจะถูกดึงขึ้นอยู่กับลำดับของคำหลักโดยใช้คำศัพท์ API การค้นหาคำศัพท์
  • ข้อพระคัมภีร์จะแสดงในหน้าผลลัพธ์โดยการทำพจนานุกรมด้วยหมายเลข Surah และหมายเลขข้อใน Surah

เมื่อคุณทำการค้นหาความหมาย:

  • API Search Search Semantic โต้ตอบกับ UI
  • โองการรหัสจะถูกดึงขึ้นอยู่กับความหมาย/หัวข้อของคำโดยใช้ API การค้นหาแบบ semantic
  • ชุดของโมเดลที่ผ่านการฝึกอบรมมาล่วงหน้า Word2vec ใช้เพื่อรับคำว่าเวกเตอร์คำของคำและข้อความค้นหา
  • การประมวลผลเวกเตอร์ประโยคทำได้โดยใช้วิธีการหลายวิธี
    • การรวมผลลัพธ์ของวิธีการทั้งหมดโดยทุกรุ่น
  • โองการจะถูกดึงขึ้นอยู่กับคะแนนความคล้ายคลึงกันระหว่างการสืบค้นและข้อ
  • การคำนวณระยะทางตามความคล้ายคลึงกันของโคไซน์เพื่อดึงข้อที่คล้ายกันมากที่สุด
  • อุปกรณ์ประกอบฉากทั้งหมดถูกดึงมาจาก API การค้นหาคำศัพท์

ซ้อนเทคและเครื่องมือ

เครื่องมือที่ใช้ในโครงการนี้

เครื่องมือ คำอธิบาย
รหัสสตูดิโอภาพ ความผิด
react.js กรอบส่วนหน้า
Django Framework การค้นหาคำศัพท์
ขวด Semantic Search API Backend Framework
เครื่องถ่อมตัว การสร้างแบบจำลองหัวข้อ (Word2vec, keyedvectors)
sqlite3 สำหรับฐานข้อมูลอัลกุรอาน

- โครงสร้างไดเรกทอรีซอร์สโค้ด 

quranic-search-v2
├── README.md                                   < - This top-level README for this project
├── LICENSE
├── assets
│   ├── screenshots                             < - Screenshots from the project
│   └── tools                                   < - Used tools in the project
├── backend                                     
│   ├── api
│   │   ├── lexical
│   │   │   ├── api/                            < - Lexical Django project with settings
│   │   │   ├── db/                             < - Used databases in the project
│   │   │   ├── search/                         < - Search application (static, templates, models, serializers, urls, views, tests, ..etc) 
│   │   │   ├── db.sqlite3                      < - Migrated database
│   │   │   ├── manage.py                       < - A command-line utility to interact with this Django project 
│   │   │   └── requirements.txt                < - All needed for installing the lexical search API
│   │   └── semantic
│   │       ├── data                    
│   │       │   ├── external/                   < - Data from third-party sources
│   │       │   └── processed/                  < - The final, canonical data sets for modeling
│   │       ├── models/                         < - Trained and serialized models, model predictions, or model summaries
│   │       ├── notebooks/                      < - All Jupyter notebooks
│   │       ├── src                             < - Source code for use in this project
│   │       │   ├── __init__.py                 < - Makes src a Python module
│   │       │   └── models                      < - Scripts to train models and then use trained models to make predictions
│   │       │       ├── pooling.py              < - Pooling algorithms for sentence embeddings
│   │       │       ├── predict.py              < - Resources of the semantic search API
│   │       │       ├── preprocess.py           < - The frequent preprocessing methods 
│   │       │       └── semantic_methods.py     < - The semantic (word/sentence) search methods
│   │       ├── app.py                          < - The Flask application (entry point)
│   │       └── requirements.txt                < - All needed for installing the semantic search API
│   └── run.sh                                  < - Bootstrapping script to run the APIs
├── frontend
│   ├── node_modules                            < - Node.js modules
│   ├── public                                  
│   │   ├── fonts                               < - Fonts used in the project
│   │   │   ├── amiri/ 
│   │   │   └── kufi/ 
│   │   ├── images
│   │   │   └── quran-logo.png 
│   │   ├── 404.html 
│   │   ├── index.html 
│   │   ├── manifest.json
│   │   └── robots.txt  
│   ├── src
│   │   ├── components                          < - React components
│   │   │   ├── HomeForm  
│   │   │   │   ├── HomeForm.css  
│   │   │   │   └── HomeForm.js  
│   │   │   ├── Navbar/
│   │   │   ├── ResultsForm/
│   │   │   └── Verse/
│   │   ├── containers                          < - React containers/pages
│   │   │   ├── About
│   │   │   │   ├── About.css  
│   │   │   │   └── About.js  
│   │   │   ├── Bookmarks/
│   │   │   ├── Home/
│   │   │   └── Results/
│   │   ├── App.css                             < - CSS for the application
│   │   ├── App.js                              < - The application file
│   │   ├── App.test.js                         < - The application file for testing
│   │   ├── index.css                           < - CSS for the root (entire application)
│   │   ├── index.js                            < - The root application file
│   │   ├── reportWebVitals.js                  < - WebVitals reporting script
│   │   └── setupTests.js                       < - Setup script for testing
│   ├── package-lock.json                       < - Used to install dependencies
│   └── package.json                            < - Used to install dependencies
├── .github  
│   └── workflows                               < - GitHub Actions workflows
│       ├── django.yml
│       └── node.js.yml
└── .gitignore

? ‍♂ เริ่มต้น

- ข้อกำหนดเบื้องต้น

โครงการนี้ใช้โมเดลที่ผ่านการฝึกอบรมมาหลายแบบนอกเหนือจากข้อกำหนดในการรัน (แบ็กเอนด์/ส่วนหน้า) คุณสามารถเริ่มต้นด้วยการใช้สคริปต์ Helper เพื่อดาวน์โหลดรุ่นแสงและติดตั้งข้อกำหนดทั้งหมดก่อนที่จะทำงาน: 

sh scripts/start.sh

- ดำเนินการเพื่อการพัฒนา

  • โคลนที่เก็บนี้ 
git clone https://github.com/ahr9n/quranic-search-v2.git
cd quranic-search-v2

- คำสั่งทั้งหมดจะต้องดำเนินการในรูทของโครงการ

  • เรียกใช้บริการทั้งหมด (Lexical API, Semantic API, จากนั้น Frontend) 
sh scripts/run.sh
  • ไปที่ http://localhost:3000

- ตอนนี้คุณไปได้ดี!

- โปรดสังเกตว่าเซิร์ฟเวอร์ทั้งหมดจะทำงานในพื้นหลังโดยใช้สคริปต์ดังนั้นคุณสามารถปิดได้ทั้งหมดโดยใช้คำสั่งต่อไปนี้: 

sh scripts/down.sh

- ผู้มีส่วนร่วม


Omar Shamkh

Ahmad Almaghraby

Ahmad Abdulrahman

abd el-twab M. Fakhry

Ahmad Ateya

ใบอนุญาต

ได้รับใบอนุญาตภายใต้ใบอนุญาต GPL-V3

ขยาย
ข้อมูลเพิ่มเติม
แอปที่เกี่ยวข้อง
แนะนำสำหรับคุณ
ข้อมูลที่เกี่ยวข้อง ทั้งหมด