تنزيل simple search engine - تنزيل رمز مصدر simple search engine

simple search engine

شفرة المصدر الأخرى

1.0.0

تنزيل

محرك بحث بسيط مع بيثون 3

سيقوم هذا المشروع المصغر بتنفيذ محرك بحث بسيط باستخدام نموذج مساحة Vector. سيتم زحف البيانات من الأخبار اليومية الفيتنامية مثل Vnexpress و Vietnamnet و Therhnien و Laodong.

أدوات

تثبيت Python 3.5+ و PIP إذا لم يتم تثبيته.
استخدم pip لتثبيت الحزم التالية:
- requests (لاتخاذ طلبات HTTP).
- underthesea (مجموعة أدوات NLP الفيتنامية).
- beautifulsoup4 (لتحليل HTML و XML).
```
$ pip install requests underthesea beautifulsoup4
```
(اختياري) تثبيت pytest لتشغيل اختبارات الوحدة:
```
$ pip install pytest
$ cd /path/to/project
$ pytest
```
قم بتثبيت Git واستنساخ هذا المشروع في الجهاز المحلي:
```
$ git clone https://github.com/vancanhuit/simple-search-engine.git
$ cd simple-search-engine
```
ملاحظة: إذا قمت بتشغيل هذا المشروع على Windows ، فيجب عليك الخروج إلى windows Branch. ويرجع ذلك إلى مشكلات منصة من طبة برمجية في وحدة الرفى في بيثون (انظر هذه المشكلة):
```
$ git checkout windows
```

الاستخدام

قم بتشغيل البرنامج النصي index.py لتنفيذ بيانات الفهرسة. سيتم إنشاء البيانات المفهرسة (إن لم تكن موجودة) أو تحديثها وتخزينها في db/ Directory.
```
$ python index.py
```

قم بتشغيل search.py Script وقم بتمرير سلسلة استعلام لذلك.

$ python search.py " Your query string here "

على سبيل المثال:

$ python search.py " Trump Trieu Tien "
https://vnexpress.net/tin-tuc/the-gioi/trump-noi-cuoc-gap-voi-kim-jong-un-van-co-the-dien-ra-vao-12-6-3754763.html - 0.32331036424704196
https://vnexpress.net/tin-tuc/the-gioi/trump-huy-cuoc-gap-voi-lanh-dao-trieu-tien-3754245.html - 0.3158077661308892
https://vnexpress.net/tin-tuc/the-gioi/trump-thuc-giuc-trung-quoc-that-chat-bien-gioi-voi-trieu-tien-3752746.html - 0.3017484484730665
https://vnexpress.net/tin-tuc/the-gioi/abe-noi-se-gap-trump-truoc-cuoc-hop-thuong-dinh-my-trieu-3755808.html - 0.30059730510834515
http://vietnamnet.vn/vn/the-gioi/binh-luan-quoc-te/nhung-nga-re-chop-nhoang-kho-luong-cua-thuong-dinh-trump-kim-453759.html - 0.2990576238183994
https://vnexpress.net/tin-tuc/the-gioi/ngoai-truong-my-giai-thich-ly-do-cuoc-gap-trump-kim-bi-huy-3754252.html - 0.2807074203562179
https://vnexpress.net/tin-tuc/the-gioi/han-quoc-hop-khan-sau-khi-trump-tuyen-bo-huy-gap-kim-jong-un-3754256.html - 0.24340889391647347
https://vnexpress.net/tin-tuc/the-gioi/my-canh-bao-trieu-tien-co-the-chiu-chung-so-phan-nhu-libya-3753226.html - 0.24232103427164864
...