الصفحة الرئيسية>المتعلقة بالبرمجة>شفرة المصدر الأخرى
تنزيل

Spaghettisearch: محرك بحث متزامن

محرك بحث كامل الأداء مبني على قمة Golang لتلبية متطلبات HKUST COMP4321. تم تصميمه باستخدام Golang كواجهة خلفية لها ، وتفاعل كواجهة الأمامية.

عرض حي

http://spaghetti-search.herokuapp.com/

سمات

  • تم تنفيذ Pagerank الحساسة للموضوع (Th Haveliwala ، 2003) مع استخدام الاستعلام كسياق معين ، وينعكس اهتمام المستخدم بالتساوي في كل موضوع.
  • مزيج من طراز Pagerank ونماذج الفضاء المتجه لترتيب النتيجة
  • تم اقتراح نص مرساة و metatags المقترحة على ورقة Google لزيادة الدقة والفهرس المزيد من صفحات الويب
  • استفد من نمط التزامن المولد والمستقبل والمروحة في جولانج لزيادة أداء الاسترجاع
  • استرجاع ملخص الوثيقة الديناميكية
  • استخدم BadgerDB كقاعدة بيانات محسّنة لـ SSD
  • دعم البحث عن قائمة الكلمات الرئيسية وبحث العبارات (استخدم عروض أسعار مزدوجة للبحث في العبارة)

الإعداد والتركيب

الخلفية

  • تثبيت Golang من هنا 
$ sudo tar -C /usr/local -xzf go $VERSION . $OS - $ARCH .tar.gz
$ export PATH= $PATH :/usr/local/go/bin
  • قم بتنزيل هذا الريبو باستخدام go get 
 $ go get github.com/nwihardjo/SpaghettiSearch

الواجهة

  • تثبيت العقدة و NPM من هنا
  • تم تحميل البناء. لا حاجة لتثبيت العقدة للحصول على هذا التشغيل.

التبعيات

يتم استخدام dep كإدارة الحزمة لضمان أن التبعيات المثبتة هي الإصدار الصحيح من البائع الصحيح. RUN dep ensure من جذر المشروع لتثبيت الحزم المطلوبة ، أو تشغيل go get ./... إلى نفس الشيء.

مبنى

  • تشغيل make في دليل جذر المشروع. سيقوم بتثبيت الحزم الثنائية اللازمة إلى bin/ directory ، وكذلك التثبيت reparedcies
  • قم بتشغيل الزاحف وحدد الوسيطة المطلوبة على النحو التالي ، ثم قم بتدوير الخادم. تم دمج الخادم الخلفي والرد ، بحيث يلزم بدء خادم واحد فقط من Golang. 
$ ./bin/start_crawl [-numPages =< number of pages to be crawled > ] [-startURL =< starting entry point for the crawler to crawl>] [-domainOnly=<whether webpages to be crawled only in the domain of given starting URL)]
$ ./bin/server
  • توجه إلى متصفحك ، وانتقل إلى localhost:8080 . يتم استضافة الخادم على المنفذ 8080 ، أو تحقق من إخراج المحطة الخاصة بك.

مساهم

  • ناثانيل ويهارجو
  • أنجليكا كوساسيه
  • بترا غابرييلا
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل