الصفحة الرئيسية>المتعلقة بالبرمجة>شفرة المصدر الأخرى
تنزيل

ReadMe

سمات

  • يستخدم نموذج LSI للبحث عن جمل مماثلة
  • يتم تحديث الفهرس في الخلفية بواسطة عامل منفصل
  • يتم تحديث الفهرس على كل إضافة نصية جديدة
  • التخزين المؤقت القوي على جانب العميل
  • GraphQL API
  • إذا تم تصميم صور Docker Tests تلقائيًا عن طريق إجراء GithHub وتم تحميله على Docker Hub

القيود

  • يتم تخزين الفهرس بأكمله في ذاكرة الوصول العشوائي ، لذلك لن ينجح هذا في مجموعات البيانات الكبيرة
  • حاليا يتم دعم مثيل واحد فقط من عامل الخلفية
  • يتم تحديث الفهرس على كل إضافة نصية جديدة ، لن يعمل هذا من أجل التحميل العالي (في سيناريو العالم الحقيقي ، سأقوم بتحديثه ، دعنا نقول كل 10 دقائق)

الهندسة المعمارية والمكدس

عميل

  • TypeScript / React
  • عميل Apollo للاستعلام عن GraphQL والتخزين المؤقت

الخادم

  • AIOHTTP كخادم HTTP
  • Tartiflette لـ GraphQL (يمكن العثور على المخطط هنا)
  • Mongo كما ديسيبل
  • Gensim لنموذج LSI
  • Spacy لتقسيم النص على الجمل
  • مؤشر MongoDB Tail and College for PubSub

جري

لتشغيل بناء الإنتاج جرب ما يلي. سيؤدي هذا إلى جلب الصور المدمجة من Docker Hub.

 Docker-cormpose

للتطوير (سيؤدي ذلك إلى بناء صور Docker من المصدر ، والتي قد تستغرق بعض الوقت):

 Docker-corm -f docker-corm.dev.yml up

متغيرات البيئة

الخادم

SIMTXT_DB_URI URI لقاعدة بيانات Mongo (افتراضي: mongodb://localhost:27017 )
SIMTXT_INDEX_MIN_SCORE إذا كانت درجة التشابه أكثر من هذه القيمة ، فإننا ندرج جملة على قائمة الجمل المماثلة (الافتراضي: 0.1 )
SIMTXT_LSI_NUM_TOPIC عدد الموضوعات لنموذج LSI (افتراضي: 100 )

إذا كان لديك مجموعة بيانات صغيرة ولا تحصل على أي جمل مماثلة ، فحاول تغيير SIMTXT_INDEX_MIN_SCORE إلى 0 ، على سبيل المثال SIMTXT_INDEX_MIN_SCORE=0 docker-compose up

عميل

REACT_APP_GRAPHQL_URI URI لـ GraphQL API (افتراضي: http://localhost:8080/graphql )

الاختبارات والاندماج

الخادم

 pytest
Pylint Simtxt
mypy simtxt

عميل

 اختبار الغزل -watchall = خطأ
NPX ESLINT SRC
يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل