python bm25

BM25 für das Dokumentenranking

Dieses Projekt implementiert den in diesem Papier beschriebenen BM25 -Algorithmus, um Dokumente nach Relevanz zu bewerten.

Installation

Stellen Sie sicher, dass Sie das Skript setup.sh ausführen. Es wird alle erforderlichen Abhängigkeiten installiert.

Ausführen der Probe

Verwenden Sie python sample.py , um es in Aktion zu sehen. Es mag einige Zeit dauern, aber schließlich wird es in die Konsole abgerufene Dokumente, die der Abfrage entsprechen, nach Relevanz abgerufen werden.

Bekannte Probleme

Diese Implementierung ist am besten für kleine Datensätze geeignet, da ihnen der invertierte Index fehlt, der für die schnelle Abfrage in großen Datensätzen erforderlich ist

Alternativen

https://github.com/nhirakawa/bm25