coresearch

Corsearch

.NET CORE CORE PLATFORM, IN MEMORY, Volltext-Suchbibliothek zum Erstellen von Suchmaschinen

Um

CoreSearch verwendet einen umgekehrten Index mit einer gesteigerten Trie -Datenstruktur zum Indizieren von Atom -Suchkriterien von Inhalten zu Ressourcen. Der Trie -Algorithmus macht Coresarch elastischer und ermöglicht sowohl genaue Abfrage als auch Operationen wie Fuzzy -Suche, Wildcards und Charakteranpassungen. Die gesamte Triestruktur wird im Speicher gespeichert, um eine bessere Leistung zu erzielen. Das gesamte Projekt wurde als Lernprojekt geschrieben. Achten Sie also darauf, die Produktion einzulegen

Merkmale

• Effizienter invertierter Indexalgorithmus (Zuordnung von Inhalten zu Ressourcen)
• Verwendet die TRIE -Datenstruktur (Präfix Tree) für Schnellsuche und horizontale Skalierung
• Genaue Suche mit superschnellem O (K) schlechtesten Fall, wobei k die Schlüssellänge ist
• Wildcard-Suche nach rekursiven Tiefen-First-Suchbaum-Durchqueren
• Charakterübereinstimmungssuche mit Deep Level K+1
• Einfache Befehlszeilenwerkzeug und Bibliothek
• Plattformübergreifend , läuft unter Linux, MacOS und Windows
• Mit einer großen Anzahl verschiedener Ressourcen problemlos umgehen

Trie über Wikipedia

CLI -Befehle

Laden Sie Daten aus Dateien in spezifischem Pfad und Erweiterung (rekursiv)

 source <string path> <string extension>
alias: load

Beispiel:

 > source ./ *.txt

Holen Sie sich Ressourcennamen für den genauen Schlüssel (Wort)

 get <string key>
alias: search

Beispiel:

 > search cars
output:
<resource names for key cars>

Suchen Sie nach jedem Ressourcennamen, den der Schlüssel mit dem Präfix beginnt

Abfragemodi:

• Das Fragezeichen (?) Ist für die Auswahl aller Ressourcennamen Kinder eines bestimmten Knotens gehören (falls vorhanden).
• Das Wildcard -Zeichen (*) ist für die Auswahl aller Ressourcennamen rekursiv unter spezifischem Präfix.
• Die genaue Übereinstimmung (ohne Vorzeichen) erzeugt die gleiche Ausgabe wie GET/Suchbefehl.

 query <string prefix> <query mode: . or *>

Beispiel 1:

 > query c ?
output: 
<resource names for keys: ca, cb, c5, co, c1, ...>

Beispiel 2:

 > query c *
output: 
<resource names for keys: ca, cabbage, c4a541, cars, cardio, cantaloupe, ...>

Beispiel 3:

 > query cars
output: 
<resource names for key cars>

Fügen Sie eine Ressource unter dem Schlüssel hinzu (Word)

 add <string resource name> <string content>
alias: insert

Beispiel:

 > add english-dict.txt house 

Entfernen Sie den spezifischen Schlüssel (Wort)

 delete <string key>

Beispiel:

 > delete sport

Echo

 echo <string content>

Beispiel:

 > echo hello
output:
hello

Ein-/Aus -Debug -Modus ein-/ausschalten

 debug <bool>

Beispiel:

 > debug true

Entfernen Sie jeden Knoten in Struktur und sammeln Sie Speicher

 flush

Beispiel:

 > flush

Informationen anzeigen

 info

Beispiel:

 > flush
output:
Nodes in trie: 4651175
Words inserted: 15513389
Resource files: 2227
Memory usage: 1044944640 bytes

Klare Konsole

 clear

Beispiel:

 > clear

CLI -Argumente

Drehen Sie den Debug -Modus

 --debug <bool>
-d

Stellen Sie die maximale Speichergröße fest (in Bytes)

 --memory-limit <int>
-m

Verarbeiten Sie jedes Wort vor dem Einfügen vor

 --normalize <bool>
-n

Muster zum Entfernen unerwünschter Zeichen, die für jedes Wort vor dem Einfügen verwendet werden

 --pattern <regex>
-p

Laden Sie Daten am Start vom bestimmten Pfad

 --source <string>
-s

Stellen Sie die Erweiterung für das Laden von Daten am Start fest

 --extension <string>
-e

Lizenz

Corsearch ist unter dem MIT lizenziert.