coresearch

Coresearch

.NET核心跨平台，內存，全文搜索庫，用於構建搜索引擎

關於

Coresearch使用帶有增強TRIE數據結構的倒置索引，用於將原子搜索標準從內容到資源索引。 Trie算法使Coresearch更具彈性，並允許精確的單詞查詢和操作，例如模糊搜索，通配符和角色匹配。整個Trie結構都存儲在內存中，以獲得更好的性能。整個項目都是學習項目，所以要注意投入生產

特徵

• 有效倒置索引算法（從內容到資源的映射）
• 使用前綴樹（TRIE）數據結構進行快速搜索和水平縮放
• 用超快速的O（k）最差的情況進行精確搜索，其中k是關鍵長度
• 通配符搜索遞歸深度優先搜索樹遍歷遍歷
• 具有深度K+1的角色匹配搜索
• 簡單的命令行工具和庫
• 跨平台，在Linux，MacOS和Windows上運行
• 輕鬆處理大量不同的資源

Trie在Wikipedia上

CLI命令

從特定路徑和擴展（遞歸）中加載數據中的數據

 source <string path> <string extension>
alias: load

例子：

 > source ./ *.txt

獲取精確鍵的資源名稱（word）

 get <string key>
alias: search

例子：

 > search cars
output:
<resource names for key cars>

搜索每個鍵以前綴開頭的資源名稱

查詢模式：

• 問號（？）用於選擇所有資源名稱屬於特定節點的孩子（如果有）。
• 通配符標誌（*）用於在特定前綴下遞歸選擇所有資源名稱。
• 確切的匹配（無符號）產生與GET/搜索命令相等的輸出。

 query <string prefix> <query mode: . or *>

示例1：

 > query c ?
output: 
<resource names for keys: ca, cb, c5, co, c1, ...>

示例2：

 > query c *
output: 
<resource names for keys: ca, cabbage, c4a541, cars, cardio, cantaloupe, ...>

示例3：

 > query cars
output: 
<resource names for key cars>

在密鑰（Word）下添加資源

 add <string resource name> <string content>
alias: insert

例子：

 > add english-dict.txt house 

刪除特定鍵（單詞）

 delete <string key>

例子：

 > delete sport

迴聲

 echo <string content>

例子：

 > echo hello
output:
hello

打開/關閉調試模式

 debug <bool>

例子：

 > debug true

刪除結構中的每個節點並收集內存

 flush

例子：

 > flush

顯示信息

 info

例子：

 > flush
output:
Nodes in trie: 4651175
Words inserted: 15513389
Resource files: 2227
Memory usage: 1044944640 bytes

清晰的控制台

 clear

例子：

 > clear

CLI論點

轉動調試模式

 --debug <bool>
-d

設置內存的最大大小（在字節中）

 --memory-limit <int>
-m

插入之前的每個單詞預處理

 --normalize <bool>
-n

刪除每個單詞之前使用不需要字符的模式，然後插入

 --pattern <regex>
-p

從特定路徑開始加載數據

 --source <string>
-s

設置用於加載數據的擴展

 --extension <string>
-e

執照

Coresearch在MIT下獲得許可。