dawnsearch

Dawnsearch

DawnSearch是一種開源的Web搜索引擎，它以含義進行搜索。它使用語義搜索（在含義上進行搜索），使用All-Minilm-L6-V2。它使用usearch進行矢量搜索。它可以索引通用的爬網數據。 Dawnsearch用生鏽寫。

可以在Dawnsearch.org上獲得公共實例。

項目狀態

Dawnsearch當前充當分佈式（語義）矢量搜索。啟動實例時，它將向跟踪器註冊。然後，實例可以通過搜索參與網絡。可選地，它可以索引通用的爬網數據集並回答查詢。

主要項目仍要做：

1. 更好的錯誤處理。代碼中仍然有很多.unwrap（）。
2. 防止故障或惡意實例的魯棒性。
3. 數據包加密。
4. 通過將索引頁面分配到語義上接近內容的實例中提高搜索效率。

需要幫助！

Dawnsearch正在尋找：

1. 人們在Dawnsearch.org上使用搜索，並就結果的使用和質量提供反饋。
2. 有生鏽經驗的人可以查看代碼庫，並提供有關更易於閱讀和更多ieshomatic生鏽的技巧。
3. UI/UX設計器為主和搜索結果頁面創建設計。
4. 可以解決“項目狀況”下提到的一些問題的生鏽開發人員
5. 想要運行自己的實例的人。

請出於任何疑問或反饋，請打開問題。如果您想貢獻大型東西，例如功能或重構，請在開始之前打開問題，以免重複工作！

快速開始

這將在最近的Ubuntu上構建並運行“訪問終端” Dawnsearch實例，而無需GPU加速。有關其他配置的示例，請參見模式。

 sudo apt-get update && sudo apt-get install -y build-essential pkg-config

# Install rust if you don't have it already:
curl --proto '=https' --tlsv1.2 -sSf https://sh.rustup.rs | sh

mv DawnSearch.toml.example DawnSearch.toml
RUSTFLAGS='-C target-cpu=native'  cargo run --release

現在，訪問http：// localhost：8080訪問您自己的DawnSearch實例。您將能夠執行搜索，但是您還不能為網絡做出貢獻。看一下模式，看看如何做到這一點。

如果您想升級到GPU加速度，請嘗試此嘗試。您需要安裝CUDA：

 RUSTFLAGS='-C target-cpu=native'  cargo run --release --features cuda

請注意，在M1/M2 Mac上，“貨物安裝”無效。 “貨物建造”確實可以！

如果您遇到問題，請隨時打開問題！

配置

您可以通過Dawnsearch.toml或通過dawnsearch_index_cc等環境變量配置Dawnsearch。

文件

正在進行中！

• Dawnsearch架構
• 有關Buildling Dawnsearch的其他信息
• 數據 - Dawnsearch存儲的數據位置。
• Dawnsearch模式 - 您可以運行DawnSearch的不同方式。
• 選擇 - 分析和優化。

參見

• 如何在Rust中構建語義搜索引擎 - 關於如何使用Rust -Bert進行語義搜索的出色教程。