jieba rs

Jieba-rs

Hilf mir, ein Vollzeit-Open-Source-Entwickler zu werden, indem ich mich auf Github sponsert

Die chinesische chinesische Wortsegmentierung in Rost implementiert

Installation

Fügen Sie es Ihrer Cargo.toml hinzu.

[ dependencies ]
jieba-rs = " 0.7 "

Dann bist du gut zu gehen. Wenn Sie Rust 2015 verwenden, müssen Sie auch zu Ihrer Kistenwurzel extern crate jieba_rs .

Beispiel

 use jieba_rs :: Jieba ;

fn main ( ) {
    let jieba = Jieba :: new ( ) ;
    let words = jieba . cut ( "我们中出了一个叛徒" , false ) ;
    assert_eq ! ( words , vec! [ "我们" , "中" , "出" , "了" , "一个" , "叛徒" ] ) ;
} 

Aktivieren Sie zusätzliche Funktionen

• default-dict -Funktion ermöglicht ein, dass ein eingebettetes Wörterbuch ermöglicht wird. Diese Funktionen sind standardmäßig aktiviert
• tfidf Funktion ermöglicht TF-IDF-Schlüsselwörter Extraktor
• Die textrank -Funktion ermöglicht Textrank Keywords Extractor

[ dependencies ]
jieba-rs = { version = " 0.7 " , features = [ " tfidf " , " textrank " ] }

Benchmark laufen

cargo bench --all-features

Benchmark: Vergleiche mit CPPJieba

• Optimierung von Jieba-Rs auf 33% schneller als Cppjiebaa
• 优化 Jieba-rs 中文分词性能评测
• 最佳化 Jieba-rs 中文斷詞性能測試

jieba-rs -Bindungen

• @node-rs/jieba NodeJS-Bindung
• jieba-php PHP-Bindung
• rjieba-py Python Bindung
• cang-jie Tokenizer für Tantivy
• tantivy-jieba Ein Adapter, der zwischen Tantivy und Jieba-Rs brücken
• jieba-wasm die WebAssembly-Bindung

Lizenz

Diese Arbeit wird unter der MIT -Lizenz veröffentlicht. Eine Kopie der Lizenz wird in der Lizenzdatei bereitgestellt.