jieba rs

jieba-rs

Aidez-moi à devenir un développeur open-source à plein temps en me parraiant sur Github

La segmentation des mots chinois Jieba implémentée dans Rust

Installation

Ajoutez-le à votre Cargo.toml :

[ dependencies ]
jieba-rs = " 0.7 "

Ensuite, vous êtes prêt à partir. Si vous utilisez Rust 2015, vous devez également extern crate jieba_rs à votre racine de caisse.

Exemple

 use jieba_rs :: Jieba ;

fn main ( ) {
    let jieba = Jieba :: new ( ) ;
    let words = jieba . cut ( "我们中出了一个叛徒" , false ) ;
    assert_eq ! ( words , vec! [ "我们" , "中" , "出" , "了" , "一个" , "叛徒" ] ) ;
} 

Activer des fonctionnalités supplémentaires

• La fonction default-dict permet le dictionnaire intégré, ces fonctionnalités sont activées par défaut
• La fonction tfidf permet l'extracteur de mots clés TF-IDF
• La fonctionnalité textrank permet l'extracteur de mots clés textrank

[ dependencies ]
jieba-rs = { version = " 0.7 " , features = [ " tfidf " , " textrank " ] }

Run Benchmark

cargo bench --all-features

Benchmark: Comparez avec Cppjieba

• L'optimisation de Jieba-Rs à 33% plus rapide que Cppjieba
• 优化 jieba-rs 中文分词性能评测
• 最佳化 jieba-rs 中文斷詞性能測試

CONTRAISSANCES jieba-rs

• @node-rs/jieba Nodejs Liaison
• jieba-php php liaison
• rjieba-py Python Binding
• Tokenizer chinois cang-jie pour Tantivy
• tantivy-jieba un adaptateur qui plie entre Tantivy et Jieba-RS
• jieba-wasm the webassembly liant

Licence

Ce travail est publié sous la licence du MIT. Une copie de la licence est fournie dans le fichier de licence.