jieba rs

jieba-rs

Ayúdame a convertirme en un desarrollador de código abierto a tiempo completo patrocinándome en Github

La segmentación de palabras chinas jié implementada en óxido

Instalación

Agréguelo a su Cargo.toml :

[ dependencies ]
jieba-rs = " 0.7 "

Entonces estás listo para ir. Si está utilizando Rust 2015, también tiene que extern crate jieba_rs a su raíz de caja.

Ejemplo

 use jieba_rs :: Jieba ;

fn main ( ) {
    let jieba = Jieba :: new ( ) ;
    let words = jieba . cut ( "我们中出了一个叛徒" , false ) ;
    assert_eq ! ( words , vec! [ "我们" , "中" , "出" , "了" , "一个" , "叛徒" ] ) ;
} 

Habilitar características adicionales

• La función default-dict habilita el diccionario integrado, estas características están habilitadas de forma predeterminada
• La función tfidf habilita el extractor de palabras clave TF-IDF
• La función de textrank habilita el extractor de palabras clave de TexTrank

[ dependencies ]
jieba-rs = { version = " 0.7 " , features = [ " tfidf " , " textrank " ] }

Ejecutar Benchmark

cargo bench --all-features

Punto de referencia: comparar con cppjieba

• La optimización de Jieba-RS es un 33% más rápido que CPPJIEBA
• 优化 jieba-rs 中文分词性能评测
• 最佳化 jieba-rs 中文斷詞性能測試

Bindings jieba-rs

• @node-rs/jieba NodeJs Binding
• jieba-php PHP Binding
• rjieba-py python encuadernación
• Tokenizador chino cang-jie para Tantivy
• tantivy-jieba un adaptador que une entre Tantivy y Jieba-RS
• jieba-wasm the WebAssembly Binding

Licencia

Este trabajo se publica bajo la licencia MIT. Se proporciona una copia de la licencia en el archivo de la licencia.