ngram search
1.0.0
تتيح هذه المكتبة فهرسة العديد من الأوتار في ملف ، ثم سلاسل مطابقة غامضة بكفاءة مقابل ما تم فهرسته.
حاليًا ، تم تصميم الهيكل في الذاكرة قبل كتابته إلى الملف ، بحيث تستخدم هذه المرحلة الكثير من ذاكرة الوصول العشوائي.
يتم البحث عن السلسلة من الملف ويتطلب القليل من الذاكرة.
الفهرس هو بنية تري يمكن فيها البحث عن trigrams ؛ تتم مطابقة نتائج كل trigrams من المدخلات وفرزها للحصول على أكثر السلاسل مماثلة.
مثال (صدأ):
// Build index
let mut builder = Ngrams :: builder ( ) ;
builder . add ( "spam" , 0 ) ;
builder . add ( "ham" , 1 ) ;
builder . add ( "mam" , 2 ) ;
// Write it to a file
let mut file = BufWriter :: new ( File :: create ( path ) . unwrap ( ) ) ;
builder . write ( & mut file ) . unwrap ( ) ;
// Search our index
let mut data = Ngrams :: open ( path ) . unwrap ( ) ;
assert_eq ! (
data . search ( "ham" , 0.24 ) . unwrap ( ) ,
vec! [
( 1 , 1.0 ) , // "ham" is an exact match
( 2 , 0.25 ) , // "mam" is close
] ,
) ;
assert_eq ! (
data . search ( "spa" , 0.2 ) . unwrap ( ) ,
vec! [
( 0 , 0.375 ) , // "spam" is close
] ,
) ;مثال (بيثون):
> >> from ngram_search import Ngrams
> >> ngrams = Ngrams ( path )
> >> ngrams . search ( "ham" , 0.24 )
[( 0 , 1.0 ), ( 2 , 0.25 )]
> >> ngrams . search ( "spa" , 0.2 )
[( 0 , 0.375 )]