الصفحة الرئيسية>المتعلقة بالبرمجة>شفرة المصدر الأخرى
تنزيل

Musiccaps Demo - البحث الدلالي على التسميات التوضيحية الصوتية

عرض للبحث الدلالي باستخدام قاعدة بيانات Vector Pinecone ومجموعة بيانات MusicCaps من Google AI.

المتطلبات الأساسية

  • حساب (مجاني) حساب pinecone
  • مفتاح Pinecone API

إنشاء فهرس Pinecone

خطوة من خلال دفتر الملاحظات init-pinecone-index.ipynb

  1. تحميل ومعاينة مجموعة البيانات
  2. تهيئة المحول
  3. قم بإنشاء فهرس Pinecone
  4. توليد التضمينات وملء الفهرس

ملحوظات:

  • ستحتاج إلى استبدال YOUR_API_KEY و YOUR_REGION بالقيم الموضحة من علامة تبويب مفاتيح API في وحدة التحكم pinecone.
  • إذا أخذت الإعدادات الافتراضية في كولاب ، فقد يستغرق الأمر بعض الوقت لتوليد التضمينات وملء الفهرس (حوالي 20-25 دقيقة) - وقت رائع لقهوة. أو ، قم بتعيين وقت التشغيل لاستخدام وحدة معالجة الرسومات في تحرير | الإعدادات> تسريع الأجهزة . يمكنك تحديد T4 ككتب GPU في الطبقة الحرة. هذا سوف يولد التضمينات وملء الفهرس في أقل من دقيقة!

جاهز للبحث الدلالي!

هناك عينة استعلام في نهاية دفتر الملاحظات. استبدل قيمة query لتجربة البحث الدلالي عبر مجموعة بيانات MusicCaps. 

 query = 'lively eastern european folk music with strings outdoors'
search_pinecone ( query )
{ 'matches' : [{ 'id' : '5327' ,
              'metadata' : { 'aspect_list' : "['romanian folk music', 'live "
                                          "performance', 'instrumental', "
                                          "'accordion', 'upright bass', "
                                          "'acoustic guitar', 'percussion', "
                                          "'fiddle', 'lively', 'upbeat', "
                                          "'joyful']" ,
                           'audioset_positive_labels' : '/m/0mkg' ,
                           'author_id' : 9.0 ,
                           'caption' : 'This is the live performance of a '
                                      'Romanian folk music piece. It is '
                                      'instrumental. There is an accordion '
                                      'playing the leading melody while the '
                                      'fiddle, acoustic guitar and the upright '
                                      'bass play in the background. There is a '
                                      'percussive element in the rhythmic '
                                      'background. The atmosphere is lively '
                                      'and joyful.' ,
                           'end_s' : 30.0 ,
                           'is_audioset_eval' : False ,
                           'is_balanced_subset' : False ,
                           'start_s' : 20.0 ,
                           'ytid' : 'xR2p3UED4VU' },
              'score' : 0.658422887 ,
              'values' : []},
              
              ...
              
              ],
 'namespace' : '' }

ستحصل على شعور بالنتائج التي تقرأ حقل caption وإشارة score . ytid هو معرف فيديو YouTube ويحدد start_s نقطة البداية للفيديو ذي الصلة.

تشغيل التطبيق التجريبي

TL ؛ د 

 streamlit run search-app.py

Musiccaps Scartical Search with Pinecone

تثبيت Pinecone-Client و STREMLIT

لتشغيل تطبيق البحث ، ستحتاج إلى ذلك

  1. قم بإنشاء وملء فهرس Pinecone باستخدام دفتر الملاحظات أعلاه ^
  2. إعداد بيئة بيثون. يمكن لمستخدمي MACOS استخدام إعداد بيئة Python لـ MacOS
  3. تثبيت التدفق والمتطلبات الأساسية. 
 git clone https://github.com/ben-ogden/musiccaps.git
cd musiccaps
pipenv shell
pipenv install pinecone-client streamlit
streamlit version
...
Streamlit, version 1.22.0

قم بإنشاء ملف أسرار في ~/.streamlit/secrets.toml PINECONE_ENV PINECONE_KEY 

 PINECONE_KEY = "..."

البحث الدلالي سعيد! 

 streamlit run search-app.py

Musiccaps Scartical Search with Pinecone

الخطوات التالية

يمكن أن تكون مجموعة البيانات هذه مرشحًا جيدًا لتجربة البحث المختلط أو استخدام تصفية البيانات الوصفية باستخدام القيم في aspect_list metadata ككلمات رئيسية.

يوسع
معلومات إضافية
تطبيقات ذات صلة
نوصي لك
أخبار ذات صلة الكل