funko pop data
Initial database scrape
3 يناير 2021 - 5:00 مساءً بتوقيت شرق الولايات المتحدة
يحتوي هذا الريبو على قاعدة بيانات بتنسيق JSON لجميع بيانات Funko POP. عند العمل في مشروع صغير يتعلق بـ Funko Pops ، لوحظ أنه لم يكن هناك واجهة برمجة تطبيقات مفتوحة المصدر للحصول على بيانات Funko Pop. كان أفضل مورد هو دليل سعر البوب ولكن البيانات لا تزال لا يمكن الوصول إليها.
نظرًا لأنني لم أتمكن من العثور على قاعدة بيانات كاملة لجميع الملوثات العضوية الثابتة Funko للاستخدام العام ، فقد قررت كشط مواقع الويب المختلفة على الإنترنت للحصول على قائمة كاملة من الملوثات العضوية الثابتة Funko المتوفرة. في هذا الريبو ، ستجد ملف JSON يحتوي على أكثر من 23000 من منتجات Funko Pop.
جميع البيانات مفتوحة المصدر ومتاحة لأي شخص لاستخدامه والبناء عليه. سأبني بانتظام على هذه القائمة - على الأرجح كل أسبوع. لا تتردد في استخدام البيانات حسب رغبتك. هذا المشروع لديه رخصة معهد ماساتشوستس للتكنولوجيا.
الرجاء استخدام البيانات بمسؤولية. لقد كان هذا مشروعًا ممتعًا لإكماله لمجتمع Funko.
حاليًا ، يتم التقاط بيانات كل موسيقى البوب Funko مع البيانات التالية:
{
handle: ### A unique handle generated based on the title of the pop and using a `handleize` method.
image: ### A URL containing an image of what the Funko Pop looks like
title: ### The name of the Funko Pop
series: ### Array of series the Funko Pop is part of. I.E ["Pop! Animation","Pop! Vinyl","Emerald City Comic Con 2017"]
}
إذا كنت ترغب في رؤية المزيد من السمات أو إذا كانت مفيدة ، فيرجى توضيح مشكلة وسأحاول إضافة البيانات. بدلاً من ذلك ، لا تتردد في فتح العلاقات العامة.
بصرف النظر عن بيانات JSON ، يتم تعريض نفس البيانات بالضبط عبر CSV في ملف funko_pop.csv . تم أيضًا تحميل جميع بيانات Funko Pop على ورقة Google العامة.
لقد أضفت البرنامج النصي لتجنب البيانات الذي كنت أستخدمه. إنه ليس مثاليًا ولكنه يفعل المهمة. من المحتمل أن يتم تعديل بعض المعلمات مثل sleep اعتمادًا على الجهاز الذي تستخدمه. إذا كنت ترغب في تشغيل البرنامج النصي ، فإن ما يلي سيساعدك على البدء:
npm install
node index.js
بعد تشغيل البرنامج النصي ، سيتم إنشاء ملف funko_pop.json. إذا كنت ترغب في تصدير ذلك إلى تنسيق CSV ، فيمكنك تشغيل:
node json-converter.js
إذا كان لديك تحسينات ، افتح العلاقات العامة وسألقي نظرة. تبحث بنشاط عن الناس لتحسين هذا المكشطة.
