หน้าแรก>การเขียนโปรแกรมที่เกี่ยวข้อง>ซอร์สโค้ดอื่น ๆ
ดาวน์โหลด

search_engines

ไลบรารี Python ที่สอบถาม Google, Bing, Yahoo และเครื่องมือค้นหาอื่น ๆ และรวบรวมผลลัพธ์จากหน้าผลลัพธ์ของเครื่องมือค้นหาหลายหน้า
โปรดทราบว่าการประกายเว็บอาจขัดกับ TOS ของเครื่องมือค้นหาบางตัวและอาจส่งผลให้มีการห้ามชั่วคราว

เครื่องมือค้นหาที่รองรับ

Google
BING
คนอื่น ๆ
Duckduckgo
หน้าเริ่มต้น
AOL
คนโง่
ถาม
mojeek
กล้าหาญ
คบเพลิง

คุณสมบัติ

  • สร้างไฟล์เอาต์พุต (HTML, CSV, JSON)
  • รองรับตัวกรองการค้นหา (URL, ชื่อเรื่อง, ข้อความ)
  • การสนับสนุนพร็อกซี HTTP และถุงเท้า
  • รวบรวมลิงค์เว็บมืดพร้อมคบเพลิง
  • เพิ่มเครื่องมือค้นหาใหม่ได้ง่าย คุณสามารถเพิ่มเอ็นจิ้นใหม่ได้โดยการสร้างคลาสใหม่ใน search_engines/engines/ และเพิ่มลงในพจนานุกรม search_engines_dict ใน search_engines/engines/__init__.py คลาสใหม่ควร Subclass SearchEngine และแทนที่วิธีการต่อไปนี้: _selectors , _first_page , _next_page
  • Python2 - Python3 เข้ากันได้

ความต้องการ

Python 2.7 - 3.x กับ
คำขอ และ
สวย

การติดตั้ง

เรียกใช้ไฟล์การตั้งค่า: $ python setup.py install
เสร็จแล้ว!

การใช้งาน

เป็นห้องสมุด: 

 from search_engines import Google

engine = Google()
results = engine.search("my query")
links = results.links()

print(links)

เป็นสคริปต์ CLI: 

 $ python search_engines_cli.py -e google,bing -q "my query" -o json,print

รุ่นอื่น ๆ

  • Async-search-scraper การใช้งานแบบอะซิงโครนัสที่ยอดเยี่ยมจริงๆเขียนโดย @soxoj
ขยาย
ข้อมูลเพิ่มเติม
แอปที่เกี่ยวข้อง
แนะนำสำหรับคุณ
ข้อมูลที่เกี่ยวข้อง ทั้งหมด