goodreads user scraper

Goodreads User Scraper

Scape Goodreads Benutzerdaten: Profil, Buchregale, Bücher, Autoren

Inhalt

• Verwendung
• Argumente
  • --user_id
  • --output_dir
  • --skip_user_info
  • --skip_shelves
  • --skip_authors
• Fehlerbehebung
• Entwicklung
• Veröffentlichung

Verwendung

Verwenden von PIP:

pip install goodreads-user-scraper
goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

Verwenden von PIPX:

pipx run goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

Argumente

--user_id

• Beschreibung : Der Benutzer, dessen Daten abgekratzt werden sollten. Finden Sie Ihre Benutzer -ID mit diesen Anweisungen.
• Erforderlich : Ja

--output_dir

• Beschreibung : Das Verzeichnis, in dem alle abgekratzten Daten ausgegeben werden.
• Erforderlich : Nein
• Standard : goodreads-data

--skip_user_info

• Beschreibung : Ob das Skript das Scraping Benutzerinformationen überspringen sollte.
• Erforderlich : Nein
• Standard : False

--skip_shelves

• Beschreibung : Ob das Skript das Kratzen überspringen sollte.
• Erforderlich : Nein
• Standard : False

--skip_authors

• Beschreibung : Ob das Skript das Scraping -Autoren überspringen sollte.
• Erforderlich : Nein
• Standard : False

Fehlerbehebung

Stellen Sie sicher, dass Ihr Profil von jedermann sichtbar ist:

1. Navigieren Sie zur Seite Goodreads -Kontoeinstellungen
2. Klicken Sie auf die Registerkarte Account & notifications
3. Wählen Sie im Abschnitt Privacy , unter dem mein Profil angezeigt werden kann , "jeder" aus. Speichern Sie Ihre Kontoeinstellungen.

Entwicklung

1. Klonen Sie das Github -Repository

   git clone https://github.com/YashTotale/goodreads-user-scraper.git

2. Führen Sie das Skript aus

   sh scripts/install.sh

3. Änderungen vornehmen

4. Führen Sie das Testskript aus

   sh scripts/test.sh

Veröffentlichung

1. Erstellen .env

    TWINE_USERNAME=<foo>
   TWINE_PASSWORD=<bar>
   

2. Führen Sie das Veröffentlichungsskript aus

   sh scripts/publish.sh < patch | minor | major >