goodreads user scraper

GoodReads User Scraper

Скраппировать данные пользователя GoodReads: профиль, книжные полки, книги, авторы

Содержимое

• Использование
• Аргументы
  • --user_id
  • --output_dir
  • --skip_user_info
  • --skip_shelves
  • --skip_authors
• Поиск неисправностей
• Разработка
• Издательский

Использование

Использование PIP:

pip install goodreads-user-scraper
goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

Использование PIPX:

pipx run goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

Аргументы

--user_id

• Описание : Пользователь, чьи данные должны быть скрещены. Найдите свой идентификатор пользователя, используя эти направления.
• Требуется : да

--output_dir

• Описание : каталог, в котором будут выводиться все скрещенные данные.
• Требуется : нет
• По умолчанию : goodreads-data

--skip_user_info

• Описание : должен ли сценарий пропустить информацию о поиске пользователя.
• Требуется : нет
• По умолчанию : False

--skip_shelves

• Описание : должен ли сценарий пропустить полки скребования.
• Требуется : нет
• По умолчанию : False

--skip_authors

• Описание : должен ли сценарий пропустить скребки авторов.
• Требуется : нет
• По умолчанию : False

Поиск неисправностей

Убедитесь, что ваш профиль можно просмотреть любым:

1. Перейдите на страницу настроек учетной записи GoodReads
2. Нажмите на вкладку Account & notifications
3. В разделе Privacy , под темю , кто может просматривать мой профиль , выберите «Любой». Сохраните настройки учетной записи.

Разработка

1. Клонировать репозиторий GitHub

   git clone https://github.com/YashTotale/goodreads-user-scraper.git

2. Запустите сценарий установки

   sh scripts/install.sh

3. Внести изменения

4. Запустите тестовый сценарий

   sh scripts/test.sh

Издательский

1. Создать .env

    TWINE_USERNAME=<foo>
   TWINE_PASSWORD=<bar>
   

2. Запустите сценарий публикации

   sh scripts/publish.sh < patch | minor | major >