goodreads user scraper

Goodreads用户刮板

Scrape Goodreads用户数据：个人资料，书架，书籍，作者

内容

• 用法
• 争论
  • --user_id
  • --output_dir
  • --skip_user_info
  • --skip_shelves
  • --skip_authors
• 故障排除
• 发展
• 出版

用法

使用PIP：

pip install goodreads-user-scraper
goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

使用pipx：

pipx run goodreads-user-scraper --user_id < your id > --output_dir goodreads-data

争论

--user_id

• 描述：应该刮擦数据的用户。使用这些指示查找您的用户ID。
• 必需：是的

--output_dir

• 描述：将输出所有刮擦数据的目录。
• 必需：否
• 默认值： goodreads-data

--skip_user_info

• 描述：脚本是否应跳过刮擦用户信息。
• 必需：否
• 默认值： False

--skip_shelves

• 描述：脚本是否应跳过刮架。
• 必需：否
• 默认值： False

--skip_authors

• 描述：脚本是否应跳过刮擦作者。
• 必需：否
• 默认值： False

故障排除

确保任何人都可以查看您的个人资料：

1. 导航到Goodreads帐户设置页面
2. 单击Account & notifications选项卡
3. 在Privacy部分”中，在谁可以查看我的个人资料下，选择“任何人”。保存您的帐户设置。

发展

1. 克隆GitHub存储库

   git clone https://github.com/YashTotale/goodreads-user-scraper.git

2. 运行安装脚本

   sh scripts/install.sh

3. 进行更改

4. 运行测试脚本

   sh scripts/test.sh

出版

1. 创建.env

    TWINE_USERNAME=<foo>
   TWINE_PASSWORD=<bar>
   

2. 运行发布脚本

   sh scripts/publish.sh < patch | minor | major >