适配了 Pixiv 对抓取小说的限制
最近我发现在批量抓取小说时,Pixiv 可能也会返回空数据。
比如小说 tag 搜索页面,以及自己的收藏页面。大量抓取小说就会触发限制。
被限制后,小说数据返回 500 状态码,期间无法正常打开小说作品页面。
现在下载器对其进行适配,被限制时会暂停抓取,等待一定时间(3 分钟左右)之后再次抓取。
最近我发现在批量抓取小说时,Pixiv 可能也会返回空数据。
比如小说 tag 搜索页面,以及自己的收藏页面。大量抓取小说就会触发限制。
被限制后,小说数据返回 500 状态码,期间无法正常打开小说作品页面。
现在下载器对其进行适配,被限制时会暂停抓取,等待一定时间(3 分钟左右)之后再次抓取。
Don't miss a new PixivBatchDownloader release
NewReleases is sending notifications on new releases.