如何解决处理大型查询的分页失败
我正在尝试获取一个拥有数万名关注者的帐户的关注者信息。有哪些技巧可以成功拉取所有数据?
我正在使用分页并捕获 tweepy.RateLimitError 连接失败导致整个过程崩溃。
有没有办法从中断的地方继续查询,而不是每次都从头开始。提取数十或数百个结果时没什么大不了的,但是当提取数万或数十万个结果时,每次都必须重新开始,这意味着您永远无法真正获得所有数据。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。