在刮亚马逊评论的时候，我总是在5,000条评论上碰壁，即使产品有40,000条，有没有办法越过这个障碍，刮更多？
kse8i1jr1#
直接从搜索结果中抓取时，要获得更多页面，您可以使用过滤器将搜索分成更小的部分。例如，星星评论可能会首先搜索一颗星，然后两颗星，等等。这当然不能保证 * 所有 * 结果，但会增加您的机会。有些过滤器可能数量更多，但更难实现，如标签或用户名。或者，直接通过API访问数据和/或通过Amazon Associates计划成为会员。
1条答案
按热度按时间kse8i1jr1#
直接从搜索结果中抓取时，要获得更多页面，您可以使用过滤器将搜索分成更小的部分。例如，星星评论可能会首先搜索一颗星，然后两颗星，等等。这当然不能保证 * 所有 * 结果，但会增加您的机会。有些过滤器可能数量更多，但更难实现，如标签或用户名。
或者，直接通过API访问数据和/或通过Amazon Associates计划成为会员。