我有一个去科利爬虫,我试图抓取许多网站。在我的终端上,它会打印很多:
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
2023/05/30 02:22:56 Max depth limit reached
这让我很难读懂我放的一些指纹。我想知道有没有办法在termial忽略打印这个。谢谢
1条答案
按热度按时间ghhkc1vu1#
Max depth limit reached
是colly.ErrMaxDepth。你的项目中一定有这样的代码:如果您不想记录此错误,请添加一个简单的检查来排除它:
另一种选择是将输出重定向到文件:
或者将输出复制到一个文件中,并使用
tee
复制到标准输出: