https://www.zglnrc.org.cn/#/jobs
举报 使用道具
| 回复

共 3 个关于本帖的回复 最后回复于 2023-12-15 16:51

沙发
Fuller 管理员 发表于 2023-12-15 16:41:20 | 只看该作者
在chrome浏览器中能不能打开?如果不能在爬虫浏览器中打开,但是可以在chrome中打开,那么说明这个网站把爬虫封锁了。如果连chrome都打不开了,说明把你的帐号或者ip都封锁了
举报 使用道具
板凳
zhangrui111 新手上路 发表于 2023-12-15 16:43:50 | 只看该作者
在chrome可以打开,就是在爬虫浏览器一直打圈打不开,是不是我就不能在这个网址上爬取信息了?
举报 使用道具
地板
Fuller 管理员 发表于 2023-12-15 16:51:05 | 只看该作者
zhangrui111 发表于 2023-12-15 16:43
在chrome可以打开,就是在爬虫浏览器一直打圈打不开,是不是我就不能在这个网址上爬取信息了? ...


清缓存也许能缓解一下,但是,基本上不能连续爬这类网站了
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-29 20:46