18 19299

翻页

bof_king 于 2017-9-21 10:35 发表 [复制链接]
翻页到了某一个页数,翻不过去,比如说爬到第3页,一直跳转不到第4页,网页浏览第四页进不去,第五园又正常,有什么方法可以跳过第4页,求解
举报 使用道具
| 回复

共 18 个关于本帖的回复 最后回复于 2017-12-10 22:35

bowieD 金牌会员 发表于 2017-9-21 10:53:22 | 显示全部楼层
本帖最后由 bowieD 于 2017-9-21 10:57 编辑

1,如果每一页都有独立的网址,就可以把规则中所有的线索都去活,直接把第五页的网址线索复制出来添加到规则中,启动爬虫就会从第五页开始
2,如果没有独立的网址就需要做连续动作,通过点击或选择第五页的页码去从第五页开始抓起。《连续动作翻页》
3,第四页翻不过去第五页又可以应该是第四页的结构发生了变化。《翻页到中间就失败了怎么解决》

举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:12:52 | 显示全部楼层
没有独立的网址,翻页网址是不会变化的,这要怎么办
举报 使用道具
yangwenge 金牌会员 发表于 2017-9-21 11:16:25 | 显示全部楼层
bof_king 发表于 2017-9-21 11:12
没有独立的网址,翻页网址是不会变化的,这要怎么办

规则名多少
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:17:27 | 显示全部楼层
广东律师
举报 使用道具
bowieD 金牌会员 发表于 2017-9-21 11:18:44 | 显示全部楼层
那就需要用连续动作,通过点击页面选择框去选择第五页。《用连续动作实现翻页点击》,把规则名贴出来,可能是你规则有问题。
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:24:17 | 显示全部楼层
规则应该没什么问题,从第一页开始,爬到第41页都很正常,然后就一直停留在41页,我打开网址翻到42页,结果42页跳转不出来,43页之后还是正常显示
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 11:24:58 | 显示全部楼层

广东律师
举报 使用道具
bowieD 金牌会员 发表于 2017-9-21 11:33:46 | 显示全部楼层
这个是网页的问题,第42页不能打开所以翻不过去,翻页也没有页码选择框,只能用连续动作做翻页去指定翻页的页码,在连续动作高级设置中设置起点为43,就可以从43页开始抓。
举报 使用道具
bof_king 初级会员 发表于 2017-9-21 14:27:59 | 显示全部楼层
bowieD 发表于 2017-9-21 11:33
这个是网页的问题,第42页不能打开所以翻不过去,翻页也没有页码选择框,只能用连续动作做翻页去指定翻页的 ...

具体怎么操作,我设置从43页开始,爬出来是从第8页开始的
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-28 21:37