11#
wangyong 版主 发表于 2017-9-21 16:02:43 | 只看该作者
可以用:
1.记号线索翻页,采集到41页的时候手动点击43页,跳过42页;
2.前面的规则采集到41页后关闭,再做一个规则通过连续动作点击尾页,然后对上一页做记号线索翻页,采集最后一页到43页的数据。
举报 使用道具
12#
bof_king 初级会员 发表于 2017-9-21 16:44:02 | 只看该作者
wangyong 发表于 2017-9-21 16:02
可以用:
1.记号线索翻页,采集到41页的时候手动点击43页,跳过42页;
2.前面的规则采集到41页后关闭,再做 ...

这个网址是不会变化的,新建规则网址在第一页,第一页没有上一页,爬第二个规则是又是跳转到第一页
举报 使用道具
13#
yangwenge 金牌会员 发表于 2017-9-21 17:03:35 | 只看该作者
本帖最后由 yangwenge 于 2017-9-21 17:06 编辑
bof_king 发表于 2017-9-21 16:44
这个网址是不会变化的,新建规则网址在第一页,第一页没有上一页,爬第二个规则是又是跳转到第一页
...

用上面的第二种方法,先做连续动作点击尾页,再用上一页做记号线索需要将滚屏打开

滚屏次数2次,速度1
举报 使用道具
14#
bof_king 初级会员 发表于 2017-9-21 17:23:13 | 只看该作者
yangwenge 发表于 2017-9-21 17:03
用上面的第二种方法,先做连续动作点击尾页,再用上一页做记号线索需要将滚屏打开

滚屏次数2次,速度1

那要新建规则对吧,一个连续动作,一个做页数规则,一个详情的规则?
举报 使用道具
15#
bof_king 初级会员 发表于 2017-9-21 17:24:07 | 只看该作者
bof_king 发表于 2017-9-21 17:23
那要新建规则对吧,一个连续动作,一个做页数规则,一个详情的规则?

能不能把你连续动作的规则截图给我看一下,谢谢
举报 使用道具
16#
bof_king 初级会员 发表于 2017-9-21 17:25:12 | 只看该作者
yangwenge 发表于 2017-9-21 17:03
用上面的第二种方法,先做连续动作点击尾页,再用上一页做记号线索需要将滚屏打开

滚屏次数2次,速度1

能不能把你连续动作的规则截图给我看一下,麻烦
举报 使用道具
17#
yangwenge 金牌会员 发表于 2017-9-21 18:06:27 | 只看该作者
bof_king 发表于 2017-9-21 17:25
能不能把你连续动作的规则截图给我看一下,麻烦

1.连续动作点击尾页
2.翻页以及采集链接
3.详情页面


举报 使用道具
18#
bof_king 初级会员 发表于 2017-9-21 19:09:51 | 只看该作者
yangwenge 发表于 2017-9-21 18:06
1.连续动作点击尾页
2.翻页以及采集链接
3.详情页面

连续动作点击尾页的规则可否截图看一下
举报 使用道具
19#
yangwenge 金牌会员 发表于 2017-9-22 09:23:32 | 只看该作者
bof_king 发表于 2017-9-21 19:09
连续动作点击尾页的规则可否截图看一下

连续动作可以参考 《连续动作点击京东商品价格》
连续动作目标主题名指向采集链接规则即可。

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-4-29 01:31