7 10700

为什么数据抓取失败

abc6699 于 2018-11-13 13:13 发表 [复制链接]
在没有换电脑之前,数据抓取都是成功的。换了新电脑之后,按照以前的规则,数据抓取一直失败,主题名:马蜂窝-云龙公园68。请帮忙看一下,谢谢。



1.png
举报 使用道具
| 回复

共 7 个关于本帖的回复 最后回复于 2018-11-13 22:50

maomao 论坛元老 发表于 2018-11-13 14:03:44 | 显示全部楼层
你这个规则跑到第五页,失败。给抓取内容做上定位标志映射,提高规则适应性。 abc.png
举报 使用道具
abc6699 中级会员 发表于 2018-11-13 15:14:23 | 显示全部楼层
maomao 发表于 2018-11-13 14:03
你这个规则跑到第五页,失败。给抓取内容做上定位标志映射,提高规则适应性。
...

谢谢您的回复,但是出现了新问题,采集完成后,出现了大量的重复数据,这怎么操作?
2.png
举报 使用道具
maomao 论坛元老 发表于 2018-11-13 16:30:08 | 显示全部楼层
规则名还是马蜂窝-云龙公园68?
举报 使用道具
abc6699 中级会员 发表于 2018-11-13 17:22:12 | 显示全部楼层
maomao 发表于 2018-11-13 16:30
规则名还是马蜂窝-云龙公园68?

不是,马蜂窝-云龙湖354这个,一共只有5页网页,但是他一直在采集,采了2个小时,都已经360多条数据了。您看看怎么回事。这一个人的评论采集了363次。
3.png
举报 使用道具
maomao 论坛元老 发表于 2018-11-13 17:41:40 | 显示全部楼层
abc.png

翻页记号没选对
举报 使用道具
abc6699 中级会员 发表于 2018-11-13 21:11:30 | 显示全部楼层
maomao 发表于 2018-11-13 17:41
翻页记号没选对

你好,我定位好了翻页,但是还是抓取不全,354条评论,只能抓到70几条,麻烦帮我再看一下(马蜂窝-云龙湖354)。以前按这规则采集都很顺利,不知这是为什么。
1.jpg
2.jpg
举报 使用道具
maomao 论坛元老 发表于 2018-11-13 22:50:36 | 显示全部楼层
abc6699 发表于 2018-11-13 21:11
你好,我定位好了翻页,但是还是抓取不全,354条评论,只能抓到70几条,麻烦帮我再看一下(马蜂窝-云龙湖 ...

这个评论只显示5页,每页是15个,所以总共是75个。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 20:37