13033060709 新手上路 发表于 2022-3-2 14:18:38 | 显示全部楼层
微博的因设置了限制翻页数:1,翻页已中断 怎么解决啊
举报 使用道具
Fuller 管理员 发表于 2022-3-2 15:24:25 | 显示全部楼层
13033060709 发表于 2022-3-2 14:18
微博的因设置了限制翻页数:1,翻页已中断 怎么解决啊

微博关键词搜索结果只显示50页,所以,爬虫也设置了50页限制
举报 使用道具
yinse111 新手上路 发表于 2022-3-9 12:21:26 | 显示全部楼层
抖音评论采集不了
举报 使用道具
Fuller 管理员 发表于 2022-3-9 14:47:08 | 显示全部楼层
yinse111 发表于 2022-3-9 12:21
抖音评论采集不了

要采集的网址是什么?发出来我试试
举报 使用道具
1944280745 新手上路 发表于 2022-4-4 17:16:55 | 显示全部楼层
为什么马蜂窝景点评论只能采集5页啊
举报 使用道具
Fuller 管理员 发表于 2022-4-4 18:53:54 | 显示全部楼层
1944280745 发表于 2022-4-4 17:16
为什么马蜂窝景点评论只能采集5页啊

网址发出来看看,手工翻页能看到多少页?
举报 使用道具
1944280745 新手上路 发表于 2022-4-5 17:23:39 | 显示全部楼层
Fuller 发表于 2022-4-4 18:53
网址发出来看看,手工翻页能看到多少页?

上面每个景点的评论都只显示5页,后面的都看不到
https://www.mafengwo.cn/poi/19439.html
举报 使用道具
Fuller 管理员 发表于 2022-4-5 17:40:42 | 显示全部楼层
1944280745 发表于 2022-4-5 17:23
上面每个景点的评论都只显示5页,后面的都看不到
https://www.mafengwo.cn/poi/19439.html
...

这种只显示5页的就采集不了更多了
举报 使用道具
heziiii 新手上路 发表于 2022-4-29 00:26:31 | 显示全部楼层
马蜂窝抓取游记列表,为根据操作为什么没成功呢,网址是这个http://www.mafengwo.cn/search/q.php?q=%E4%BA%91%E9%BE%99%E5%8E%BF&t=notes&seid=&mxid=&mid=&mname=&kt=1
举报 使用道具
Fuller 管理员 发表于 2022-4-29 09:13:20 | 显示全部楼层
heziiii 发表于 2022-4-29 00:26
马蜂窝抓取游记列表,为根据操作为什么没成功呢,网址是这个http://www.mafengwo.cn/search/q.php?q=%E4%BA ...

我看这个网址是马蜂窝游记搜索,我得先找找有没有游记搜索的快捷采集工具。如果没有这个快捷采集工具,别的快捷采集是代替不了的,我会安排开发一个新工具
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 04:45