【启动采集前的配置】

  • 预先登陆网站:是
  • 配置打码平台:否

【运行方法】— 详见数据DIY图文教程

  • 用GS爬虫浏览器或者是安装了爬虫软件的火狐浏览器访问知乎_独立问题所有回复采集页面;
  • 输入一个或多个搜索结果网址,然后点击“获取数据”;
  • 点击“启动采集”按钮,采集完成后点击“打包”按钮,就可以下载数据了。

【常见问题】— 欢迎跟帖留言

举报 使用道具
| 回复

共 24 个关于本帖的回复 最后回复于 2022-11-30 00:19

聂思宇 初级会员 发表于 2017-4-26 10:09:52 | 显示全部楼层
为啥无法采集啊?
举报 使用道具
Fuller 管理员 发表于 2017-4-26 10:24:41 | 显示全部楼层
聂思宇 发表于 2017-4-26 10:09
为啥无法采集啊?

能详细说一下出错的现象吗?
举报 使用道具
ssguoshunli 初级会员 发表于 2017-11-19 14:11:26 | 显示全部楼层
为什么采集过程中只能采集到第一个回答?
举报 使用道具
wangyong 版主 发表于 2017-11-19 15:20:08 | 显示全部楼层
ssguoshunli 发表于 2017-11-19 14:11
为什么采集过程中只能采集到第一个回答?

已修改

举报 使用道具
ssguoshunli 初级会员 发表于 2017-12-4 21:37:46 | 显示全部楼层
为什么采集问题答案时,下方有400多条答案,只采集58条就显示采集完成呢?采集不完整啊
举报 使用道具
ld1425 新手上路 发表于 2018-3-26 11:23:37 | 显示全部楼层
https://www.zhihu.com/question/60521020
我想采集这个知乎问题下的所有300+回答, 但是搜集结果只搜了85个数据。请问怎样才能全部搜集?
举报 使用道具
bowieD 金牌会员 发表于 2018-3-26 14:32:04 | 显示全部楼层
本帖最后由 bowieD 于 2018-3-26 14:36 编辑
ld1425 发表于 2018-3-26 11:23
https://www.zhihu.com/question/60521020
我想采集这个知乎问题下的所有300+回答, 但是搜集结果只搜了85 ...

像知乎这种瀑布流式的滚屏网页,数据比较多的话,鼠标滚轮往下滚动,内容越来越多,所占内存越来越大,比较容易中断
旗舰版有清除老数据功能,可以清除滚屏后所占用的内存,让爬虫不断执行连续动作的滚屏



举报 使用道具
yaya224 新手上路 发表于 2018-7-4 15:59:41 | 显示全部楼层
对于知乎评论采集,为什么只有一条
举报 使用道具
tuesday1 初级会员 发表于 2018-7-4 16:18:11 | 显示全部楼层
yaya224 发表于 2018-7-4 15:59
对于知乎评论采集,为什么只有一条

你具体用哪个快捷工具,添加的链接地址是什么?发出来,技术人员测试一下。
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • Gephi社会网络分析-马蜂窝游记文本分词并同
  • Gephi社会网络分析-基于马蜂窝游记文本以词
  • 知乎话题文本根据词语间距筛选后生成共词矩
  • 马蜂窝游记文本分词后以词语间距为筛选条件
  • 学习使用apriori算法挖掘关联关系

热门用户

GMT+8, 2024-3-29 00:28