【集微库】微博采集工具箱使用常见问题

mistds 发表于 2021-11-3 23:58
你好，我想请问一下数据管家如何启动多个爬虫群，谢谢！

下图示例如果通过”设置“->”爬虫群“来做配置：


这篇教程《用爬虫群采集数据》介绍了如何启动爬虫群

如何爬取在博主主页中搜索关键词后的结果

12345wjl 发表于 2021-11-12 15:55
如何爬取在博主主页中搜索关键词后的结果

在博主主页中选择全部后，在搜索框中进行搜索，搜索完后，把网址输入到博主主页采集工具
https://weibo.com/dfjb?profile_f ... 7%BE%8E%E5%9B%BD#_0

wangyong 发表于 2021-11-12 16:34
在博主主页中选择全部后，在搜索框中进行搜索，搜索完后，把网址输入到博主主页采集工具
https://weibo. ...

好的，谢谢你

请问想要采集某位博主含有某关键词的所有微博，但在博主页面搜索后，网址不变，还是和原状态一样，那这样怎么采集含关键词的微博呢？谢谢

18555330731 发表于 2021-11-16 16:47
请问想要采集某位博主含有某关键词的所有微博，但在博主页面搜索后，网址不变，还是和原状态一样，那这样怎 ...

搜索了之后， 网址里会出现key_word参数， 比如我在博主”头条新闻“搜索关键词”新冠“， 网址变成了这样：
https://weibo.com/breakingnews?r ... 6%96%B0%E5%86%A0#_0

您好，请问展开全文采集如何提升速度，已经设了两个爬虫，但是太慢了

elsieanddonut 发表于 2021-11-28 13:41
您好，请问展开全文采集如何提升速度，已经设了两个爬虫，但是太慢了

单一一个电脑，不能再提升速度了，不然，会被微博封号。应该用多个电脑，登录同一个集搜客账号，但是，各自登录不同的微博账号，这样，他们就能分担采集任务。

旗舰版初始是5台电脑，还可以另外购买电脑配额

请问这个采集之后有附带签到地点信息吗

HJ740113927 发表于 2021-12-9 00:03
请问这个采集之后有附带签到地点信息吗

原微博有显示的就会采集下来，没有的采集不到