【集微库】微博采集工具箱使用常见问题

xxdshzj 发表于 2017-11-12 10:01
为什么我只能采集到一条微博？

自己定义的规则？还是用微博采集工具箱？如果用微博采集工具箱，是哪个工具？实际网页上有多条数据吗？

微博主页信息采集出来的数据都是：无，是什么原因呢？

啦啦公主 发表于 2017-11-16 16:43
微博主页信息采集出来的数据都是：无，是什么原因呢？

说明数据没采集下来，在打数机窗口有看到开始采集了吗？，另外添加到微博主页工具的网址结构一定要和样本页面的网页结构一致才行，否则会采集出错。

集微库 - 微博博主详细资料采集工具：有看到打数机窗口开始采集，但是数据全部都是无。请问“微博博主详细资料”的样本页面是什么？

啦啦公主 发表于 2017-11-18 15:32
集微库 - 微博博主详细资料采集工具：有看到打数机窗口开始采集，但是数据全部都是无。请问“微博博主详细 ...

进入一个微博博主页面，比如，这个：https://weibo.com/u/2816792060?r ... ckname&is_all=1

请注意看，这个网址的格式，u/xxxxx一串数字，这是一个个人页面，分成个人和机构两种

你在这个工具中就是输入这类网址，个人和机构要分开输入，在工具箱的界面上有两个tab，分别对应他们。

DS打数机采集他们的时候，会进入这个页面，你会看到左栏有这样的栏目

DS打数机会自动点击下面的“查看更多”，进入到会员详情信息页面。这个工具就是采集会员详情信息的

Fuller 发表于 2017-11-18 16:11
进入一个微博博主页面，比如，这个：https://weibo.com/u/2816792060?refer_flag=0000015010_&from=feed& ...

是的，我看到打数机进到那个页面了。我用你给的链接进行操作的，可是结果还是显示无。急需这项爬虫功能，请多多指教。

啦啦公主 发表于 2017-11-18 16:36
是的，我看到打数机进到那个页面了。我用你给的链接进行操作的，可是结果还是显示无。急需这项爬虫功能， ...

我测试了一下，确实有些问题，我赶快让开发人员解决一下

啦啦公主 发表于 2017-11-18 16:36
是的，我看到打数机进到那个页面了。我用你给的链接进行操作的，可是结果还是显示无。急需这项爬虫功能， ...

您反应的问题已经得到修正，您可以再试试。
问题的原因是：如果添加的网址是https开头的，在对博主详细信息进行数据清洗时有bug

你好，请问使用 微博关键词搜索采集工具 下载的数据没有“展开全文”后面的内容，这个问题要怎么解决啊

_222333_ 发表于 2017-11-19 17:13
你好，请问使用 微博关键词搜索采集工具 下载的数据没有“展开全文”后面的内容，这个问题要怎么解决啊:diz ...

是什么样的页面？ 你发个网址我们研究下