八爪鱼采集器app(八爪鱼采集器)

导读大家好,小下来为大家解答以上问题,八爪鱼采集器app,八爪鱼采集器很多人还不知道,现在让我们一起来看看吧!1、安装教程:八爪鱼采集器安

大家好,小下来为大家解答以上问题,八爪鱼采集器app,八爪鱼采集器很多人还不知道,现在让我们一起来看看吧!

1、安装教程:八爪鱼采集器安装教程

2、新手教程:八爪鱼采集器新手教程

3、第一步

4、首先,像往常一样,启动并登录你的八爪鱼采集器,进入主界面,点击【新建】下的【新建任务组】,创建一个新组。

5、单击“确定”创建新组。

6、第二步

7、创建组后,点击【新建】下的自定义任务,得到这样的界面。

8、我们可以寻找链接到我们想要抓取的网页。在这里,边肖去JD.COM搜索手机,当搜索结果出来时,我们可以复制链接。

9、将复制的链接粘贴到URL列,将任务组更改为之前创建的组,然后单击[保存设置]。

10、第三步

11、保存后会跳转到抓取界面,软件会自动开始识别网页中要抓取的部分。根据个人机器的网速不同,对应的等待时间也不同。

12、鉴定后可以看到数据很多,其中有很多无用的数据需要剔除。

13、将光标移到表格字段上,会出现两个图标。钢笔图标是更改字段名称,垃圾桶是删除这个字段。

14、我们可以随意删除和更改字段名,这里边肖只保留上图中的字段。

15、第四步

16、设置完字段后,我们将注意力转向上图中的小方框。第一个不是可选的,我们直接忽略。

17、收集前面的滚动页面加载更多的数据:因为现在很多网站都采用动态页面,有些内容在加载的时候是不会显示的,只有在我们下拉的时候才会逐渐显示,而这个功能就是为了防止这种情况的发生。

18、翻页并收集多页数据:设置为抓取多个页面,取消选中则只抓取当前页面。

19、点击列表中的XXX,收集下一级页面:该功能允许我们抓取子页面中的内容。

20、这里就不抓取了,只勾选前两项,然后点击【生成采集设置】。

21、点击生成后,您将开始保存或查看。点击此处保存并开始收集。

22、第五步

23、到了这个界面之后,我们可以看到一个详细的流程,里面的循环列表就是这个页面上爬取的内容。

24、我们单击外部循环的设置按钮。

25、退出循环设置,并检查循环执行的次数。在这里,我们只抓取3页。

26、开始收集。

27、收集,点击导出。

28、另外,如果你抓取的页面中有重复数据,软件会直接提示,根据你自己的情况选择保留或删除。

29、导出模式

30、保存导出文件的位置

31、保存完成

32、图像数据

33、以上是边肖带来的八爪鱼采集器自定义模块教程。熟练使用后,相信朋友们可以收集到更多的数据。使用八爪鱼采集器收集数据后,您可以根据收集的数据分析和完成各种任务。希望这篇文章能帮到你。

本文到此结束,希望对大家有所帮助。

免责声明:本文由用户上传,如有侵权请联系删除!