当前位置:AIGC资讯 > 数据采集 > 正文

八爪鱼 ajax 循环采集,网页数据采集五大循环方式详解 - 八爪鱼采集器

在八爪鱼中,创建循环列表有两种方式,一种是通过点击页面元素,选择相似的项,由八爪鱼自动创建的。适用于列表信息采集、列表及详情页采集。当自动创建的循环不能满足需求的时候,则需要我们手动创建或者修改循环,以满足更多的数据采集需求。

循环的高级选项中,有五大循环方式:URL循环、文本循环、单个元素循环、固定元素列表循环和不固定元素列表循环。

一、URL循环(云采集可实现加速)

适用情况:在多个同类型的网页中,网页结构要相同

二、文本循环(云采集可实现加速)

适用情况:在搜索框中循环输入关键词,采集关键词搜索结果的信息

实现方式:通过文本循环方式,实现循环输入关键词,采集关键词搜索结果。

三、单个元素循环

适用情况:需循环点击页面内的某个按钮。例如:循环点击“下一页”按钮进行翻页。

实现方式:通过单个元素循环方式,达到循环点击“下一页”按钮,进行翻页目的。

定位方式:使用XPath定位,始终定位到“下一页”按钮。

操作示例:

① 选中“下一页”按钮 → 选择“循环点击下一页”,建立翻页循环。

② 循环方式为“单个元素循环”,通过“单个元素循环”中的定位XPath,不断点击“下一页”按钮实现翻页。

更新时间 2023-11-08