阿里巴巴采集器使用方法

阿里巴巴采集器使用方法

本文介绍使用八爪鱼采集器采集阿里巴巴数据（包括电话号码，以保温杯厂商为例）的方法。

采集网站：

https:///selloffer/offer_search.htm?keywords=%B1%A3%CE%C2%B1%AD&n=y&spm= a260k.635.3262836.d102

本文仅以保温杯厂商搜索结果页URL作为采集示例，大家需要采集其他产品厂商可以更换链接进行采集。

采集的内容：阿里巴巴商品标题，阿里巴巴厂家名称，阿里巴巴厂家电话（其他阿里相关的数据如果要采集的话也是可以添加的）

使用功能点：

●创建循环翻页

●商品URL采集提取

●创建URL循环采集任务

●修改Xpath

步骤1：创建阿里巴巴数据采集任务

1）进入主界面，选择“自定义采集”

2）将要采集的阿里巴巴列表或搜索结果页URL复制粘贴到输入框中，点击“保存网址”

3）打开网页的时候页面需要向下滚动才会出现所有的数据，所以可以在这一步设置一个高级选项，在滚动页面这里设置页面加载完成向下滚动，滚动次数设置3秒，每次间隔3秒，滚动方式选择“直接滚动到底部”。

4）保存网址后，页面将在八爪鱼采集器中打开，红色方框中的商品url是这次演示采集的信息

步骤2：创建翻页循环

1）将页面下拉到底部，找到下一页按钮，鼠标点击，在右侧操作提示框中，选择“循环点击下一页”

步骤3：采集阿里巴巴商品URL

1）如图，移动鼠标选中列表中商品的名称，右键点击，需采集的内容会变成绿色，然后点击“

选中全部”

2）选择“

采集以下链接地址”

3）点击“保存并开始采集”。根据采集的情况选择合适的采集方式，这里选择“启动本地采集”

说明：本地采集占用当前电脑资源进行采集，如果存在采集时间要求或当前电脑无法长时间进行采集可以使用云采集功能，云采集在网络中进行采集，无需当前电脑支持，电脑可以关机，可以设置多个云节点分摊任务，10个节点相当于10台电脑分配任务帮你采集，速度降低为原来的十分之一；采集到的数据可以在云上保存三个月，可以随时进行导出操作

步骤4：阿里巴巴商品数据采集及导出

1）采集完成后，会跳出提示，选择导出数据，导出后如下图

步骤5：创建URL列表采集任务

1）重新创建一个采集任务，将导出后的阿里巴巴商品链接复制，放到输入框中，点击“保存网址”

注意：输入框中的url列表数量不要超过2W个，超过的部分可以新建任务进行采集，url

打开的页面必须是相同网站样式相近的，否则会导致数据采集缺失。八爪鱼会自动去除重复和无效的网站。

2）在页面中点击需要采集的文本数据，比如厂家名称，点击“采集该元素文本”

3）打开流程图，修改采集字段名称，点击“保存并开始采集”

注意：点击右上角的“流程”按钮，即可展现出可视化流程图。

步骤6:修改Xpath

由于默认生成的Xpath定位不到所有的字段，所以需要修改，点开流程中的“点击元素”步骤，在右面的高级选项中把原来的Xpath“//A[text()='联系方式']

”改成“//A[contains()='联系方式']”。

5）高级选项设置， 选择“点击元素”步骤，打开高级选项，设置执行前等待“1

5秒”，勾选Ajax 加载，设置超时“15秒”

6）选择合适的导出方式，将采集好的数据导出采集完成，点击“导出数据”，一份完好的阿里巴巴数据（包括电话号码）就采集好了，导出后如下图

相关阅读：

58号码采集

qq群号码采集

阿里巴巴数据采集

阿里巴巴关键词采集：

/tutorialdetail-1/aliwordcj.html

百度地图商家地址和电话采集：

/tutorialdetail-1/jymsbddtcj.html

八爪鱼7.0版本——自定义模式使用方法以及介绍：

/tutorialdetail-1/zdyms.html

微信公众号文章正文采集：

/tutorialdetail-1/wxcjnotimg.html

使用八爪鱼7.0采集今日头条的数据：

/tutorialdetail-1/jrtt-7.html

八爪鱼——90万用户选择的网页数据采集器。

1、操作简单，任何人都可以用：无需技术背景，会上网就能采集。完全可视化流程，点击鼠标完成操作，2分钟即可快速入门。

2、功能强大，任何网站都可以采：对于点击、登陆、翻页、识别验证码、瀑布流、Ajax脚本异步加载数据的网页，均可经过简单设置进行采集。

3、云采集，关机也可以。配置好采集任务后可关机，任务可在云端执行。庞大云采集集群24*7不间断运行，不用担心IP被封，网络中断。

4、功能免费+增值服务，可按需选择。免费版具备所有功能，能够满足用户的基本采集需求。同时设置了一些增值服务（如私有云），满足高端付费企业用户的需要。