八爪鱼采集器

八爪鱼采集器软件是一款免费试用数据采集软件功能强大简易采集软件支持100款以上的网站数据源，智能代理IP采集避免防封，由5000台云服务器支撑云采集24小时不间断，全自动化数据采集格式支持定时功能哦。

八爪鱼采集器官方版介绍

八爪鱼采集器可以采集获取任何一个网页信息的必备的采集工具，它彻底改变了我对爬虫和采集器的认识，让网页数据采集变得前所未有的简单，如果你正在寻找一款好用的采集软件，八爪鱼绝对是最好的选择。

不仅使用简单，而且功能强大：点击，登陆，翻页，甚至识别验证码，当网页出错误，或者多套模版完全不一样的时候，还可以根据不同情况做不同的处理。

配置好采集任务，就可以关机了，任务可以在云端执行，数量庞大的企业云，24*7不间断运行，再也不用担心IP被封，网络中断了，还能瞬间采集大量数据。

和市面上其他采集软件不同的是，八爪鱼采集器没有繁杂的采集规则设置，通过鼠标点击几次就可以成功配置一个采集任务，把体验做到了极简，大幅度提高了工作效率。用一句话形容八爪鱼采集器，那就是：追本朔源，将一切行为回归到人的本性。”

软件特色

简易采集

简易采集模式内置上百种主流网站数据源，如京东、天猫、大众点评等热门采集网站，只需参照模板简单设置参数，就可以快速获取网站公开数据。

智能防封

八爪鱼采集可根据不同网站，自定义配置组合浏览器标识(UA)，全自动代理IP，浏览器Cookie,验证码破解等功能，实现突破绝大多数网站的防采集策略。

无限层级采集

很多主流新闻、电商类的网站，里面包含一级商品列表页，也包含二级商品详情页，还有三级评论详情页面；不论网站有多少层级，八爪鱼都可以不限制层级的采集数据，满足各类业务采集需求。

支持网站登录后采集

八爪鱼内置了采集登录模块，只需配置目标网站的账号密码，即可用该模块采集到登录后的数据；同时八爪鱼还具备采集Cookie自定义功能，首次登录以后，可以自动记住cookie，免去多次输入密码的繁琐，支持更多网站的采集。

云采集

由5000多台云服务器支撑的云采集，7*24小时不间断运行，可实现定时采集，无需人员值守，灵活契合业务场景，帮你提升采集效率，保障数据时效性。

API接口

通过八爪鱼API，可以轻松获取八爪鱼任务信息和采集到的数据，灵活调度任务，比如远程控制任务启动与停止，高效实现数据采集与归档。基于强大的API体系，还可以无缝对接公司内部各类管理平台，实现各类业务自动化。

自定义采集

针对不同用户的采集需求，八爪鱼可提供自动生成爬虫的自定义模式，可精准批量识别各种网页元素，还有翻页、下拉、ajax、页面滚动、条件判断等多种功能，支持不同网页结构的复杂网站采集，满足多种采集应用场景。

便捷定时功能

简单几步点击设置，即可实现采集任务的定时控制，不论是单次采集的定时设置，还是预设某一天或是每周每月的定时采集，都可以同时对多个任务自由进行设置，根据需要对选择时间进行多重组合，灵活调配自己的采集任务。

全自动数据格式化

八爪鱼内置了强大的数据格式化引擎，支持字符串替换、正则表达式替换或匹配、去除空格、添加前缀或后缀、日期时间格式化、HTML转码等多项功能，采集过程中全自动处理，无需人工干预，即可得到所需格式数据。

更新日志：

主要体验改进

优化网页列表数据自动识别，将识别率提高到90%以上

Bug修复

解决自定义配置中循环输入文本中循环项重复的问题

解决自定义配置当前页面数据预览中有时会多出一列空数据的问题

解决自定义配置中有时候自动识别生成的采集流程不正确的问题

解决自定义配置当前页面数据预览中拖动改变字段顺序后修改字段名错误的问题

解决本地采集中部分网页Cookie不生效问题

解决自定义配置中自动识别生成的采集字段中有空格的问题

解决本地采集中部分网站无法滚动加载数据的问题

解决本地采集中某些情况下数据格式化不正确的问题

解决自定义配置提取数据配置中修改字段后没有应用也生效的问题

解决自定义配置中部分网页自动识别有时会卡住的问题

解决自定义配置自动识别的数据预览中有时修改字段名会白屏的问题

解决主界面左侧账户过期时间显示的问题

解决自定义配置中某些操作会造成流程图错乱的问题

八爪鱼采集器怎么用

1、打开八爪鱼采集器的客户端，登陆软件之后新建一个任务，打开你要采集的网站地址。这里我自己示范的原创设计手稿的采集。

2、进入到设计工作流程环节，在界面浏览器那输入你要采集的网址，点击打开，你就能看到你要采集的网站界面，由于这个网址存在多页内容需要采集，我们再设置采集规则的时候，可以先建立翻页循环，先把鼠标选择页面上的【下一页】按钮，在弹出的任务对话框，选择高级选项中的【循环点击下一页】，软件会自动建立一个翻页循环。

3、建好翻页循环好，就是采集当前页上的内容，我要采集图片的URL，就选中一个图片，然后单击，软件会自动弹出对话框，先建立一个元素循环列表。当前页面的所有元素都被抓取后，循环列表则建立完成。

4、设置要抓取的内容，选择元素循环列表中的任意一个元素，在浏览器内找到该元素对应的图片，点击后弹出对话框，选择【抓取这个元素的图片地址】为字段1，同时我为了方便识别，还抓取了字段2为图片标题名称，设置原理同图片地址。

5、检查一下，翻页循环框应该将产品循环框嵌套在内，表示，先抓取完当前一整页的图片URL后再翻页。

6、设置执行计划后，就可以开始采集了，单击采集的话，直接点击【完成】步骤下的【检查任务】，开始运行任务。采集完毕后可以直接下载成excel的文件。

7、将URL转换为图片，这里用八爪鱼图片转换工具，将EXCEL导入之后，就可以自动等待系统将图片下载下来了！