EasySpider教程
基础
进阶
参数
本文详细说明了EasySpider命令行执行时可使用的参数，帮助用户理解如何通过命令行配置任务，并执行自动化数据抓取任务。
ocr
通过OCR技术可以自动识别网页中的验证码并输入，本文介绍如何使用OCR型验证码的识别与输入方法，适合需要多次输入验证码的任务。
判断
通过JavaScript实现循环中对多个关键词的判断，适用于数据爬取中的复杂条件筛选，尤其是针对表格中的特定列。
爬虫
在EasySpider中实现自动退出与数据保存，通过编写Python代码，确保爬虫程序在满足条件时能安全退出并保存数据。
HTTP
当输入HTTP网址时，浏览器可能会自动跳转到HTTPS，导致任务失败，本文提供解决方法，确保任务正常采集HTTP网站。
html
通过XPath和正确的采集设置，可以获取HTML页面head标签中的内容和属性信息，本文讲解具体操作方法。
提取
本文介绍如何在数据提取任务中获取输入的参数和当前网址，将其合并到提取数据字段中并输出到Excel。
循环点击
在MacOS系统中循环点击链接时遇到的右键点击问题可以通过设置调整解决，本文提供了具体的解决方案。
爬取
在爬取网页时，有时页面上看不到的数据可以在源码中找到，本文讲解如何通过XPath提取这些隐藏数据。
采集
树形结构的数据采集可以通过循环嵌套的方式实现，本文提供了动态修改XPath的方法，确保数据在Excel中以正确的层级关系展示。
输入
本文讲解如何使用Excel文件逐行输入数据到网页文本框，确保在循环任务中每一行数据都能正确输入。
采集
在EasySpider中如何采集不定长、字段名不同的列表，通过设置变量字段名和循环条件实现灵活采集。
RSS
通过XPath提取RSS地址中的XML数据，使用EasySpider轻松处理XML文件并提取所需信息。
CentOS
在CentOS上编译ElectronJS程序并处理权限错误，解决ChromeDriver及ElectronJS的常见问题。
弹窗
在遇到网页弹窗遮挡图形验证滑块时，可以通过关闭弹窗或调整页面来顺利完成验证。
错误
通过检测网页中的特定错误信息，如503或403错误，设计自动刷新机制，在EasySpider中确保稳定的网页爬取。
退出
在命令行中运行EasySpider任务后，添加`--keyboard 0`参数可以确保任务结束后自动退出。
共享
在EasySpider中，用户可以通过迁移任务文件实现跨平台共享，并使用任务模板来简化操作，实现个性化需求。
执行
在MacOS上通过命令行运行EasySpider任务时，正确使用`cd`和`./`命令，避免路径和文件错误，确保任务顺利执行。
指定
在EasySpider中，用户可能会遇到修改下载路径无法保存的问题。本文提供了解决方法和替代方案，以确保文件能下载到指定路径。
Excel
EasySpider支持读取Excel文件，并可通过命令行进行自动文件检测。本文介绍如何操作并实现自动化文件流程。
Chrome
本文介绍如何解决在MacOS系统上，因Chrome自动更新导致任务执行失败的问题，并提供了详细的解决步骤。
复制
EasySpider支持任务复制功能，允许用户在修改采集任务时保留原任务不变。本文介绍如何通过另存为和迁移JSON文件来实现任务的复制与管理。
自动
EasySpider支持通过Excel文件进行自动化循环输入查询，本文介绍如何配置Excel文件实现自动查询输入，提升查询任务的自动化效率。
无浏览器
EasySpider是一款强大的爬虫工具，支持无浏览器界面下执行任务。本文将详细介绍如何在Ubuntu上无界面运行EasySpider任务，并提供相关操作步骤。
实战
运行示例
本文介绍如何在Docker中运行Selenium Chrome镜像，并通过Selenium Hub管理多个浏览器实例以便执行多任务。
样例
本文详细介绍了如何安装EasySpider并通过它来获取ebay网站的商品数据，适用于Windows、MacOS、Linux系统。
执行
本文介绍如何在Windows、MacOS和Linux操作系统中通过定时任务功能实现EasySpider程序的自动化执行，方便用户定期抓取网络数据。
API调
本文介绍如何通过POSTMAN动态配置EasySpider任务，使用API调用生成新的任务ID，并配合命令行执行自动化任务。
流程
本文介绍如何在Windows x64/x32环境下使用命令行执行EasySpider任务，包括如何获得任务ID、复制命令并通过PowerShell执行。
逻辑
本文介绍如何通过Excel操作或者使用EasySpider的V0.6.0版本来解决数据交错的问题，确保提取的数据能够正确匹配。
用法
本文通过一个自动翻页并检测内容变化的实例，展示如何在Python中使用EXEC和EVAL函数动态执行代码，帮助理解这两个函数的实际应用。
窗口
本文介绍如何通过EasySpider自定义操作功能，使用Python代码调整浏览器窗口大小或将其最大化，适用于各种自动化任务。
处理
本文介绍了在使用iframe进行登录时，操作台挡住登录页面输入框或二维码的处理方法，并提供了两种解决方案，包括关闭操作台和调整iframe大小以适应自动化任务设计。
循环
本文介绍了如何通过设置循环次数（包括无限循环）和条件判断，实现页面内容检测，确保页面加载完全后再提取数据的自动化任务设计。
翻页
本文介绍如何通过EXEC和EVAL函数，在没有“下一页”按钮的情况下实现翻页操作，以中国地震台网为例，展示如何设计自动化翻页逻辑。
unbuntu
在无图形界面的Ubuntu系统上运行EasySpider时需要借助Docker，本文讲解了如何解决运行问题并提供了相关操作建议。
截取
通过在无头模式下调整浏览器窗口大小，可以截取网页的完整图像，适用于无法直接获取完整网页截图的情况。
代理
在Windows系统中，无需在程序内部设置代理，直接通过系统或浏览器配置代理即可解决网络代理问题。
XPath
在任务运行过程中，最终定位的XPath由多个部分拼接组成，本文将讲解如何避免不需要的XPath拼接并正确设置元素定位。
提取
本文介绍如何解决EasySpider在任务执行时XPath无法识别的问题，并讲解如何使用正则表达式和CSS Selector进行内容提取。
定时
本文将介绍如何在Windows、MacOS和Linux系统下定时自动执行EasySpider任务，并提供详细操作步骤，让你轻松实现任务的自动化管理。
×
初次访问：反爬虫，人机识别
反爬虫抓取，人机验证，请输入验证码查看内容
请关注本站公众号回复关键字:“2024”，获取验证码。
微信搜索公众号:“RPA编程教程”或者“rpa1499” 或微信扫描上方二维码关注微信公众号
RSS