EasySpider：无需再写爬虫脚本，点点鼠标就“搬走”数据！

还在手写爬虫？今天介绍一款可视化爬虫软件，在GitHub上获得了42k的 Star，完全免费（包括商业使用和二次开发），让爬虫从此鼠标比键盘更“香”。

项目地址： https://github.com/NaiboWang/EasySpider

📖一、EasySpider介绍

EasySpider 是一个可视化、无代码的爬虫软件。

“所见即所得”：只需要在网页上选择自己想要操作的内容，并根据提示框操作即可完成任务的设计和执行，用鼠标点击操作。

同时软件还可以单独以命令行的方式进行执行，从而可以很方便的嵌入到其他系统中。

目前该项目已经发表了相关论文与专利：

• • This software has been accepted by The Web Conference (WWW) 2023 (中国计算机学会顶级会议，CCF A): EasySpider: A No-Code Visual System for Crawling the Web, April 2023.
• • 中国国家知识产权局发明专利，一种自定义提取流程的服务封装系统， 2022年5月。
• • 浙江大学硕士论文，面向WEB应用的智能化服务封装系统设计与实现，2020年6月。

⚙️二、核心功能点

可视化爬虫工具其实也有不少，EasySpider 的优势在于：

🧠🧩1. 智能识别 + 流程设计

它优秀的地方在于，当选择了一个元素后，会自动识别页面上所有同类型的元素，自动生成列表。对于需要登录、输入验证码、或者通过AJAX动态加载（就是那种“无限滚动”的瀑布流网页）的网站，也一样能应对。

我们可以在图形化界面里设计一整套逻辑，比如“先输入关键词搜索 -> 然后等待3秒 -> 再点击价格排序 -> 最后开始抓取数据”，可以像搭积木一样构建复杂的采集任务。

🧑‍💻🚀2. 不仅适用新手小白，也能支持专业需求

对于懂技术的同志们，EasySpider 支持“进阶玩法”。

支持在流程中插入自定义的 JavaScript 代码，可以处理一些刁钻的网页逻辑。它还支持多个客户端同时运行，让采集效率飙升。

📤📊3. 一键导出，格式任选

采集后，EasySpider 支持将结果导出为Excel、CSV、JSON等多种格式，也可以直接写入 MySQL（官方视频教程有手把手教学），应对下一步工作流，实现从数据采集到数据清洗。

🖱️三、上手体验“鼠标在手，数据我有”

三步即可快速体验：

⬇️🛠️第一步：下载与安装

进入项目的 GitHub Releases 页面（点击 “阅读原文” 即可快速下载），根据操作系统（Windows, Mac, Linux）选择下载对应的压缩包。解压后可以得到一个主程序和一个浏览器插件：

• • 运行主程序
• • 把插件拖到 Chrome 或 Edge 浏览器里完成安装。

⬇️🎯第二步：创建任务，锁定目标

打开 EasySpider 软件，在“任务设计”里新建一个任务，把想要爬取的网址粘贴进去，点击“开始设计”。软件会自动打开一个内置的浏览器窗口加载这个网页。

🧩⚙️第三步：配置流程（核心步骤）

1. 1. 选择数据： 在打开的网页上，鼠标移动到想要的数据上（比如文章标题），相应内容会被高亮显示。单击后，在弹出的对话框里，可以对这个字段命名（如：“title”），点击“采集该数据”，该页面上所有的标题都将被自动选中。
2. 2. 处理列表与翻页： EasySpider 会自动处理列表页翻页，只需滚动到页面底部，点击“下一页”按钮，然后在对话框中选择“循环点击该元素” -> “作为翻页按钮”。
3. 3. 进入详情页： 点列表里的链接→选择“循环进入该链接”，在详情页继续点选需要的字段。
   保存并执行，数据就像瀑布一样落下来。

所有操作完成后，保存任务，回到主界面，选中你的任务，点击“开始执行”。然后，你就可以静静地看它表演。

🔗官方软件使用示例

✅写在最后

EasySpider 用一种简单优雅的方式，令普通玩家也可以简单的从网上爬取所需数据，让我们不必把时间花在“写脚本”上。但千万注意：

• • 尊重目标站点条款，不抓禁抓、非公开或含个人敏感信息的内容。
• • 控制并发、设置等待与重试，别压垮对方服务。
• • 遵守项目的规定条款。

试试吧，你可能会重新规划你的工作方式。