Scrapling 开源爬虫快到 10 万星，还能接 AI 干活

爬虫项目：Scrapling 已经 90K 🌟了啊！猛啊！！ 一直关注着，回头一年快 100K 了，这就能证明一些事情了。。

它能帮你自动从网站上收集资料、提取信息的开源工具，还可以接入 AI，让 AI 帮你完成这些工作。

举个电商应用例子： 你想研究 20 个同行网站上的产品价格、卖点和用户评价。 以前，你需要一个个打开网站，复制内容，再交给 AI 整理。 现在，可以让 Scrapling 批量获取这些网页上的信息，再让 AI 分析、比较，最后整理成表格。

我认为下面几个场景最有实际价值：

1. 自媒体选题和素材收集 比如让它收集指定博客、媒体网站上的文章标题、发布时间、正文，再交给 AI 寻找热门话题和选题方向。

2. 电商竞品调研 刚说过，也可以查竞品的评论数据。

3. 建立自己的 AI 知识库 把指定文档网站、教程网站的公开内容批量提取为 Markdown，供 AI 检索和分析。

4. 招聘和商业信息整理（有商业价值）

5. 给 AI Agent 增加网页信息采集能力 配置 MCP 后，支持该协议的 AI 工具可以调用 Scrapling 访问网页、提取指定内容，部分情况下还能操作浏览器。

Scrapling 针对网页结构发生一些变化后，它有机会重新找到要提取的内容，减少维护工作。 值得一试！