| 标题 | 分类 | 备注 |
|---|---|---|
| watercrawl | 爬虫服务 | 商业爬虫 |
| sync-your-cookie | 爬虫 | cookie多端同步 |
| ProxyCat | 代理 | 代理自动切换,IP池 |
| magentic-ui | 爬虫 | 集成微软的ai模型实现自动化爬虫与脚本执行 |
| Scrapling | 爬虫 | 能自适应css的改变仍然能抓到内容 |
| MediaCrawler | 爬虫 | 电商、视频的爬虫方案,基于playwright ,主要爬评论 |
| camoufox | 反机器人爬虫 | 具有非常强的反机器人能力的无头浏览器爬虫,属于定制的firefox |
| scrapydweb | 爬虫 | 爬虫的集中管理 |
| playwright_stealth | 爬虫 | 绕过常见的一些网页验证 |
| InfoSpider | python爬虫 | 个人数据 |
| scrawler | 爬虫 | 爬取国外社交网络的图片,只能在widnows上用 |
| scrapyd | 爬虫 | 爬虫到守护进程 |
| solverecaptchas | 爬虫 | 验证码Playwright eCAPTCHA v2 |
| DrissionPage | 爬虫 | 国产爬虫插件结合request和无头浏览器 |
| grab | 爬虫 | 超级简洁的爬虫框架 |