项目详情
由
分享
HelloGitHub 评分
10.0
3 人评分
LLM 友好的异步爬虫框架
过去 7 天共收获 278 颗 Star ✨
使用方向键查看日期,Home 和 End 跳至首尾,Escape 关闭提示。| 日期 | Star | 较前日 |
|---|---|---|
| 周四 | 86,954 | — |
| 周五 | 87,006 | +52 |
| 周六 | 87,057 | +51 |
| 周日 | 87,101 | +44 |
| 周一 | 87,148 | +47 |
| 周二 | 87,192 | +44 |
| 周三 | 87,232 | +40 |
87.2k
星数
否
中文
Python
主语言
是
活跃
104
贡献者
331
Issues
否
组织
无
最新版本
9k
Forks
Apache-2.0
协议
这是一款用 Python 开发的异步爬虫框架,能够将网站上的数据转化成 Markdown、JSON 等 LLM 友好的输出格式。它完全开源且免费,极大地简化了异步爬虫的编写。相比于付费的 Firecrawl,它具有更快的爬取速度,支持同时抓取多个 URL、页面截图、关键字优化提取(基于 LLM)和复杂的多页面会话管理等功能。
评论
评分:
暂无精选评论