下拉刷新
项目详情
navbar_avatar分享
repo_avatar
HelloGitHub 评分
0 人评分
更像人类行为的爬虫框架
开源Apache-2.0
认领
收藏
分享
15.4k
星数
中文
TypeScript
主语言
活跃
95
贡献者
131
Issues
组织
3.11.5
最新版本
661
Forks
Apache-2.0
协议
更多
crawlee image
这是一个网页抓取和浏览器自动化库,特点是用它写的爬虫也不容易被识别出来(封/ban)。它提供了强大的代理池功能,可以根据实际流量自动切换和移除失效的 IP,支持无头浏览器、模拟浏览器和 TLS 指纹等爬取行为,以及 JavaScript 渲染、屏幕截图和 Puppeteer 等浏览器自动化功能。除了 NPM 包,还有最新开源的 Python 库。

评论

评分:
暂无精选评论