WhimRead 需要 JavaScript 才能使用站内搜索。
Whim
Read
随手一翻
发现
全部工具
推荐
惊喜
关于
搜索
English
库 / 框架
crawlee
apify/crawlee
Node.
js
网页
抓取
与
浏览器
自动化库,
支持
HTTP
与
无头
浏览器
爬取
并
提供
代理
与
存储
能力。
去 GitHub 看仓库
复制链接
标签
web-scraping
web-crawling
npm
headless-chrome
puppeteer
automation
apify
scraping
同类项目
crawlee-python
9.7k
Python
网页
抓取
与
浏览器
自动化库,
统
一
HTTP
与
无头
浏览器
抓取,
支持
代理
轮换
与
可靠
数
据持久化。
spider
2.9k
Rust
编写
的
高并
发网页
爬
虫
引擎,
支持
流式
抓取
无头
渲染
与
分布式,
可
为
RAG
输送
网页
数
据
puppeteer
95.9k
通过
DevTools
协议
控制
Chrome/Firefox
的
JavaScript
库,
常
用于
自动化
测试
与
网页
抓取。
ferrum
2.1k
Ruby
控制 Headless Chrome
的
高层
API,
基于
CDP
实现
页
面
导航、
点击
输入、
JS
执行
与
截图,
无
需 Selenium。
browserless
1.8k
基于
Puppeteer
的
Node.js
无头
Chrome
驱动库,
封装
截图、
生成
PDF、
提取
HTML/
文本
等
浏览器
自动化
能力。
Scrapegraph-ai
32.7k
基于
大模型
的
Python
网页
抓取库,
只需
提示
词即
可
抽取
网页
数据,
支持
多
流
水线
与
本
地
模型。
26429
web-scraping,web-crawling,npm
Node.js网页抓取与浏览器自动化库,支持HTTP与无头浏览器爬取并提供代理与存储能力。
←
上一个
llm-council
下一个
→
readest