Crawlee
面向 JavaScript 和 Python 开发者的开源网页抓取库,可处理拦截、爬取、代理和浏览器操作。
- 月访问
- 38.3K
- 下降28.6%环比2026 年 10 月
- 公开收入
- 未公开
- 暂无公开收入证据
- 入门价
- 免费
- 没有月付订阅价
- 首次发布
- 4 年前
- 2022-08-23 · 估算
访问
营销动作
发布、搜索与内容、引荐、促销在 Product Hunt 发布发布
Crawlee for Python is now out of beta with new features!
2025 年 9 月 30 日 · 14 个月前发布页
在 Show HN 发布(254 分 · 57 评论)发布
Crawlee for Python – a web scraping and browser automation library — Hey all, This is Jan, the founder of Apify ( ) — a full-stack web scraping platform. After the success of Crawlee for JavaScript ( ) and t…
2024 年 7 月 9 日 · 2 年前发布页
在 Show HN 发布(282 分 · 80 评论)发布
Crawlee – Web scraping and browser automation library for Node.js — Hey HN, This is Jan, founder of Apify, a web scraping and automation platform. Drawing on our team's years of experience, today we're laun…
2022 年 8 月 23 日 · 4 年前发布页
第三方评测与案例拆解
获客渠道拆解、工程师评测与开源档案- 创作者原帖摘录:
- Hey HN, This is Jan, founder of Apify, a web scraping and automation platform. Drawing on our team's years of experience, today we're launching Crawlee [1], the web scraping and browser automation library for Node.js that's designed for the fastest development and maximum reliability in production. For details, see the short video [2] or read the announcemen
- 核心亮点评测:
- Uses TypeScript and integrates with (abstracts) common headless browsers like Puppeteer & Playwright which makes it easier to keep scripts up to date. Manages queuing, storing results, scaling & proxies. Extensive docs and examples. Open source.
- 局限与权衡:
- Primarily designed to run locally (or in Docker), but there is a commercial SaaS option for hosting and scaling in the cloud.
- 适用人群:
- Developers using TypeScript and headless browsers should consider Crawlee for web scraping automation
- 创作者原帖摘录:
- Hey all, This is Jan, the founder of Apify ( https://apify.com/ ) — a full-stack web scraping platform. After the success of Crawlee for JavaScript ( https://github.com/apify/crawlee/ ) and the demand from the Python community, we're launching Crawlee for Python today! The main features are: - A unified programming interface for both HTTP (HTTPX with Beautif
开源仓库与自部署
流量来源
访问构成
渠道
- 自然搜索37%
- 外部引荐30%
- 直接访问29%
- AI 助手3%
国家/地区
- 美国33%
- 巴西14%
- 印度14%
- 越南4%
- 印度尼西亚4%
搜索
站点权重 —域名注册 2022-07-08
| 关键词 | 月搜索量 |
|---|---|
| apify | 962K |
| crawlee | 3,120 |
| sitemap crawler | 350 |
| cheeriocrawler | 300 |
| crawlee, scrapy | 220 |
流量数据:Vaneform
定价
官网未公开套餐价格。
试用:未提供 · 观察于 2026-11-03 · 来源页面
页面与变化
关键页面
每周快照- 首页crawlee.dev/
- 功能crawlee.dev/js 快照 2026-11-03
设计
白底居中粗体标题,细点状网格线贯穿版面,深色圆角按钮配橙色标志,下方浅灰代码块展示语法高亮。
首屏预览 · 点击放大
首屏讲了什么与转化路径
“Build reliable web scrapers. Fast.”
顶栏下居中标题与说明,中部左右两栏按钮与命令,底部通栏代码示例。
首屏转化路径:居中标题加按钮 + 代码块、终端或命令行 → 下载客户端 / 安装插件
- 结果与速度承诺
- 代码与终端
色板 · 点击复制
- 字体与排版
- 7.0
- 色彩与对比
- 7.0
- 构图与留白
- 7.0
- 细节与工艺
- 7.0
- 风格辨识度
- 6.0
结构
- 字体
- Inter / JetBrains Mono
- 首屏版式
- 居中标题加按钮
- 主视觉
- 代码块、终端或命令行
- 转化动作
- 下载客户端 / 安装插件
- 信任背书
- 无显式背书
- 导航
- 顶部通栏导航
- 明暗与密度
- 浅色 · 适中
- 圆角与层级
- 中圆角 · 细线分层
预览 AI 设计说明全文(含 :root CSS 变量与版式规则)只写风格参数,禁止复刻该产品的品牌名、标志、文案与图片
# 设计说明:极简单色(兼备精密网格)
黑白灰加一个强调色,细线分隔,大量留白,靠字号与字重分层级。
## 设计参数
```css
:root {
--background: #ffffff;
--surface: #f5f6f8;
--foreground: #1b1d24;
--muted-foreground: #6e7480;
--accent: #f58220;
--radius: 8px;
--font-heading: "Inter", ui-sans-serif, system-ui, sans-serif;
--font-body: "Inter", ui-sans-serif, system-ui, sans-serif;
--font-mono: "JetBrains Mono", ui-monospace, monospace;
}
```
色彩面积配比:背景 #FFFFFF(约 55%) · 面板 #F5F6F8(约 20%) · 正文 #1B1D24(约 12%) · 次要文字 #6E7480(约 8%) · 强调 #F58220(约 5%)。背景与面板占绝大部分面积,强调色只用于主按钮与当前激活状态。
## 版式与转化结构
- 首屏版式:居中标题加按钮
- 导航结构:顶部通栏导航
- 明暗与密度:浅色 · 适中
- 圆角与层级:中圆角;不用阴影,用细线与留白区分层级
- 主视觉载体:代码块、终端或命令行
- 转化动作:下载客户端 / 安装插件
- 标题切入点:结果与速度承诺
- 首屏组件特征:代码与终端
- 空间布局拆解:顶栏下居中标题与说明,中部左右两栏按钮与命令,底部通栏代码示例。
- 视觉特征总结:白底居中粗体标题,细点状网格线贯穿版面,深色圆角按钮配橙色标志,下方浅灰代码块展示语法高亮。
## 避免
- 多种强调色并用
- 渐变背景
- 重阴影
请按上面的设计参数与版式实现界面:颜色只用这些变量,强调色只给主要操作与当前状态。只采用这种风格,禁止复刻任何参考产品的品牌名、标志、文案与图片。
问题与证据
- Crawlee 的网站访问量是多少?
- Vaneform 估算 2026-10 网站访问量为 38.3K。访问量包含重复访问,付费客户数与收入需分别查看对应证据。来源
- Crawlee 是什么产品,支持哪些平台?
- Crawlee 归属「网页采集与提取」赛道:Crawlee 是一个面向 JavaScript 和 Python 开发者的开源网页抓取库,可处理拦截、爬取、代理和浏览器操作。。 支持平台包括:开放 API。
- Crawlee 是开源项目吗?采用什么协议?
- Crawlee 拥有公开代码仓库(https://github.com/apify/crawlee),采用 Apache-2.0 协议,记录有 3,714 个 GitHub Stars。来源
同分类研究对象
这些产品属于同一目录分类。选型时请进一步核对客户任务、功能与部署要求。