产品

Crawlee

面向 JavaScript 和 Python 开发者的开源网页抓取库,可处理拦截、爬取、代理和浏览器操作。

crawlee.dev 源码★ 3,714Apache-2.0 Discord数据与分析 / 网页采集与提取

AI 竞品立项评估
桌面端
移动端
月访问
38.3K
下降28.6%环比2026 年 10 月
公开收入
未公开
暂无公开收入证据
入门价
免费
没有月付订阅价
创作者
Marek Trunkát
未关联社交账号与 Martin Adámek、Szymon Marczak 共创
首次发布
4 年前
2022-08-23 · 估算

访问

月访问数据截至 2026 年 10 月
事件3 个变化

营销动作

发布、搜索与内容、引荐、促销
  • 在 Product Hunt 发布发布

    Crawlee for Python is now out of beta with new features!

    2025 年 9 月 30 日 · 14 个月前发布页

  • 在 Show HN 发布(254 分 · 57 评论)发布

    Crawlee for Python – a web scraping and browser automation library — Hey all, This is Jan, the founder of Apify ( ) — a full-stack web scraping platform. After the success of Crawlee for JavaScript ( ) and t…

    2024 年 7 月 9 日 · 2 年前发布页

  • 在 Product Hunt 发布发布

    Build reliable scrapers in Python

    2024 年 7 月 9 日 · 2 年前发布页

  • 在 Product Hunt 发布发布

    Build reliable web scrapers and robots, fast!

    2022 年 8 月 23 日 · 4 年前发布页

  • 在 Show HN 发布(282 分 · 80 评论)发布

    Crawlee – Web scraping and browser automation library for Node.js — Hey HN, This is Jan, founder of Apify, a web scraping and automation platform. Drawing on our team's years of experience, today we're laun…

    2022 年 8 月 23 日 · 4 年前发布页

第三方评测与案例拆解

获客渠道拆解、工程师评测与开源档案
Show HN
2022-08-23查看原文
创作者原帖摘录:
Hey HN, This is Jan, founder of Apify, a web scraping and automation platform. Drawing on our team's years of experience, today we're launching Crawlee [1], the web scraping and browser automation library for Node.js that's designed for the fastest development and maximum reliability in production. For details, see the short video [2] or read the announcemen
Console.dev
2023-03-16查看原文
核心亮点评测:
Uses TypeScript and integrates with (abstracts) common headless browsers like Puppeteer & Playwright which makes it easier to keep scripts up to date. Manages queuing, storing results, scaling & proxies. Extensive docs and examples. Open source.
局限与权衡:
Primarily designed to run locally (or in Docker), but there is a commercial SaaS option for hosting and scaling in the cloud.
适用人群:
Developers using TypeScript and headless browsers should consider Crawlee for web scraping automation
Show HN
2024-07-09查看原文
创作者原帖摘录:
Hey all, This is Jan, the founder of Apify ( https://apify.com/ ) — a full-stack web scraping platform. After the success of Crawlee for JavaScript ( https://github.com/apify/crawlee/ ) and the demand from the Python community, we're launching Crawlee for Python today! The main features are: - A unified programming interface for both HTTP (HTTPX with Beautif

开源仓库与自部署

GitHub 开源与智能体接入
最近提交 2026-11-06
GitHub 星标
★ 3,714
分支数 (Forks)
310
开源协议
Apache-2.0
主要语言
JavaScript

流量来源

2026 年 10 月

访问构成

渠道

  • 自然搜索37%
  • 外部引荐30%
  • 直接访问29%
  • AI 助手3%

国家/地区

  • 美国33%
  • 巴西14%
  • 印度14%
  • 越南4%
  • 印度尼西亚4%

搜索

站点权重 —域名注册 2022-07-08

关键词月搜索量
apify962K
crawlee3,120
sitemap crawler350
cheeriocrawler300
crawlee, scrapy220

流量数据:Vaneform

定价

官网未公开套餐价格。

试用:未提供 · 观察于 2026-11-03 · 来源页面

页面与变化

开始记录于 2022-08-23

关键页面

每周快照

变化

  1. 11 月 1 日 · 13 天前

    新增采用技术栈:Amazon CloudFront功能

    —→Amazon CloudFront

    当时 月访问 38.3K同期还有 2 个动作
  2. 11 月 1 日 · 13 天前

    移除技术栈:Product Hunt功能

    Product Hunt→—

    当时 月访问 38.3K同期还有 2 个动作
  3. 11 月 1 日 · 13 天前

    移除技术栈:Twitter Ads功能

    Twitter Ads→—

    当时 月访问 38.3K同期还有 2 个动作

设计

首屏视觉分析与 :root CSS

白底居中粗体标题,细点状网格线贯穿版面,深色圆角按钮配橙色标志,下方浅灰代码块展示语法高亮。

首屏预览 · 点击放大

首屏讲了什么与转化路径

“Build reliable web scrapers. Fast.”

顶栏下居中标题与说明,中部左右两栏按钮与命令,底部通栏代码示例。

首屏转化路径:居中标题加按钮 + 代码块、终端或命令行 → 下载客户端 / 安装插件

色板 · 点击复制

五维设计评分6.9 / 10
字体与排版
7.0
色彩与对比
7.0
构图与留白
7.0
细节与工艺
7.0
风格辨识度
6.0

结构

字体
Inter / JetBrains Mono
主视觉
代码块、终端或命令行
信任背书
无显式背书
导航
顶部通栏导航
明暗与密度
浅色 · 适中
圆角与层级
中圆角 · 细线分层
预览 AI 设计说明全文(含 :root CSS 变量与版式规则)只写风格参数,禁止复刻该产品的品牌名、标志、文案与图片
# 设计说明:极简单色(兼备精密网格)

黑白灰加一个强调色,细线分隔,大量留白,靠字号与字重分层级。

## 设计参数

```css
:root {
  --background: #ffffff;
  --surface: #f5f6f8;
  --foreground: #1b1d24;
  --muted-foreground: #6e7480;
  --accent: #f58220;
  --radius: 8px;
  --font-heading: "Inter", ui-sans-serif, system-ui, sans-serif;
  --font-body: "Inter", ui-sans-serif, system-ui, sans-serif;
  --font-mono: "JetBrains Mono", ui-monospace, monospace;
}
```

色彩面积配比:背景 #FFFFFF(约 55%) · 面板 #F5F6F8(约 20%) · 正文 #1B1D24(约 12%) · 次要文字 #6E7480(约 8%) · 强调 #F58220(约 5%)。背景与面板占绝大部分面积,强调色只用于主按钮与当前激活状态。

## 版式与转化结构

- 首屏版式:居中标题加按钮
- 导航结构:顶部通栏导航
- 明暗与密度:浅色 · 适中
- 圆角与层级:中圆角;不用阴影,用细线与留白区分层级
- 主视觉载体:代码块、终端或命令行
- 转化动作:下载客户端 / 安装插件
- 标题切入点:结果与速度承诺
- 首屏组件特征:代码与终端
- 空间布局拆解:顶栏下居中标题与说明,中部左右两栏按钮与命令,底部通栏代码示例。
- 视觉特征总结:白底居中粗体标题,细点状网格线贯穿版面,深色圆角按钮配橙色标志,下方浅灰代码块展示语法高亮。

## 避免

- 多种强调色并用
- 渐变背景
- 重阴影

请按上面的设计参数与版式实现界面:颜色只用这些变量,强调色只给主要操作与当前状态。只采用这种风格,禁止复刻任何参考产品的品牌名、标志、文案与图片。

问题与证据

Crawlee 的网站访问量是多少?
Vaneform 估算 2026-10 网站访问量为 38.3K。访问量包含重复访问,付费客户数与收入需分别查看对应证据。来源
Crawlee 是什么产品,支持哪些平台?
Crawlee 归属「网页采集与提取」赛道:Crawlee 是一个面向 JavaScript 和 Python 开发者的开源网页抓取库,可处理拦截、爬取、代理和浏览器操作。。 支持平台包括:开放 API。
Crawlee 是开源项目吗?采用什么协议?
Crawlee 拥有公开代码仓库(https://github.com/apify/crawlee),采用 Apache-2.0 协议,记录有 3,714 个 GitHub Stars。来源

同分类研究对象

数据与分析 / 网页采集与提取

这些产品属于同一目录分类。选型时请进一步核对客户任务、功能与部署要求。

查看「网页采集与提取」全部产品与定价基准 →