开源项目、自托管平替与商业开源 (COSS) 研究库：按赛道找可二开底座

85 个

开源项目 · 按 Stars
项目	介绍	协议 / 语言	Stars	月访问	商业化
x.mdMCPpc-style/x-md为开发者、脚本和智能体将公开的 X 帖子、讨论串、个人资料、搜索结果和关注者列表转换为可读取的 Markdown 或 JSON。	为开发者、脚本和智能体将公开的 X 帖子、讨论串、个人资料、搜索结果和关注者列表转换为可读取的 Markdown 或 JSON。	MIT	28	—	—
Dataflow KitCOSSslotix/dataflowkit为个人及企业提供网页抓取和数据提取服务，可自动处理网页、搜索结果及动态页面，并将数据转换为多种格式。	为个人及企业提供网页抓取和数据提取服务，可自动处理网页、搜索结果及动态页面，并将数据转换为多种格式。	BSD	27	<5K	$10/月
TreeClipbluishwu/TreeClip面向需要收集网页文字的用户的轻量浏览器扩展，可按住 Shift 点选或框选文字、扩展选取同类内容并干净复制。	面向需要收集网页文字的用户的轻量浏览器扩展，可按住 Shift 点选或框选文字、扩展选取同类内容并干净复制。	—	19	—	—
CodexMCPwevm/curl.mdcurl.md 将网页内容转换为适合编码代理使用的 Markdown，帮助用户节省上下文和令牌。	curl.md 将网页内容转换为适合编码代理使用的 Markdown，帮助用户节省上下文和令牌。	non-standard	15	<5K	—
MorphCOSSopenaustralia/morph云端网页抓取工具，供用户编写、运行和复用网页抓取程序并获取数据。	云端网页抓取工具，供用户编写、运行和复用网页抓取程序并获取数据。	AGPL	12	8.5K	$14/月
KadoaMCPkadoa-org/congress-trading-monitor面向投资机构，通过 AI 代理构建、监控和修复网页数据管道，将经过验证的数据集和市场事件提醒交付至团队使用的工具。	面向投资机构，通过 AI 代理构建、监控和修复网页数据管道，将经过验证的数据集和市场事件提醒交付至团队使用的工具。	—	10	—	—
KameleoCOSSkameleo-io/kameleo为需要网页抓取、浏览器自动化和多账号管理的团队提供浏览器指纹伪装与反检测浏览器，支持在自有服务器上规模化运行。	为需要网页抓取、浏览器自动化和多账号管理的团队提供浏览器指纹伪装与反检测浏览器，支持在自有服务器上规模化运行。	MIT	9	82.5K	$49/月
Crawlee Cloudcrawlee-cloud/crawlee-cloud可自托管的平台，帮助开发者在自己的基础设施上部署和运行 Crawlee 与 Apify Actors 网页爬虫。	可自托管的平台，帮助开发者在自己的基础设施上部署和运行 Crawlee 与 Apify Actors 网页爬虫。	MIT	9	<5K	—
Aneiang.PaAneiangSoft/Aneiang.Pa面向 .NET 开发者的开源爬虫库，可抓取多个平台的热榜数据并支持自定义扩展。	面向 .NET 开发者的开源爬虫库，可抓取多个平台的热榜数据并支持自定义扩展。	MIT	9	—	—
RTILAMCPrtila-corporation/rtila-releases可在本机运行的 AI 网页自动化与数据提取桌面应用，面向自由职业者、研究团队和机构，帮助用户构建、运行并导出可销售的自动化程序。	可在本机运行的 AI 网页自动化与数据提取桌面应用，面向自由职业者、研究团队和机构，帮助用户构建、运行并导出可销售的自动化程序。	—	6	5.8K	$149/月
NoneCapCOSSnonecap/nonecap-extension托管型 hCaptcha 识别与破解 API 及浏览器插件，为自动化与爬虫提供有效的验证码响应 Token，按成功破解计费。	托管型 hCaptcha 识别与破解 API 及浏览器插件，为自动化与爬虫提供有效的验证码响应 Token，按成功破解计费。	—	5	9.2K	$20/月
CyberYozh DataMCPCyberYozh-data/yozh-scraperYozh Crawler + Scraper 为 AI 智能体和用户提供开源网站爬取与数据提取工具，可从单个网址遍历网站并输出结构化数据。	Yozh Crawler + Scraper 为 AI 智能体和用户提供开源网站爬取与数据提取工具，可从单个网址遍历网站并输出结构化数据。	—	5	—	—
HproxyMCPhproxy-com/free-proxy-list为需要网页采集、市场研究、广告验证和多账号管理的企业及代理团队提供按量付费的住宅、ISP、数据中心和移动代理，以及采集 API 和免费代理检测工具。	为需要网页采集、市场研究、广告验证和多账号管理的企业及代理团队提供按量付费的住宅、ISP、数据中心和移动代理，以及采集 API 和免费代理检测工具。	—	4	—	$1,800/月
fastCRWMCPfastcrw/crw面向 AI 智能体的开源网络抓取、搜索、抓取与提取 API，支持云端托管或使用 Rust 自建部署。	面向 AI 智能体的开源网络抓取、搜索、抓取与提取 API，支持云端托管或使用 Rust 自建部署。	MIT	3	16.9K	$13/月
meterCOSSreverse/meter-sdk为需要抓取网页并及时获知内容变化的团队提供自动化网页抓取、变更检测和 webhook 通知服务。	为需要抓取网页并及时获知内容变化的团队提供自动化网页抓取、变更检测和 webhook 通知服务。	—	3	<5K	$29/月
Feedstocktylergibbs1/feedstock面向 TypeScript 开发者的网页爬取库，支持浏览器自动化、深度爬取以及将网页转换为 Markdown 和结构化数据。	面向 TypeScript 开发者的网页爬取库，支持浏览器自动化、深度爬取以及将网页转换为 Markdown 和结构化数据。	Apache	3	—	—
ScrapeNinjarestyler/scrapeninja-api-php-client为需要规模化采集网站数据的用户提供网页抓取 API，并支持代理、浏览器模拟、重试和数据提取。	为需要规模化采集网站数据的用户提供网页抓取 API，并支持代理、浏览器模拟、重试和数据提取。	—	2	<5K	—
WayfernMCPzhom/wayfern-humanize为开发者及运行抓取和智能体的团队提供托管反检测浏览器、网页数据提取、搜索、验证码处理和 MCP 工具，按统一积分计费。	为开发者及运行抓取和智能体的团队提供托管反检测浏览器、网页数据提取、搜索、验证码处理和 MCP 工具，按统一积分计费。	—	2	—	$19/月
IntunedCOSSintuned/cookbook为开发者和团队提供浏览器自动化平台，通过 AI 生成和维护抓取及自动化代码，并大规模运行无 API 服务的集成、后台操作和数据迁移任务。	为开发者和团队提供浏览器自动化平台，通过 AI 生成和维护抓取及自动化代码，并大规模运行无 API 服务的集成、后台操作和数据迁移任务。	—	2	—	$25/月
GrabzItCOSSGrabzIt/grabzit为开发者及非开发者提供网页捕获、网页抓取、监控和格式转换工具，可将网页内容转换为图像、PDF、DOCX等并提取数据。	为开发者及非开发者提供网页捕获、网页抓取、监控和格式转换工具，可将网页内容转换为图像、PDF、DOCX等并提取数据。	non-standard	1	57.3K	$7/月
Capcatstayukasabov/capcat基于 Python 的 CLI/TUI FOSS 工具，可对指定网站或 RSS 来源进行合乎道德的存档。GitHub 仓库：https://github.com/stayukasabov/capcat。它采用 NLP、上下文工程、规范驱动开发和 LLM 生成。网站 http://capcat.org 已可正常使用，并提供使用说明和文档……	基于 Python 的 CLI/TUI FOSS 工具，可对指定网站或 RSS 来源进行合乎道德的存档。GitHub 仓库：https://github.com/stayukasabov/capcat。它采用 NLP、上下文工程、规范驱动开发和 LLM 生成。网站 http://capcat.org 已可正常使用，并提供使用说明和文档……	non-standard	1	<5K	—
StringMCPusestring/web-data-frontier-benchmark为开发者、AI 智能体构建者和投资团队提供网页抓取、搜索及结构化数据接口，并支持通过提示词创建定时数据源或委托团队管理数据管道。	为开发者、AI 智能体构建者和投资团队提供网页抓取、搜索及结构化数据接口，并支持通过提示词创建定时数据源或委托团队管理数据管道。	—	1	—	$1M/年自述
Webdogcontext-dot-dev/webdogwebdog.ai 帮助需要跟踪网站变化的用户监测网页更新，并提供可视化差异、AI 摘要和即时通知，支持自行部署。	webdog.ai 帮助需要跟踪网站变化的用户监测网页更新，并提供可视化差异、AI 摘要和即时通知，支持自行部署。	—	1	—	—
ExportTokCOSSexporttok/exporttok无需登录即可将 TikTok 视频评论导出为 CSV 或 Excel 文件的在线工具。	无需登录即可将 TikTok 视频评论导出为 CSV 或 Excel 文件的在线工具。	—	GitHub	2.8M	$10/月
OxylabsMCPoxylabs/web-api-mcp为企业和AI代理提供实时网页搜索、数据提取及代理基础设施，帮助大规模收集和利用公开网页数据。	为企业和AI代理提供实时网页搜索、数据提取及代理基础设施，帮助大规模收集和利用公开网页数据。	—	GitHub	388.9K	$30/月
ZenRowsMCPZenRows/cli为 AI 代理、数据和自动化团队提供抓取、提取、爬取及浏览网页数据的平台。	为 AI 代理、数据和自动化团队提供抓取、提取、爬取及浏览网页数据的平台。	MIT	GitHub	153.8K	$16/月
ScrapelessCOSSscrapeless-ai/langchain-scrapeless为 AI 智能体与自动化团队提供云端浏览器、网络爬虫 API 及网页解锁等基础设施服务。	为 AI 智能体与自动化团队提供云端浏览器、网络爬虫 API 及网页解锁等基础设施服务。	MIT	GitHub	138.9K	$49/月
SocialKitMCPSocialKit-API/skills为开发者、营销人员、研究人员和内容创作者提供社交媒体数据提取 API，可从多个平台提取视频转录、摘要、评论、统计数据和帖子。	为开发者、营销人员、研究人员和内容创作者提供社交媒体数据提取 API，可从多个平台提取视频转录、摘要、评论、统计数据和帖子。	—	GitHub	64.5K	$2,891
CoreClawCOSSCore-Claw/CoreClaw-Skill为企业、研究人员和开发者提供无需编写代码的网页数据抓取工具，将公开网页数据提取为结构化数据并支持导出或集成。	为企业、研究人员和开发者提供无需编写代码的网页数据抓取工具，将公开网页数据提取为结构化数据并支持导出或集成。	—	GitHub	53.7K	$29/月
AproxyCOSSisagalaev/highlight.js为需要规模化网页数据采集的个人和企业提供住宅代理网络及搜索结果抓取 API，支持 AI 数据收集、SEO 和市场研究。	为需要规模化网页数据采集的个人和企业提供住宅代理网络及搜索结果抓取 API，支持 AI 数据收集、SEO 和市场研究。	BSD	GitHub	36.5K	$17/月

第 2 / 3 页 · 当前展示 31–60 / 共 85 个开源项目

开源产品与代码仓库