開源產品與程式碼倉庫

90 個

網頁採集與提取同市場領域商業產品 →領域行情 →首屏畫面與設計風格 →

開源專案 · 按 Stars
專案Stars操作
SadCaptchaCOSS專用於自動識別和繞過 TikTok 與 Shopee 各類驗證碼挑戰的 API 和自動化工具。35
Supacrawler用於抓取網際網路任意內容的無頭瀏覽器工具28
x.mdMCP為開發者、腳本和智慧體將公開的 X 貼文、討論串、個人資料、搜尋結果和追蹤者列表轉換為可讀取的 Markdown 或 JSON。28
Dataflow KitCOSS為個人及企業提供網頁抓取和資料提取服務,可自動處理網頁、搜尋結果及動態頁面,並將資料轉換為多種格式。27
txtify.it把網頁文章轉換成純文本,供開發者試用,也可聯繫獲取商業訪問。21
TreeClip面向需要收集網頁文字的使用者的輕量瀏覽器擴充功能,可按住 Shift 點選或框選文字、擴展選取同類內容並乾淨複製。19
TRAWLMCP可自託管的抓取引擎,供應用和 AI 代理抓取受保護網站,優先走 HTTP,必要時才打開瀏覽器。16
CodexMCPcurl.md 將網頁內容轉換為適合編碼代理使用的 Markdown,幫助使用者節省上下文和令牌。15
MorphCOSS雲端網頁抓取工具,供使用者編寫、運行和複用網頁抓取程式並獲取資料。12
KameleoCOSS平替 Multilogin · 為需要網頁抓取、瀏覽器自動化和多帳號管理的團隊提供瀏覽器指紋偽裝與反檢測瀏覽器,支援在自有伺服器上規模化運行。9
Crawlee Cloud可自託管的平台,幫助開發者在自己的基礎設施上部署和運行 Crawlee 與 Apify Actors 網頁爬蟲。9
Aneiang.Pa面向 .NET 開發者的開源爬蟲庫,可抓取多個平台的熱榜資料並支援自定義擴展。9
EnsembledataCOSS為開發者及相關機構提供社交媒體資料抓取 API,用於提取和分析 TikTok、Instagram、YouTube 等平台的公開資料。7
RTILAMCP可在本機運行的 AI 網頁自動化與資料提取桌面應用,面向自由職業者、研究團隊和機構,幫助使用者構建、運行並匯出可銷售的自動化程式。6
NoneCapCOSS託管型 hCaptcha 識別與破解 API 及瀏覽器外掛,為自動化與爬蟲提供有效的驗證碼響應 Token,按成功破解計費。5
Scraping Sandbox免費的網頁抓取練習網站,用開源電商示例資料供人練習資料提取、爬取與瀏覽器自動化。5
CyberYozh DataMCPYozh Crawler + Scraper 為 AI 智慧體和使用者提供開源網站爬取與資料提取工具,可從單個網址遍歷網站並輸出結構化資料。5
HproxyMCP為需要網頁採集、市場研究、廣告驗證和多帳號管理的企業及代理團隊提供按量付費的住宅、ISP、資料中心和移動代理,以及採集 API 和免費代理檢測工具。4
fastCRWMCP面向 AI 智慧體的開源網路抓取、搜尋、抓取與提取 API,支援雲端託管或使用 Rust 自建部署。3
meterCOSS為需要抓取網頁並及時獲知內容變化的團隊提供自動化網頁抓取、變更檢測和 webhook 通知服務。3
Feedstock面向 TypeScript 開發者的網頁爬取庫,支援瀏覽器自動化、深度爬取以及將網頁轉換為 Markdown 和結構化資料。3
ScrapeNinja為需要規模化採集網站資料的使用者提供網頁抓取 API,並支援代理、瀏覽器模擬、重試和資料提取。2
View Deleted RedditCOSSViewDeletedReddit幫助使用者按 Reddit 連結或使用者名搜尋多個公開檔案,找回已刪除的 Reddit 貼文和評論。2
IntunedCOSS為開發者和團隊提供瀏覽器自動化平台,通過 AI 生成和維護抓取及自動化程式碼,並大規模運行無 API 服務的整合、後台操作和資料遷移任務。2
WayfernMCP為開發者及運行抓取和智慧體的團隊提供託管反檢測瀏覽器、網頁資料提取、搜尋、驗證碼處理和 MCP 工具,按統一積分計費。2
GrabzItCOSS平替 Urlbox · 為開發者及非開發者提供網頁捕獲、網頁抓取、監控和格式轉換工具,可將網頁內容轉換為圖像、PDF、DOCX等並提取資料。1
StringMCP為開發者、AI 智慧體構建者和投資團隊提供網頁抓取、搜尋及結構化資料接口,並支援通過提示詞建立定時資料源或委託團隊管理資料管道。1
Capcat基於 Python 的 CLI/TUI FOSS 工具,可對指定網站或 RSS 來源進行合乎道德的存檔。GitHub 倉庫: NLP、上下文工程、規範驅動開發和 LLM 生成。1
Webdogwebdog.ai 幫助需要跟蹤網站變化的使用者監測網頁更新,並提供可視化差異、AI 摘要和即時通知,支援自行部署。1
ExportTokCOSS無需登入即可將 TikTok 影片評論匯出為 CSV 或 Excel 文件的線上工具。GitHub
第 2 / 3 頁 · 當前展示 31–60 / 共 90 個開源專案