標籤: 爬蟲 頁1

爬蟲相關的文章,目前共收錄 31 篇內容。

Firecrawl:把任何網站轉成 AI 可直接使用資料的網頁擷取平台
網路資源

Firecrawl:把任何網站轉成 AI 可直接使用資料的網頁擷取平台

Firecrawl 是專為 AI 與 LLM 打造的網頁擷取平台,可將網站內容轉換為乾淨的 Markdown 或結構化資料,支援 RAG、AI Agent 與知識庫建置,大幅簡化網頁資料處理流程。

Scrapy:Python 最強大的開源爬蟲框架,打造高效資料抓取系統
網路資源

Scrapy:Python 最強大的開源爬蟲框架,打造高效資料抓取系統

Scrapy 是 Python 最成熟的爬蟲框架之一,提供高效能非同步抓取、模組化架構與資料處理流程,適合建立大規模、可維護的網站資料擷取與 AI 資料管線系統。

Cloudflare Crawl Endpoint:用 API 快速抓取網站內容的雲端爬蟲服務
網路資源

Cloudflare Crawl Endpoint:用 API 快速抓取網站內容的雲端爬蟲服務

Cloudflare Crawl Endpoint 是 Cloudflare Browser Rendering API 的功能之一,讓開發者透過 REST API 抓取網站內容並支援 JavaScript 渲染。本文介紹其核心概念、功能特色與應用場景,了解如何用雲端方式建立網站爬蟲系統。

Scrapling:結合 AI 的智慧型 Python 爬蟲工具,讓資料擷取更聰明
網路資源

Scrapling:結合 AI 的智慧型 Python 爬蟲工具,讓資料擷取更聰明

網站一改版爬蟲就壞掉?Python 網頁擷取工具 Scrapling 幫你解決痛點!這款 GitHub 開源專案打破傳統 CSS/XPath 限制,以更智慧、具彈性的元素定位機制,大幅提升爬蟲穩定度。無論是價格監控或自動化資料擷取,立即將這款「抗改版」神器加入你的技術清單!

Anubis:為開發者而生的開源反爬蟲與 Bot 防護守門員
網路資源

Anubis:為開發者而生的開源反爬蟲與 Bot 防護守門員

Anubis 是開源 Bot 防護工具,專為阻擋 AI 爬蟲與自動化流量設計,可自架、透明可控,協助網站降低負載並保護內容資源。

ScrapeCraft:AI 網頁爬蟲編輯器,一鍵建立視覺化流程
網路資源

ScrapeCraft:AI 網頁爬蟲編輯器,一鍵建立視覺化流程

ScrapeCraft 是一款開源的 AI 驅動可視化網頁資料擷取工具,透過自然語言+流程編輯器打造爬蟲管道,支援批量網址、程式碼自動生成、結果視覺化,適合開發者與資料團隊使用。

Open Agent Builder:用視覺化流程打造 AI Agent 的開源工具
網路資源

Open Agent Builder:用視覺化流程打造 AI Agent 的開源工具

Open Agent Builder 是一款開源的視覺化 AI Agent 流程設計工具,讓使用者透過拖拉式介面建立具抓取、分析、邏輯控制能力的智能代理,快速構建自動化任務與多步驟工作流。

BrowserAct:免程式碼 AI 網頁爬蟲,自動化收集任何網站資料
網路資源

BrowserAct:免程式碼 AI 網頁爬蟲,自動化收集任何網站資料

BrowserAct 是 AI 驅動的免程式碼網頁爬蟲平台,支援自然語言操作、自動維護與雲端執行,幫助使用者快速建立穩定的資料收集流程。

Magnitude:以「視覺為先」的開源瀏覽器自動化與測試框架
網路資源

Magnitude:以「視覺為先」的開源瀏覽器自動化與測試框架

Magnitude 是開源 AI 瀏覽器自動化平台,支援自然語言操作、資料擷取與 UI 測試,適用無 API 網頁流程,專為開發者與資料工程師打造。

Crawlee:高效又彈性的網頁爬蟲與自動化框架
網路資源

Crawlee:高效又彈性的網頁爬蟲與自動化框架

Crawlee 是 Apify 推出的開源爬蟲與自動化工具,支援 Node.js 與 Python,整合瀏覽器模擬、反阻擋策略與代理輪替,快速打造穩定爬蟲專案。

Scraperr:免寫程式、自架網站的開源爬蟲服務
網路資源

Scraperr:免寫程式、自架網站的開源爬蟲服務

Scraperr 是 self-hosted 圖形化網頁爬蟲工具,免寫程式碼即可透過 XPath 擷取資料、管理任務,支援媒體下載與結果匯出。

AnyCrawl:Node.js/TypeScript 的高效 AI 網頁爬蟲框架
網路資源

AnyCrawl:Node.js/TypeScript 的高效 AI 網頁爬蟲框架

AnyCrawl 是一款開源高效網頁爬蟲工具,支援 SERP 抓取、全站遍歷與 LLM 結構化輸出,採用 Node.js 開發,支援多執行緒與 Docker 部署,適合大規模自動化資料蒐集。

WaterCrawl:AI 驅動的網站爬蟲與資料擷取平台
網路資源

WaterCrawl:AI 驅動的網站爬蟲與資料擷取平台

WaterCrawl 是專為 LLM 資料建構設計的開源爬蟲框架,支援精準擷取、AI 處理與多語言 SDK,適合需自控與透明化的技術團隊使用。

Jina AI:專為開發者設計的開源 AI 爬蟲、搜索與資訊檢索工具
網路資源

Jina AI:專為開發者設計的開源 AI 爬蟲、搜索與資訊檢索工具

Jina AI 是專注於開源神經搜索技術的公司,提供高效資訊檢索工具。主要產品包括 DeepSearch 深度檢索、Reader 網頁內容轉換、Embeddings 多模態嵌入、Reranker 搜索結果優化、Classifier 圖像與文字分類,以及 Segmenter 長文本切分,助力開發者構建多模態 AI 應用。

Scrapeless:無需寫程式,輕鬆擷取網頁資料的 AI 工具
網路資源

Scrapeless:無需寫程式,輕鬆擷取網頁資料的 AI 工具

Scrapeless 是 AI 驅動的網頁資料擷取工具,支援真實指紋模擬、AI 自動擷取、驗證碼解算與代理 IP 輪替,突破防爬機制,無需撰寫程式即可高效擷取公開網站資訊,適用於電商監控、競爭分析與商業情報收集。

Lindy:全方位個人 AI 助理,幫助你提高工作效率、簡化任務
網路資源

Lindy:全方位個人 AI 助理,幫助你提高工作效率、簡化任務

Lindy 是一款強大的 AI 個人助理,能自動化電子郵件管理、會議記錄、時程安排、客戶服務和潛在客戶開發等日常任務。結合智能篩選與個性化操作,Lindy 可大幅提升工作效率,幫助用戶專注於高價值任務,成為職場效率提升的得力助手。

Flyscrape:無代碼、自訂網頁爬蟲的高效解決方案
網路資源

Flyscrape:無代碼、自訂網頁爬蟲的高效解決方案

Flyscrape 是一款無代碼網頁數據抓取平台,用戶可在數分鐘內創建網頁抓取器,適合電商數據、評論內容和產品資訊等需求。其功能包括無代碼抓取器配置、JavaScript 渲染支持、Cookie 整合、高靈活抓取設定、jQuery 式 API 和即時結果預覽等。這款工具適合市場行銷、數據分析、內容創作和研究人員,降低技術門檻,讓非技術用戶也能輕鬆獲取並結構化數據,提升數據管理與分析效率。

MrScraper:AI 驅動的網頁數據抓取工具
網路資源

MrScraper:AI 驅動的網頁數據抓取工具

MrScraper 是一款專為網頁數據抓取設計的 AI 工具,允許用戶輕鬆從任何網站提取所需數據。它支援自動化抓取,能夠通過提供網址和指令來自動提取訊息,並處理多種網頁資料格式。這個工具對於生成潛在客戶名單、提取聯絡訊息、社群資料等應用場景非常有用。MrScraper 不僅支援無代碼操作,還可以通過 API 和 Zapier 進行整合,讓數據抓取和自動化工作變得更加簡單高效。