使用 AI 代理、Bright Data MCP 和 Google 試算表來爬取 10times 活動資料 - n8n 工作流程

使用這個強大的 n8n 工作流範本,從 10times.com 爬取詳細的活動資料(參加者回饋、舉辦地點、類別),並使用 AI 代理進行解析,然後自動儲存到 Google 試算表中。

工作流預覽

準備好自動化了嗎?

下載此 n8n 工作流程範本並立即開始使用。

適用對象


  • 市場研究人員:需要全球活動和趨勢的自動化資料串流。

  • 業務/行銷專業人員:尋找來自活動參加者的潛在客戶資料或競爭情報。

  • 資料工程師:正在尋找展示複雜 AI 調度與網頁爬取功能的進階 n8n 範本。

  • n8n 使用者:需要強大、能繞過常見反爬蟲機制的 n8n 工作流。

總覽

爬取像 10times 這樣大型、動態的網站,由於其複雜的反爬蟲防禦機制,通常充滿挑戰。這個專業的 n8n 工作流結合了 AI 代理和 Bright Data 的行動版電信業者代理(MCP)服務,從而克服了這些障礙。目標是擷取特定、高價值的資訊——例如活動類別、精選活動、參加者回饋和場地詳細資訊——並將其從原始的 HTML/Markdown 轉換為清晰、結構化的 JSON。這個強大的 n8n 範本提供了一個完整的自動化解決方案,只需一個簡單的 n8n 觸發器即可啟動,確保您能持續獲得高品質的活動情報,並直接儲存到可用的 Google 試算表中。

運作方式

這個全面的資料擷取 n8n 工作流由 🕒 Schedule Scraper n8n 觸發器啟動,預設為每日運行。


  1. 定義輸入:⚙️ Input URL & Params n8n 節點指定目標 URL(https://10times.com),並將輸出偏好設定為 markdown,以便 AI 更容易解析。

  2. AI 調度:🤖 Bright Data AI Agent n8n 節點接管。這個代理會根據自然語言提示,指示它使用專門的工具來擷取特定的資料點(類別、回饋、場地)。

  3. 進階爬取:該代理利用 🕷️ MCP Scraper: 10times n8n 節點,該節點透過 Bright Data 的行動版電信業者代理執行網頁爬取任務,使其能夠存取封鎖傳統爬取方法的頁面。

  4. 解析與結構化:爬蟲傳回原始 markdown 後,資料會流經 Auto-fixing Output Parser 和 Structured Output Parser。這些 n8n 節點使用指定的 JSON 綱要和 OpenAI 模型,仔細地清理資料並將其整理成獨立的欄位。

  5. 資料儲存:最後,使用 📥 Save to Google Sheets n8n 節點,將解析後的乾淨資料逐行寫入指定的 Google 試算表中,從而完成全自動化的資料流程。

安裝指南

若要部署此專業的 n8n 工作流範本,請遵循以下步驟:


  1. 匯入:複製完整的 JSON 代碼並直接匯入到您的 n8n 實例中。

  2. 憑證設定:

OpenAI:為 🧠 Agent Memory Model 和 OpenAI Chat Model 節點設定您的 OpenAI API 憑證。這將為代理邏輯和解析提供動力。
Bright Data MCP:為 🕷️ MCP Scraper: 10times n8n 節點設定 MCP 用戶端 API 憑證。
* Google 試算表:為 📥 Save to Google Sheets n8n 節點驗證您的 Google 試算表 OAuth2 API 憑證。

  1. 配置:在 📥 Save to Google Sheets n8n 節點中,更新「文件 ID (Document ID)」和「工作表名稱 (Sheet Name)」以匹配您希望儲存活動資料的目標試算表。

  2. 啟用:完成所有憑證和配置設定後,啟用 n8n 工作流。排程的 n8n 觸發器將在指定時間啟動爬取。

節點詳情


  • 🕒 Schedule Scraper (n8n 觸發器):

- 功能:自動啟動整個 n8n 工作流。
- 關鍵配置:設定為每日上午 9 點運行。

  • ⚙️ Input URL & Params (Set n8n 節點):

- 功能:定義目標 URL(https://10times.com)並設定爬取指令(scrapeasmarkdown)。

  • 🤖 Bright Data AI Agent (Agent n8n 節點):

- 功能:作為控制器,利用語言模型和工具,根據定義的自然語言目標來執行複雜的爬取邏輯。
- 關鍵配置:提示指示代理擷取類別、精選活動 (featuredevent)、參加者回饋 (attendeefeedback) 和場地資料。

  • 🕷️ MCP Scraper: 10times (MCP Client Tool n8n 節點):

- 功能:執行實際的網頁爬取工作,利用 Bright Data 的行動版代理基礎架構來處理動態內容和反爬蟲措施。

  • Structured Output Parser (Parser n8n 節點):

- 功能:對於資料品質維護至關重要。它會根據提供的綱要(包含場地、回饋和活動欄位),將原始 markdown 輸出轉換為清晰的結構化 JSON。

  • 📥 Save to Google Sheets (Google Sheets n8n 節點):

- 功能:將結構化的輸出資料附加到指定的 Google 試算表中。
- 關鍵配置:將解析後的 JSON 欄位(categories, featuredevents, attendeefeedback, venues)映射到工作表中對應的欄位。

相關 n8n 工作流程

免費

節點: 9 節點
更新时间: 2025年12月26日
建立者

Building AI Agents and Automations | Growth Marketer | Entrepreneur | Book Author & Podcast Host If you need any help with Automations, feel free to reach out via linkedin: https://www.linkedin.com/in/yaronbeen/ And check out my Youtube channel: https://www.youtube.com/@YaronBeen/videos

精選*