适用于 Openclaw 的 Web Crawling Rendered Html API

一款高性能网页爬虫工具,可获取完整渲染后的 HTML,用于静态页面抓取、元数据提取和页面结构分析。

justserpapi
v1.0.0
2026年6月10日
0
495
0

安装与下载

1. ClawHub CLI

从源直接安装技能的最快方式。

npx clawhub@latest install justserpapi-web-rendered-html

2. 手动安装

将技能文件夹复制到以下位置之一

全局模式
~/.openclaw/skills/
工作区
<project>/skills/

优先级:工作区 > 本地 > 内置

3. 提示词安装

将此提示词复制到 OpenClaw 即可自动安装。

请帮我使用 Clawhub 安装 justserpapi-web-rendered-html。如果尚未安装 Clawhub,请先安装(npm i -g clawhub)。

更倾向于下载?

获取包含原生技能文件的ZIP压缩包。

什么是 Web Crawling Rendered Html API?

Web Crawling Rendered Html API 是一款专为寻求精确抓取功能的开发人员和 AI 代理设计的专用工具。通过在 Openclaw Skills 目录中使用此工具,代理可以轻松访问 Just Serp API 提供的 GET /api/v1/web/rendered-html 端点。此技能专门针对静态页面爬取、元数据提取和页面结构分析进行了优化,是现代数据流水线的重要工具。

开发人员无需管理资源密集型的浏览器引擎,即可集成此技能直接获取完整的原始渲染 HTML。该技能运行简洁,提供将 Web 内容直接注入到大型应用程序、LLM 或本地搜索脚本所需的轻量级脚手架。

Web Crawling Rendered Html API 应用场景

  • 网页抓取与解析:从目标网页中提取精确的页面内容、文章或结构细节。
  • SEO 与元数据审计:从完整渲染后的 HTML 布局中检索标题、schema markup 和元数据。
  • 页面结构分析:分析 HTML 层级和 DOM 节点以构建抓取模式或选择器。
  • AI 代理研究上下文:将高保真渲染后的网页直接输入给 LLM,以增强搜索和文档检索任务。

Web Crawling Rendered Html API 工作原理

  1. 发起请求:开发人员或 AI 工作流通过 Openclaw Skills 界面指定目标 URL。
  2. 参数评估:此技能解析输入内容,确认所需的 url 参数已激活且结构正确。
  3. 请求分发:该工具使用环境中配置的凭据,针对 /api/v1/web/rendered-html 端点执行 GET 请求。
  4. HTML 渲染:Just Serp API 处理网页爬取,提取原始渲染后的 HTML,并将其传回给客户端。
  5. 总结与交付:输出会生成即时状态摘要,随后是包含目标 HTML 结构的原始 JSON。

Web Crawling Rendered Html API 配置指南

要设置此技能,请确保您的机器上配置了 Node.js。您需要从 Just Serp API 获取有效的 API key 以验证请求。

首先,设置您的环境变量:

export JUST_SERP_API_KEY="your_just_serp_api_key_here"

使用 Openclaw Skills 提供的命令行界面助手在本地执行该技能:

node {baseDir}/bin/run.mjs --operation "renderedHtml" --api-key "$JUST_SERP_API_KEY" --params-json '{"url":"<target_url_here>"}'

请妥善保管您的 API key,避免在应用程序日志或屏幕截图中发布凭据字符串。

Web Crawling Rendered Html API 数据架构与分类体系

此技能使用单个主要输入,并围绕标准的网页抓取结果来组织响应。

输入 Schema

参数 位置 必需 类型 注释
url query 是 string 要爬取的网页完整 URL(例如 'https://www.example.com')

输出 Schema

输出包含以下元素:

  • 操作标识:回显 /api/v1/web/rendered-html 上的操作 renderedHtml。
  • 作用域定义:确认查找作用域参数(目标 url)。
  • 目标内容:返回针对静态结构优化过的完整、原始的渲染后 HTML 内容。
  • 错误状态报告:如果发生故障,返回的负载会暴露确切的后端负载错误和操作 ID。

Web Crawling Rendered Html API 高级特性

  • 直接获取渲染后的 HTML:通过直接从 Just Serp API 获取渲染内容,避免了臃肿的浏览器模拟。
  • 标准 CLI 集成:通过 node 脚本以最少的依赖项运行,非常适合自动化的 DevOps cron 任务。
  • 安全令牌传递:依赖系统环境变量获取 API keys,以保持对 Openclaw Skills 安全配置文件的标准合规性。
  • 细粒度错误处理:为开发人员和代理提供明确的错误日志,映射确切的失败操作和查询范围。

SKILL.md


加载中

Openclaw 相关技能

METADATA

Requires
Bins node
Github Stars: 0
forks: 0

精选*