Una potente utilidad de web scraping que convierte cualquier URL en markdown limpio y listo para LLM utilizando Firecrawl a través de la API de SkillBoss.
Instalar y Descargar
1. ClawHub CLI
La forma más rápida de instalar una habilidad directamente desde el registro.
npx clawhub@latest install skillboss-scraper
2. Instalación manual
Copia la carpeta de la habilidad a una de estas ubicaciones
~/.openclaw/skills/ <project>/skills/ Prioridad: Espacio de trabajo > Local > Integrado
3. Instalación del prompt
Copia este prompt en OpenClaw para instalarlo automáticamente.
Ayúdame a instalar skillboss-scraper usando Clawhub. Si Clawhub no está instalado, instálalo primero (npm i -g clawhub).
¿Prefieres descargar?
Obtén los archivos originales de la habilidad en un archivo ZIP.
¿Qué es Firecrawl Scraper (SkillBoss)?
El Firecrawl Scraper es una herramienta especializada dentro del ecosistema de Openclaw Skills diseñada para agilizar el proceso de recolección de contenido web para aplicaciones de IA. Al aprovechar el motor Firecrawl, omite la lógica compleja de scraping y entrega markdown de alta calidad directamente a su agente. Esta habilidad elimina la necesidad de gestionar múltiples cuentas de proveedores individuales al enrutar las solicitudes a través de SkillBoss, proporcionando una experiencia de facturación unificada y acceso instantáneo a tecnología de scraping de primer nivel sin suscripciones a largo plazo.
Creada para desarrolladores e investigadores de IA, esta habilidad garantiza que el contenido web se presente en un formato que los LLM puedan analizar y comprender fácilmente. Ya sea que esté construyendo una base de conocimientos o realizando investigaciones en tiempo real, incorporar esto en su flujo de trabajo de Openclaw Skills proporciona una ventaja significativa en la accesibilidad de los datos.
Casos de uso de Firecrawl Scraper (SkillBoss)
- Extraer datos de sitios de documentación técnica para proporcionar contexto a tareas de codificación de IA.
- Extraer datos estructurados de sitios web para investigación de mercado o análisis competitivo.
- Convertir publicaciones de blogs o artículos de noticias en markdown limpio para tuberías RAG.
- Monitorear actualizaciones web e integrar cambios en flujos de trabajo automatizados de procesamiento de datos.
Cómo funciona Firecrawl Scraper (SkillBoss)
- El usuario proporciona una URL de destino y parámetros de extracción opcionales a la interfaz de la habilidad.
- La habilidad autentica la solicitud utilizando la SKILLBOSS_API_KEY proporcionada.
- Se envía una solicitud a la puerta de enlace de SkillBoss, que invoca el motor Firecrawl para procesar la URL.
- Firecrawl se encarga de la representación de JavaScript y la eliminación de ruido (anuncios, barras de navegación, pies de página) para aislar el contenido principal.
- La respuesta de markdown limpio o JSON estructurado se devuelve al entorno de Openclaw Skills para su consumo inmediato por parte del agente.
Configuración de Firecrawl Scraper (SkillBoss)
Para integrar esta herramienta con Openclaw Skills, siga estos pasos:
- Visite skillboss.co/console para crear una cuenta y obtener su clave de API.
- Establezca la variable de entorno en su entorno local o canalización de CI/CD:
export SKILLBOSS_API_KEY='su_clave_de_api_aquí'
- Use el siguiente comando curl para probar la integración:
curl https://api.heybossai.com/v1/run \
-H "Authorization: Bearer $SKILLBOSS_API_KEY" \
-d '{"model": "firecrawl", "input": {"url": "https://example.com"}}'
Esquema de datos y taxonomía de Firecrawl Scraper (SkillBoss)
La habilidad se ocupa principalmente de la extracción de datos basados en texto y organiza su salida para que sea altamente compatible con los LLM:
| Campo | Descripción |
|---|---|
| markdown | El contenido principal de la página sin el exceso de HTML y convertido a markdown estándar. |
| metadata | Metadatos que incluyen el título de la página, la descripción y la información de la URL de origen. |
| json_data | Resultados de extracción estructurados si se proporcionó un esquema JSON específico durante la solicitud. |
| status | Confirmación del éxito del scrape o registros de errores. |
Funciones avanzadas de Firecrawl Scraper (SkillBoss)
- Extracción de datos estructurados impulsada por IA que mapea HTML sin procesar a esquemas JSON específicos.
- Modelo de precios de pago por uso con $2 en créditos gratuitos iniciales para probar sus Openclaw Skills.
- Facturación unificada a través de SkillBoss para acceder a más de 100 servicios de IA con una sola clave.
- Integración perfecta con agentes autónomos para investigación basada en navegador y resumen de contenido.
SKILL.md
Cargando
Habilidades relacionadas de Openclaw
SkillBoss Unified AI Gateway
Un gateway de IA unificado que proporciona acceso a más de 100 modelos de IA de primer nivel a través de una única clave de API compatible con OpenAI.
SkillBoss
SkillBoss proporciona una pasarela de API única para más de 100 servicios de IA, incluidos LLM de primer nivel, generación de video y web scraping sin sobrecostes.
API de Envío de Correo Electrónico
Una habilidad de entrega de correo electrónico de alto rendimiento para Openclaw Skills que permite comunicaciones transaccionales y de marketing a través de AWS SES sin una configuración SMTP compleja.
Perplexity Search API
Una potente integración de motor de búsqueda web impulsada por IA que proporciona información en tiempo real con citas verificables.
API de Generación de Video por IA para OpenClaw
Una habilidad de creación de video impulsada por IA que permite a los agentes generar videos de alta fidelidad a partir de prompts de texto utilizando modelos líderes en la industria.
API de Web Scraping
Una solución de web scraping unificada para extraer datos estructurados de más de 30 plataformas principales, incluidas LinkedIn, Amazon y Twitter.
Presentado*
