# Instrucciones para el agente: Crawl4AI: extrae páginas para tus agentes

Pega este texto a tu agente (Claude Code, Codex, OpenCode, Hermes o el que uses) y dile «ayúdame a montarlo». Son los pasos para ponerlo en marcha; el porqué de cada pieza está en la guía completa.

- Dificultad: intermedio
- Proyecto: https://github.com/unclecode/crawl4ai (licencia Apache-2.0)
- Guía completa: https://lab.wisd.ai/hub/crawl4ai-web-extraction

---

## Para el agente: cómo acompañar al usuario

1. Pregunta primero para qué lo quiere. Si su objetivo no necesita algún paso, sáltalo.
2. Antes de instalar, comprueba lo que ya tiene (versiones, claves, sistema operativo).
3. Avanza un paso cada vez: explica en una frase qué vas a hacer y deja que el usuario lo ejecute o lo apruebe.
4. Tras cada paso, comprueba que funcionó antes de seguir. Si falla, para y explica el error.
5. No inventes comandos ni opciones: si la documentación del proyecto contradice estos pasos, manda la documentación.
6. Al terminar, haz una prueba real con el objetivo del usuario y dile dónde profundizar.

---

## Pasos de configuración

Comprueba que tienes Python ≥3.10 y pip en el entorno elegido. Instala el paquete y prepara el navegador:

```sh
pip install -U crawl4ai
crawl4ai-setup
```

Guarda el ejemplo siguiente como `prueba_crawl.py` y ejecútalo con `python prueba_crawl.py` desde esa carpeta, con el intérprete del mismo entorno. El README incluye:

```python
import asyncio
from crawl4ai import AsyncWebCrawler

async def main():
    async with AsyncWebCrawler() as crawler:
        result = await crawler.arun(url="https://news.ycombinator.com")
        print(result.markdown)

asyncio.run(main())
```

Prueba después una página pública cuya estructura conozcas.

## Comprobación

Compara el Markdown con la página original. Comprueba que contiene los títulos y enlaces que necesitas antes de pasarlo al agente.

## Si algo falla

Si falta contenido, revisa tiempos de carga y la configuración de extracción. Si falla el navegador, repasa la instalación de dependencias del proyecto.

Consulta [el README oficial](https://github.com/unclecode/crawl4ai#readme) para requisitos y variantes de instalación.