Pular pro conteúdo

Crawl4ai skill

Catálogo de loja, notícias ou documentação vira markdown limpo ou dados em JSON, mesmo em site que só carrega com JavaScript.

por brettdavies

instalações
1.100
estrelas no GitHub
49
No skills.sh desde
fevereiro de 2026
Licença
Própria

Atualizada no GitHub em 5 de outubro de 2026. Dados conferidos em 26 de outubro de 2026, no skills.sh e no GitHub.

O que ela faz

A skill liga o Claude ao Crawl4AI, que abre as páginas num navegador invisível (Playwright) e devolve o conteúdo em markdown limpo, com links, imagens e o HTML. Serve pra site que só mostra o conteúdo depois do JavaScript, rolagem infinita, área com login e várias URLs ao mesmo tempo.

Pra tirar dados, o caminho preferido é o esquema: uma IA olha a página uma vez e monta o mapa dos campos (nome, preço, imagem); depois esse mapa é reaproveitado em quantas páginas quiser, sem pagar IA de novo. Pra página irregular, dá pra extrair com IA em cada URL, o que custa mais.

Traz scripts prontos pra uma página, lote de URLs e extração em lote, modelos de configuração de navegador, proxy e login, filtros que tiram o ruído do texto e busca de URLs pelo sitemap antes de rastrear. Pra página estática simples, a própria skill manda usar uma leitura mais leve.

Nas palavras de quem fez

Use when scraping JavaScript-heavy pages or SPAs, crawling multiple URLs concurrently, extracting structured data with reusable CSS/JSON schemas, or building…

brettdavies, no SKILL.md

Quando usar

  • Puxar nome, preço e foto dos produtos de uma loja concorrente
  • Baixar em markdown limpo, sem menu nem rodapé, as páginas de uma documentação inteira
  • Rastrear as páginas do blog de um site a partir do sitemap
  • Ler conteúdo de site que só aparece depois de carregar o JavaScript
  • Coletar dados de uma área com login, reaproveitando a sessão

Depois de instalar, é só pedir assim

  • Raspa essa página de produtos e me devolve nome, preço e link de cada um em JSON
  • Pega as URLs do blog desse site pelo sitemap e salva cada post em markdown
  • Esse site só carrega com JavaScript: abre ele no crawl4ai e me traz o texto da página

Segurança

Gen Agent Trust Hub, Socket e Snyk leem o código da skill atrás de comando perigoso, dado vazando e instrução escondida. Alerta não é reprovação: quer dizer que vale ler o que a skill faz antes de instalar.

  • Gen Agent Trust HubPassou
  • SocketPassou
  • SnykPassou

Perguntas

Como instalar a Crawl4ai no Claude Code?

Toca em Levar, aqui nesta página, e deixa seu nome, e-mail e WhatsApp (é uma vez só). Aparece uma frase pronta: cola ela no Claude Code, que ele mesmo instala a Crawl4ai, e a skill passa a valer na próxima conversa. A mesma frase serve no Codex. Se preferir fazer na mão, o passo a passo está em como instalar skills no Claude Code.

O que a crawl4ai skill precisa pra funcionar?

De Python e do Crawl4AI instalado (pip install crawl4ai e depois crawl4ai-setup, que prepara o navegador); os scripts da skill rodam com o uv. Raspar e extrair por esquema não pede chave. Gerar o esquema e extrair com IA usam um modelo pago, por padrão o gpt-4o-mini da OpenAI com a chave OPENAI_API_KEY, e dá pra trocar de provedor.

Ela preenche formulário e clica em botão por mim?

Não é pra isso. Pra fluxo com vários cliques e preenchimento de formulário, a skill indica outra ferramenta de navegador. Ela faz login por um modelo de configuração e reaproveita a sessão, mas o foco é ler e extrair.

Roda no Codex e no Antigravity?

Roda: o SKILL.md comanda o programa crwl e scripts em Python pelo terminal, sem nada exclusivo do Claude Code. Qualquer agente que lê skills e roda comandos consegue usar.

Levar essa skill

1x crawl4aiR$ 0,00

TotalR$ 0,00

A skill sai aqui mesmo, na hora. Seus dados eu uso pra falar com você sobre o MazyOS.

Levar precisa do JavaScript ligado. O código da skill está no GitHub: github.com/brettdavies/crawl4ai-skill

Aprenda a usar