Crawlie: Um Servidor MCP para SEO Técnico e Rastreamento GEO
Crawlie, desenvolvido pela Spronta, é um servidor especializado em Protocolo de Contexto de Modelo (MCP) projetado para SEO técnico e rastreamento GEO. Construído com Rust para seu motor central, CLI e componentes do servidor MCP, Crawlie se conecta a agentes de Modelo de Linguagem Grande (LLM), permitindo tarefas automatizadas de SEO. Ele oferece capacidades para auditoria de sites, identificação de problemas e rastreamento de desempenho. O programa é distribuído via npm para seu servidor e CLI, com um .dmg assinado disponível para usuários de desktop macOS. Crawlie suporta fluxos de trabalho tanto humanos quanto dirigidos por agentes, tornando-o uma ferramenta versátil para otimização digital.
O que o Crawlie conecta?
Crawlie funciona como um servidor de Protocolo de Contexto de Modelo (MCP) que se conecta diretamente a agentes de Modelo de Linguagem Grande (LLM). Essa conexão o posiciona como um componente chave para tarefas automatizadas de SEO e GEO. Seu servidor MCP local usa JSON-RPC sobre stdio para comunicação, enquanto o Crawlie Cloud MCP hospedado usa HTTP Streamable. É compatível com qualquer cliente compatível com MCP, mencionando especificamente Cursor, Cline e agentes personalizados, permitindo uma integração diversificada em fluxos de trabalho de IA existentes.
Recursos e ferramentas principais
Crawlie expõe um conjunto de ferramentas chamáveis que espelham aquelas do Crawlie Cloud MCP hospedado. Isso inclui crawl_site para análise completa do site, audit_url para verificações de páginas específicas e top_fixes para priorização de problemas. Para insights geográficos, oferece geo_gaps. affected_urls identifica páginas impactadas por problemas, enquanto diff_reports rastreia mudanças entre as varreduras. Para gerenciar tarefas em andamento, crawl_status consulta varreduras longas, e get_report junto com list_reports acessa relatórios salvos na nuvem.
Para quem é?
Crawlie é projetado tanto para usuários humanos quanto para agentes LLM, tornando-o adequado para tarefas automatizadas de SEO e análises detalhadas. Suas capacidades beneficiam aqueles que precisam realizar auditorias de sites, identificar problemas técnicos de SEO, como links quebrados ou metadados ausentes, e rastrear mudanças ao longo do tempo. O programa é particularmente útil para integrar fluxos de trabalho de SEO com agentes de IA. Isso não é a melhor opção se sua necessidade principal for um sistema de gerenciamento de conteúdo não técnico sem requisitos de análise de SEO ou GEO.
Como começar
Para o Crawlie Cloud MCP hospedado, o acesso é concedido através de uma chave de API Crawlie, que é criada nas configurações do painel. O servidor MCP local Crawlie suporta JSON-RPC sobre stdio como seu protocolo de transporte.
Casos de uso
- Habilitar um agente LLM para executar uma auditoria completa e agir sobre ela sem intervenção humana.
- Rastrear um site inteiro para identificar links quebrados, redirecionamentos, metadados ausentes e realizar mais de 40 verificações de SEO e de Motor Generativo.
- Realizar diffs de varredura sobre varredura para destacar mudanças entre duas varreduras, como deltas de saúde e pontuação GEO, adições/remoções de páginas e problemas que aparecem ou são resolvidos recentemente.
Crawlie oferece uma solução especializada para SEO técnico e GEO crawling, integrando-se de forma única com agentes LLM através de seu servidor MCP. Sua arquitetura baseada em Rust garante desempenho, enquanto seu conjunto de ferramentas suporta auditorias detalhadas de sites e rastreamento de mudanças. O programa é adequado para automatizar tarefas complexas de SEO e fornecer insights granulares para propriedades digitais. Experimente isso fazendo um agente LLM usar a ferramenta crawl_site para realizar uma auditoria completa.
