Ayuda a encontrar paginas
Trabaja rastreo, indexacion, relevancia, autoridad, rendimiento y experiencia para buscadores.
AEO + descubrimiento agentico
Tu web ya no compite solo por clics. Tambien compite por ser una fuente que un asistente pueda comprender.
Ordenamos contenido, evidencia y politicas para que humanos, buscadores y agentes encuentren una explicacion fiel de lo que tu organizacion ofrece y permite.
01EncontrarRastreo, sitemap y origen canonico.
02EntenderRespuestas, entidades y evidencia.
03CitarFuentes publicas, fecha y procedencia.
04ActuarHerramientas reales, solo cuando existan.
Para propietarios y equipos
AEO no es maquillaje tecnico. Es hacer visible el conocimiento real de la organizacion.
Una web puede verse antigua y aun asi mejorar mucho por detras: contenidos actualizados, datos estructurados, documentos legibles y politicas claras. El front humano tambien importa, pero no es el unico punto de entrada.
Ayuda a construir respuestas
Expone definiciones, hechos, entidades, relaciones, fuentes y limites que pueden citarse con mayor precision.
Prepara herramientas utilizables
Versiona APIs, skills, MCP o A2A cuando existe una capacidad real, segura y verificable.
Mejorar estas capas aumenta claridad y posibilidades de descubrimiento, pero no garantiza indexacion, ranking ni recomendacion por GPT, Gemini, Claude, Perplexity u otro proveedor.
Una politica, tres decisiones
No mezcles busqueda, consultas de usuarios y entrenamiento.
Cada finalidad tiene un impacto diferente. Agent Friendly Web documenta la decision del owner y luego la contrasta con el comportamiento y la documentacion oficial de cada proveedor.
Busqueda y respuestas
Permitir que contenido publico sea descubierto para resultados y respuestas con enlaces.
Solicitud del usuario
Permitir que un asistente consulte una pagina porque una persona se lo pidio expresamente.
Entrenamiento y otros usos
Autorizar, reservar o evaluar por separado el uso destinado a mejorar modelos o productos generativos.
Matriz por proveedor
Crawlers y tokens de control que conviene distinguir.
Los nombres y finalidades pueden cambiar. Cada fila enlaza la fuente oficial que debe revisarse antes de aplicar una regla en produccion.
OpenAIOAI-SearchBot
Busqueda y descubrimiento
Descubrir contenido para resultados de busqueda y respuestas con enlaces.
OpenAIGPTBot
Entrenamiento
Controlar el uso del rastreo para mejorar modelos generativos.
Como tratarlo
User-agent o fetcherEs una decision independiente de aparecer en busquedas de OpenAI.
Fuente oficialOpenAIChatGPT-User
Solicitud de una persona
Acceder a una pagina cuando una persona pide a ChatGPT que la consulte.
Como tratarlo
User-agent o fetcherNo debe confundirse con rastreo automatico o entrenamiento.
Fuente oficialAnthropicClaude-SearchBot
Busqueda y descubrimiento
Analizar contenido para mejorar relevancia y precision de busquedas de Claude.
Como tratarlo
User-agent o fetcherPuede definirse por separado de ClaudeBot y Claude-User.
Fuente oficialAnthropicClaudeBot
Entrenamiento
Controlar recoleccion que podria contribuir al entrenamiento de modelos.
Como tratarlo
User-agent o fetcherLa reserva de entrenamiento no exige bloquear busqueda o solicitudes de usuarios.
Fuente oficialAnthropicClaude-User
Solicitud de una persona
Consultar contenido cuando una persona se lo pide a Claude.
Como tratarlo
User-agent o fetcherSu acceso responde a una accion del usuario y se gobierna separadamente.
Fuente oficialGoogleGooglebot
Busqueda y descubrimiento
Rastrear contenido para Google Search.
Como tratarlo
User-agent o fetcherLa decision sobre Search no debe inferirse desde Google-Extended.
Fuente oficialGoogleGoogle-Extended
Control de IA generativa
Controlar determinados usos de contenido por productos Gemini y Vertex AI.
Como tratarlo
Token de control en robots.txtNo es un user-agent HTTP separado y no modifica inclusion ni ranking en Google Search.
Fuente oficialPerplexityPerplexityBot
Busqueda y descubrimiento
Descubrir y enlazar sitios en resultados de Perplexity.
Como tratarlo
User-agent o fetcherPerplexity declara que no se usa para entrenar modelos fundacionales.
Fuente oficialPerplexityPerplexity-User
Solicitud de una persona
Visitar una pagina para responder una solicitud concreta del usuario.
Como tratarlo
User-agent o fetcherLa documentacion oficial indica que no es rastreo general ni entrenamiento.
Fuente oficialMicrosoftbingbot
Busqueda y descubrimiento
Descubrir e indexar paginas para Bing y experiencias de respuesta vinculadas.
Como tratarlo
User-agent o fetcherBing separa directivas de rastreo de controles de indexacion, snippets y uso en Copilot.
Fuente oficialMetameta-externalagent
Servicios del proveedor
Crawler identificado por Cloudflare para servicios de IA operados por Meta.
Como tratarlo
User-agent o fetcherLa finalidad exacta debe revisarse contra la documentacion y actividad vigente antes de decidir.
Fuente oficialCommon CrawlCCBot
Dataset web abierto
Recolectar contenido para el repositorio abierto de datos web de Common Crawl.
Como tratarlo
User-agent o fetcherSu acceso se decide por separado porque el dataset puede ser reutilizado por muchos terceros.
Fuente oficialAppleApplebot-Extended
Control de IA generativa
Administrar el uso de contenido rastreado por Apple para funciones generativas.
Como tratarlo
Token de control en robots.txtDebe revisarse junto con Applebot y la politica publica del sitio.
Fuente oficialAmazonAmazonbot
Servicios del proveedor
Rastrear contenido para servicios y experiencias de Amazon.
Como tratarlo
User-agent o fetcherLa politica debe contrastarse con el uso concreto y la fuente oficial vigente.
Fuente oficialPrimero educar
El owner entiende que se publica, para quien y con que limite.
Luego implementar
Los cambios se versionan, se prueban y se vuelven a auditar.
Finalmente medir
La evidencia muestra que mejoro y que sigue pendiente.
Preguntas frecuentes
Lo esencial antes de cambiar robots.txt.
AEO reemplaza al SEO?
No. SEO ayuda a que una pagina sea rastreable y competitiva en buscadores. AEO agrega respuestas directas, entidades, evidencia y estructura para que motores de respuesta puedan comprender y citar mejor el sitio.
Permitir un crawler garantiza aparecer en una respuesta?
No. Solo evita un bloqueo deliberado para ese uso. Indexacion, seleccion, redaccion, ranking y recomendacion dependen de cada proveedor y de muchas otras señales.
Bloquear entrenamiento obliga a desaparecer de busquedas?
No necesariamente. Varios proveedores separan crawlers o tokens para busqueda, solicitudes iniciadas por usuarios y entrenamiento. La politica debe decidir cada finalidad por separado.
Siguiente paso
Empezar por la auditoria Primero medimos tu situacion real. Despues proponemos cambios proporcionados.
No necesitas conocer crawlers, JSON-LD o servidores para empezar.