# robots.txt — laudex.mx # v3 — incorpora inventario real de Webflow (262 páginas vivas) + URLs legacy con # redirect ya configurado por Miguel (ya no existen en el CMS, se mantienen bloqueadas # a propósito para no competir por rastreo ni reabrir indexación de contenido muerto) User-agent: * Allow: / # Utilería interna / páginas de prueba — no deben rastrearse Disallow: /template-test-ext Disallow: /template-nacional Disallow: /template-calculadora-extranjero Disallow: /teamplateextranjero Disallow: /tests Disallow: /search Disallow: /401 # Páginas de agradecimiento / post-conversión — sin valor de contenido para rastreo Disallow: /gracias Disallow: /gracias-extranjero Disallow: /gracias-extranjero-copy Disallow: /gracias-detonadores Disallow: /gracias-renovaciones # Landing pages exclusivas de campañas pagadas (Google/Meta/TikTok Ads) — duplican contenido # orgánico con distinto tracking; no deben competir por presupuesto de rastreo ni indexarse Disallow: /tholus-* Disallow: /organico-* Disallow: /puertaunicaext Disallow: /puertaunicanal Disallow: /leads-nacional Disallow: /interesados Disallow: /qrstaffextranjero # URLs legacy: ya no existen en el CMS, tienen redirect configurado. Se bloquean para que # los crawlers dejen de intentar rastrearlas mientras el redirect hace su trabajo. # Nota: /aplica$ y /buro$ llevan ancla de fin de cadena a propósito, para no bloquear por # prefijo a /aplica-ahora y /buro-entidades-fiancieras, que sí son páginas vivas. Disallow: /santander Disallow: /preguntas-frecuentes-clientes-nuevos Disallow: /preguntas-frecuentes-clientes-laudex Disallow: /agencias-escuelas-extranjero Disallow: /uag Disallow: /aviacion Disallow: /universidades Disallow: /universidades-extranjero Disallow: /personal-aliados Disallow: /comunidad-laudex Disallow: /credito-para-papas Disallow: /como-aplico Disallow: /bolsa-de-trabajo Disallow: /aplica$ Disallow: /obligado-solidario Disallow: /rumboacanada Disallow: /prestamos-para-universitarios Disallow: /buro$ Disallow: /elige-tu-credito Disallow: /webinar-extranjero Disallow: /cookie-policy Disallow: /estudia-en-el-extranjero Disallow: /landing Disallow: /blog Disallow: /pais Disallow: /paises Disallow: /medicina Disallow: /veterinaria # --- Crawlers de IA --- # Bots de ENTRENAMIENTO: alimentan el modelo pero no te citan en tiempo real. Decisión de # Miguel: permitidos a propósito, como apuesta de marca a que el contenido de Laudex quede # dentro del corpus de entrenamiento de futuros modelos. User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Google-Extended Allow: / User-agent: CCBot Allow: / User-agent: meta-externalagent Allow: / User-agent: Bytespider Allow: / # Bots de BÚSQUEDA/CITACIÓN: son los que pueden citarte en una respuesta de ChatGPT, Claude o # Perplexity. Permitidos. User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: Claude-SearchBot Allow: / User-agent: Claude-User Allow: / User-agent: PerplexityBot Allow: / Sitemap: https://www.laudex.mx/sitemap.xml Sitemap: https://www.laudex.mx/sitemap.xml