# robots.txt para CardMax México # https://cardmax.com.mx/ # Optimizado para SEO - Permitir rastreo completo con prioridad a bots principales # Última actualización: 2026-11-08 # Regla general - Permitir todo User-agent: * Allow: / # Sitemap principal (índice) y sitemaps por sección Sitemap: https://cardmax.com.mx/sitemap.xml Sitemap: https://cardmax.com.mx/sitemap-paginas.xml Sitemap: https://cardmax.com.mx/sitemap-productos.xml Sitemap: https://cardmax.com.mx/sitemap-desarrollo-web.xml # Host preferido Host: https://cardmax.com.mx # Google - Máxima prioridad User-agent: Googlebot Allow: / Crawl-delay: 0 # Google Imágenes User-agent: Googlebot-Image Allow: /img/ Allow: /*.webp$ # Google Mobile User-agent: Googlebot-Mobile Allow: / # Google Video User-agent: Googlebot-Video Allow: /vid/ Allow: /*.mp4$ # Google AdsBot User-agent: AdsBot-Google Allow: / # Google Merchant User-agent: Google-Shopping-Quality Allow: / # Bing User-agent: Bingbot Allow: / Crawl-delay: 0 # Bing Ads User-agent: adidxbot Allow: / # Yahoo User-agent: Slurp Allow: / # DuckDuckGo User-agent: DuckDuckBot Allow: / # Yandex User-agent: Yandex Allow: / # Baidu User-agent: Baiduspider Allow: / # Apple User-agent: Applebot Allow: / # Facebook compartir User-agent: facebookexternalhit Allow: / # Twitter compartir User-agent: Twitterbot Allow: / # LinkedIn compartir User-agent: LinkedInBot Allow: / # WhatsApp preview User-agent: WhatsApp Allow: / # Pinterest User-agent: Pinterest Allow: / # Telegram User-agent: TelegramBot Allow: / # Slack preview User-agent: Slackbot Allow: / # Discord preview User-agent: Discordbot Allow: / # Permitir CSS, JS, imágenes, videos y JSON para renderizado User-agent: * Allow: /*.css$ Allow: /*.js$ Allow: /*.webp$ Allow: /*.mp4$ Allow: /*.json$ # Bloquear bots de scraping SEO y extracción masiva User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: MJ12bot Disallow: / User-agent: DotBot Disallow: / User-agent: BLEXBot Disallow: / User-agent: DataForSeoBot Disallow: / User-agent: SeznamBot Disallow: / User-agent: Bytespider Disallow: / User-agent: GPTBot Disallow: / User-agent: CCBot Disallow: /