User-agent: * Disallow: /comment/ Disallow: /admin/ Disallow: /login/ Disallow: /logout/ Disallow: /profile/ Disallow: /get_recent_videos/ Disallow: /api/popular-movies/ Allow: / # Permitir rastreamento de arquivos CSS e JS para renderização adequada Allow: /static/*.css Allow: /static/*.js # Permitir que o Google rastreie paginação, mas você controla a indexação via meta tags # (remoção das linhas abaixo resolve o “bloqueada pelo robots.txt”) # Disallow: /*?sort= # Disallow: /*?page= # Disallow: /*?filter= # Bloquear bots específicos que não são úteis para SEO User-Agent: seekbot Disallow: / User-Agent: Exabot Disallow: / User-agent: Slurp Disallow: / User-agent: Cliqzbot Disallow: / # Permitir que o Googlebot-News acesse todo o site User-agent: Googlebot-News Allow: / # Permitir que o Googlebot-Image acesse a pasta de imagens do blog User-agent: Googlebot-Image Allow: /static/blog/media/images/ # Permitir que o Bingbot tenha acesso completo User-agent: bingbot Allow: / # Bloquear crawlers tentando acessar rotas do WordPress (que não existem) User-agent: Mediapartners-Google Disallow: /wp-content/ Disallow: /wp-admin/ Disallow: /wp-includes/ # Sitemap do site Sitemap: https://podeversemmedo.com/sitemap.xml