Sitemap.xml e robots.txt: o guia definitivo

O sitemap.xml lista suas URLs para os buscadores descobrirem; o robots.txt diz o que eles podem ou não rastrear. São dois arquivos simples, mas configurá-los errado pode esconder seu site do Google.

O sitemap

Liste as URLs importantes com a data da última modificação. Gere-o dinamicamente a partir do banco e envie no Google Search Console para acelerar a indexação.

<url>
  <loc>https://exemplo.com/blog/meu-artigo</loc>
  <lastmod>2026-07-03</lastmod>
</url>

O robots.txt

User-agent: *
Allow: /
Disallow: /admin/
Sitemap: https://exemplo.com/sitemap.xml

Erro fatal: bloquear /css/ ou /js/. O Google precisa renderizar a página para avaliá-la — sem esses recursos, seu SEO despenca.

Robôs de IA

Em 2026 você também decide aqui se permite bots como GPTBot e PerplexityBot. Liberar os de busca em tempo real ajuda no AEO; bloquear protege conteúdo proprietário.

Perguntas frequentes

Todo site precisa de sitemap?

Sites pequenos e bem interligados o Google rastreia sozinho, mas o sitemap acelera e melhora a cobertura. Para blogs e e-commerce, é indispensável.

robots.txt protege páginas privadas?

Não. Ele apenas pede para não rastrear; a URL continua acessível. Para proteger de verdade, use autenticação.

Continue lendo

• URLs amigáveis e canonical: evitando conteúdo duplicado
• Performance em PHP: OPcache, cache e consultas rápidas
• Acessibilidade web (a11y) que também impulsiona o SEO