Como configurar meta-tags e media sharing no admin
app
de ecommerce, temos os blocos SEOPLP
e SEOPDP
)Disable indexing
).
robots.txt
representa um arquivo padrão usado por bots na internet para
definir como devem processar o seu site.
Para isto, é possível editar o arquivo no próprio admin:
User-agent
s, pelo menos uma regra de allow
ou disallow
, e outras regras
opcionais (a depender do bot).
Os valores para essas regras podem incluir *
para representar todos ou
qualquer conjunto de bots ou paths.
Com o crescimento de bots de AI generativas, nós não recomendamos liberar por padrão o acesso para qualquer bot e qualquer path. Uma configuração ideal:
- para os buscadores (como google/bing/etc): liberar ao acesso a todos os paths, com algumas exceções
- para todos os bots, barrar tudo exceto paths bem precisos ou orientados a AI, como páginas institucionais, ou mesmo pratileiras ou catalogos de produtos representativos para a AI