# --- uappi robots.txt v3.3 (ajustado - liberacao de crawlers de AI) --- #

# Liberar todas as URLs para os bots importantes
User-Agent: Storebot-Google
User-Agent: Googlebot-Image
User-Agent: facebookexternalhit
Allow: /

# Regras para o Googlebot
User-Agent: Googlebot
# ---- Ha casos em que a api pode ser bloqueada se estiver com parametro, entao mantenha esta regra abaixo para garantir a liberacao dela ---- #
Allow: /api/v2*
# --------- Negando URLs --------- #
# Negando URLs do checkout
Disallow: /checkout/
# ---- Negando parametros ---- #
# Ordenacao
Disallow: *order=*
# Filtro
Disallow: *atributo=*
# Itens por pagina
Disallow: *ipp=*
# Filtro de preco
Disallow: *preco=*
# Marca
Disallow: *marca=*
# Filtro generico
Disallow: *filtro=*

# --------- Liberacao explicita de Ferramentas de SEO --------- #
# Permite a varredura (Semrush, Ubersuggest)
# mantendo bloqueado o checkout e os parametros de filtro/ordenacao
User-Agent: SemrushBot
User-Agent: SiteAuditBot
User-Agent: RSiteAuditor
Allow: /
Disallow: /checkout/
Disallow: *order=*
Disallow: *atributo=*
Disallow: *ipp=*
Disallow: *preco=*
Disallow: *marca=*
Disallow: *filtro=*

# --------- Liberacao explicita dos crawlers de AI --------- #
# Permite a extracao de dados por AI (OpenAI, Anthropic, Perplexity, Google AI)
# mantendo bloqueado o checkout e os parametros de filtro/ordenacao
User-Agent: GPTBot
User-Agent: OAI-SearchBot
User-Agent: ChatGPT-User
User-Agent: ClaudeBot
User-Agent: Claude-User
User-Agent: Claude-SearchBot
User-Agent: PerplexityBot
User-Agent: Perplexity-User
User-Agent: Google-Extended
User-Agent: Applebot-Extended
Allow: /
Disallow: /checkout/
Disallow: *order=*
Disallow: *atributo=*
Disallow: *ipp=*
Disallow: *preco=*
Disallow: *marca=*
Disallow: *filtro=*

# ---- Demais bots ---- #
User-Agent: *
Allow: /

# --------- Sitemaps --------- #
sitemap: https://www.trustfuel.com.br/sitemap.xml