CrawlWitnessuol.com.br: a IA pode usar este site?
O que uol.com.br diz hoje aos bots de IA, lido do robots.txt e dos novos padrões de consentimento, verificado diariamente e assinado pela CrawlWitness.
Analisado: 2026-11-01 18:13 UTC · Posição mundial (Tranco) #549
robots.txt bloquea 5 de 6 bots de entrenamientorobots.txt bloquea 4 de 5 bots de agentes de usuariorobots.txt bloquea 3 de 4 bots de búsquedaPrincipais bots de IA no robots.txt
| Bot | Operador | Acesso |
|---|---|---|
GPTBot | OpenAI | Bloqueio parcial |
ClaudeBot | Anthropic | Bloqueado |
Google-Extended | Bloqueado | |
Applebot-Extended | Apple | Bloqueado |
meta-externalagent | Meta | Bloqueado |
Bytespider | ByteDance | Bloqueado |
CCBot | Common Crawl | Bloqueado |
OAI-SearchBot | OpenAI | Bloqueio parcial |
PerplexityBot | Perplexity | Bloqueado |
ChatGPT-User | OpenAI | Bloqueio parcial |
Sinais encontrados
| AIPREF (IETF) | — |
| Content-Signal | — |
| TDMRep | — |
| RSL 1.0 | — |
| llms.txt | — |
Histórico notarial
4 versões registadas desde 2026-11-01; última alteração em 2026-11-01. Cada versão é assinada e ancorada na Base. /v1/historial/uol.com.br
O que significa em cada jurisdição
UE: a mineração de textos e dados para fins comerciais é permitida salvo reserva do titular em formato legível por máquina (art. 4.º, n.º 3, da Diretiva 2019/790). Os fornecedores de IA de finalidade geral devem respeitar essas reservas (art. 53.º do AI Act), exigível pela Comissão desde agosto de 2026.
Reino Unido: a exceção de mineração cobre apenas investigação não comercial. Em 2026 o Governo abandonou a exceção com opt-out; o treino comercial de IA exige, em regra, licença.
EUA: não existe opt-out legal; os tribunais estão a decidir se o treino é fair use. Sinais como o robots.txt provam o que o titular permitia.
Japão: o art. 30-4 permite amplamente o treino de IA, salvo prejuízo injustificado ao titular; medidas técnicas como o robots.txt podem pesar nessa avaliação.
Informação, não aconselhamento jurídico.
uol.com.br é seu? Verifique-o, assine a sua declaração de uso por IA e obtenha um certificado probatório datado.
CrawlWitness PublisherDesenvolve IA ou rastreia a web? Verifique milhares de domínios por API, MCP ou x402 e pague por consulta.
API · MCP · x402