CrawlWitnessrt.com: a IA pode usar este site?
O que rt.com diz hoje aos bots de IA, lido do robots.txt e dos novos padrões de consentimento, verificado diariamente e assinado pela CrawlWitness.
Analisado: 2026-11-12 22:22 UTC · Posição mundial (Tranco) #2,659
Principais bots de IA no robots.txt
| Bot | Operador | Acesso |
|---|---|---|
GPTBot | OpenAI | Bloqueio parcial |
ClaudeBot | Anthropic | Bloqueio parcial |
Google-Extended | Bloqueio parcial | |
Applebot-Extended | Apple | Bloqueio parcial |
meta-externalagent | Meta | Bloqueio parcial |
Bytespider | ByteDance | Bloqueio parcial |
CCBot | Common Crawl | Bloqueio parcial |
OAI-SearchBot | OpenAI | Bloqueio parcial |
PerplexityBot | Perplexity | Bloqueio parcial |
ChatGPT-User | OpenAI | Bloqueio parcial |
Sinais encontrados
| AIPREF (IETF) | — |
| Content-Signal | — |
| TDMRep | — |
| RSL 1.0 | — |
| llms.txt | — |
Histórico notarial
11 versões registadas desde 2026-11-07; última alteração em 2026-11-12. Cada versão é assinada e ancorada na Base. /v1/historial/rt.com
Alterações recentes
| 2026-11-12 | ChatGPT-User | Permitido → Bloqueio parcial |
| 2026-11-12 | OAI-SearchBot | Permitido → Bloqueio parcial |
| 2026-11-12 | PerplexityBot | Permitido → Bloqueio parcial |
| 2026-11-12 | Bytespider | Permitido → Bloqueio parcial |
| 2026-11-12 | meta-externalagent | Permitido → Bloqueio parcial |
| 2026-11-12 | Applebot-Extended | Permitido → Bloqueio parcial |
| 2026-11-12 | CCBot | Permitido → Bloqueio parcial |
| 2026-11-12 | Google-Extended | Permitido → Bloqueio parcial |
| 2026-11-12 | ClaudeBot | Permitido → Bloqueio parcial |
| 2026-11-12 | GPTBot | Permitido → Bloqueio parcial |
| 2026-11-10 | ChatGPT-User | Bloqueio parcial → Permitido |
| 2026-11-10 | OAI-SearchBot | Bloqueio parcial → Permitido |
| 2026-11-10 | PerplexityBot | Bloqueio parcial → Permitido |
| 2026-11-10 | Bytespider | Bloqueio parcial → Permitido |
| 2026-11-10 | meta-externalagent | Bloqueio parcial → Permitido |
| 2026-11-10 | Applebot-Extended | Bloqueio parcial → Permitido |
| 2026-11-10 | CCBot | Bloqueio parcial → Permitido |
| 2026-11-10 | Google-Extended | Bloqueio parcial → Permitido |
| 2026-11-10 | ClaudeBot | Bloqueio parcial → Permitido |
| 2026-11-10 | GPTBot | Bloqueio parcial → Permitido |
O que significa em cada jurisdição
UE: a mineração de textos e dados para fins comerciais é permitida salvo reserva do titular em formato legível por máquina (art. 4.º, n.º 3, da Diretiva 2019/790). Os fornecedores de IA de finalidade geral devem respeitar essas reservas (art. 53.º do AI Act), exigível pela Comissão desde agosto de 2026.
Reino Unido: a exceção de mineração cobre apenas investigação não comercial. Em 2026 o Governo abandonou a exceção com opt-out; o treino comercial de IA exige, em regra, licença.
EUA: não existe opt-out legal; os tribunais estão a decidir se o treino é fair use. Sinais como o robots.txt provam o que o titular permitia.
Japão: o art. 30-4 permite amplamente o treino de IA, salvo prejuízo injustificado ao titular; medidas técnicas como o robots.txt podem pesar nessa avaliação.
Informação, não aconselhamento jurídico.
rt.com é seu? Verifique-o, assine a sua declaração de uso por IA e obtenha um certificado probatório datado.
CrawlWitness Publisher · 7 days freeDesenvolve IA ou rastreia a web? Verifique milhares de domínios por API, MCP ou x402 e pague por consulta.
API · MCP · x402 · 7 days free