{"id":76107,"date":"2026-08-10T04:41:14","date_gmt":"2026-08-10T07:41:14","guid":{"rendered":"https:\/\/kinsta.com\/pt\/?p=76107&#038;preview=true&#038;preview_id=76107"},"modified":"2026-08-14T09:01:56","modified_gmt":"2026-08-14T12:01:56","slug":"crawler-ia-regras-rastreamento-web","status":"publish","type":"post","link":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/","title":{"rendered":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web"},"content":{"rendered":"<p>Em 2025, os bots representaram 53% de todo o tr\u00e1fego web, marcando a primeira vez em que o tr\u00e1fego automatizado superou o tr\u00e1fego humano em um ano. Em junho de 2026, o <a href=\"https:\/\/radar.cloudflare.com\/\">Cloudflare Radar<\/a> apontou esse n\u00famero em 57,5%, um ponto de virada que, segundo o pr\u00f3prio CEO do Cloudflare, ocorreu anos antes de suas proje\u00e7\u00f5es.<\/p>\n<p>Para a maioria das pessoas que gerenciam sites WordPress, nada disso \u00e9 vis\u00edvel. Seus pain\u00e9is de controle parecem normais. O n\u00famero de visitas est\u00e1 aumentando. Mas uma parcela cada vez maior do que impulsiona esses n\u00fameros n\u00e3o \u00e9 um cliente, leitor ou cliente em potencial, mas um <a href=\"https:\/\/kinsta.com\/pt\/blog\/rastreadores-de-ia-wordpress\/\">crawler de IA<\/a> que faz scraping de conte\u00fado para alimentar um modelo de linguagem, em uma frequ\u00eancia e um volume que os bots de mecanismos de pesquisa nunca alcan\u00e7aram.<\/p>\n<p>Este artigo explica por que isso afeta os sites WordPress de maneira diferente do rastreamento tradicional e como identificar e responder a esse tr\u00e1fego diretamente no MyKinsta.<\/p>\n<div><\/div><kinsta-auto-toc heading=\"Table of Contents\" list-style=\"arrow\" selector=\"h2\" count-number=\"-1\"><\/kinsta-auto-toc>\n<h2>O que \u00e9 um crawler de IA?<\/h2>\n<p>Crawlers de IA s\u00e3o bots automatizados que leem p\u00e1ginas web acess\u00edveis publicamente e coletam seu conte\u00fado para uso em sistemas de IA. \u00c0 primeira vista, isso se parece com um <a href=\"https:\/\/kinsta.com\/pt\/blog\/lista-de-rastreadores-web\/\">crawler tradicional de mecanismo de pesquisa<\/a>, mas o objetivo \u00e9 diferente.<\/p>\n<p>Um crawler de pesquisa, como o Googlebot, l\u00ea uma p\u00e1gina para index\u00e1-la e classific\u00e1-la, permitindo que os visitantes encontrem seu site. No entanto, um crawler de IA l\u00ea a mesma p\u00e1gina para alimentar um modelo de linguagem ou de treinamento. Isso acontece de algumas maneiras:<\/p>\n<ul>\n<li><strong>Crawlers de treinamento<\/strong> (como GPTBot e ClaudeBot) coletam textos para treinar grandes modelos de linguagem.<\/li>\n<li><strong>Crawlers de recupera\u00e7\u00e3o<\/strong> acessam p\u00e1ginas em tempo real quando algu\u00e9m faz uma pergunta a uma ferramenta de IA que precisa de informa\u00e7\u00f5es atualizadas.<\/li>\n<li><strong>Crawlers de indexa\u00e7\u00e3o<\/strong> criam o pr\u00f3prio banco de dados de pesquisa de um provedor para reduzir sua depend\u00eancia de terceiros.<\/li>\n<\/ul>\n<p>O ponto em comum \u00e9 que nenhuma dessas atividades direciona um visitante de volta ao seu site. A identifica\u00e7\u00e3o torna a situa\u00e7\u00e3o imprevis\u00edvel. Alguns crawlers de IA usam user agents identific\u00e1veis e permanecem dentro de intervalos de IP publicados. Outros usam o user agent de um navegador leg\u00edtimo, alternam os endere\u00e7os de origem ou simplesmente n\u00e3o oferecem nenhuma forma confi\u00e1vel de identifica\u00e7\u00e3o.<\/p>\n<p>Em resumo, esse tr\u00e1fego \u00e9 mais dif\u00edcil de atribuir e est\u00e1 crescendo rapidamente: o <a href=\"https:\/\/blog.cloudflare.com\/radar-2025-year-in-review\/\">Radar Year in Review 2025<\/a> do Cloudflare apontou que crawlers de IA, sem incluir o Googlebot, representaram em m\u00e9dia 4,2% das solicita\u00e7\u00f5es HTML, variando de 2,4% em abril a 6,4% em junho. Ao incluir o Googlebot, que agora rastreia conte\u00fado tanto para indexa\u00e7\u00e3o de pesquisa quanto para treinamento de IA, o rastreamento total relacionado \u00e0 IA chegou a cerca de 8,7% das solicita\u00e7\u00f5es HTML em 2025.<\/p>\n<h2>As normas de rastreamento estabelecidas pelos crawlers de mecanismos de pesquisa<\/h2>\n<p>Para entender essa mudan\u00e7a, \u00e9 \u00fatil observar como funcionava o acordo anterior. O rastreamento para mecanismos de pesquisa seguia um conjunto de conven\u00e7\u00f5es compartilhadas que permitia aos propriet\u00e1rios de sites planejar sua infraestrutura de acordo com esse comportamento. O <a href=\"https:\/\/kinsta.com\/pt\/blog\/wordpress-robots-txt\/\">Robots Exclusion Protocol<\/a> surgiu em 1994 e foi formalizado como um padr\u00e3o da internet em 2022. A partir dele, surgiram quatro comportamentos que tornaram os crawlers tradicionais previs\u00edveis o suficiente para que a infraestrutura pudesse ser preparada para eles:<\/p>\n<ul>\n<li><strong>Respeito ao <\/strong><code>robots.txt<\/code><strong>.<\/strong> Um crawler lia o arquivo, identificava quais caminhos estavam fora dos limites e n\u00e3o os acessava.<\/li>\n<li><strong>Limita\u00e7\u00e3o autom\u00e1tica da taxa de rastreamento.<\/strong> Os principais crawlers reduziam a frequ\u00eancia das solicita\u00e7\u00f5es quando um servidor apresentava sinais de sobrecarga, de modo que um site com dificuldades recebia menos solicita\u00e7\u00f5es, em vez de mais.<\/li>\n<li><strong>Identifica\u00e7\u00e3o consistente.<\/strong> Um user agent est\u00e1vel permitia verificar um crawler e decidir como trat\u00e1-lo.<\/li>\n<li><strong>Opera\u00e7\u00e3o dentro de um \u201ccrawl budget\u201d.<\/strong> O Google <a href=\"https:\/\/developers.google.com\/search\/docs\/crawling-indexing\/large-site-managing-crawl-budget\">define o crawl budget de um site<\/a> como o conjunto de URLs que o Googlebot pode e deseja rastrear. Isso evita que um \u00fanico site seja rastreado sem limites.<\/li>\n<\/ul>\n<p>Relacionado a isso est\u00e1 o \u201ccrawl delay\u201d: o tempo que um crawler espera entre as solicita\u00e7\u00f5es de p\u00e1ginas. No entanto, essa \u00e9 uma diretiva n\u00e3o oficial, portanto, o Google nunca ofereceu suporte a ela e n\u00e3o a incluiu no padr\u00e3o formalizado. Em vez disso, o Googlebot ajusta dinamicamente sua pr\u00f3pria taxa de rastreamento com base na rapidez com que seu servidor responde. A expectativa \u00e9 que um crawler perceba a situa\u00e7\u00e3o do servidor e modere seu pr\u00f3prio comportamento.<\/p>\n<p>Essas conven\u00e7\u00f5es est\u00e3o incorporadas \u00e0 forma como a hospedagem funciona. Por exemplo, existem camadas de cache porque crawlers bem-comportados solicitam as mesmas p\u00e1ginas de maneira previs\u00edvel o suficiente para que elas sejam entregues a partir do cache. Todo o modelo se baseia na suposi\u00e7\u00e3o de que os crawlers seguem as regras.<\/p>\n<h3>Onde os crawlers de IA quebram essas normas<\/h3>\n<p>Os crawlers de IA seguem regras diferentes de tr\u00eas maneiras:<\/p>\n<ul>\n<li><strong>O <\/strong><code>robots.txt<\/code> <strong>\u00e9 tratado como opcional.<\/strong> Os <a href=\"https:\/\/tollbit.com\/state-of-the-bots\/\">relat\u00f3rios da TollBit<\/a> mostram aumentos dr\u00e1sticos no n\u00famero de bots que ignoram as diretivas do robots.txt. Os mesmos relat\u00f3rios descrevem o <a href=\"https:\/\/kinsta.com\/pt\/integracao-cloudflare\/\">Cloudflare<\/a> identificando um grande provedor de pesquisa com IA acessando conte\u00fado de sites que haviam proibido explicitamente esse acesso.<\/li>\n<li><strong>N\u00e3o h\u00e1 limita\u00e7\u00e3o da taxa de rastreamento.<\/strong> Muitas implementa\u00e7\u00f5es de crawlers de IA enviam solicita\u00e7\u00f5es em uma frequ\u00eancia alta e constante, independentemente da resposta do servidor. Parte disso nem sequer \u00e9 intencional, devido a pessoas que est\u00e3o \u201c<a href=\"https:\/\/kinsta.com\/pt\/trafego-bots-ia\/\">criando um bot com vibe coding<\/a>\u2026 e simplesmente o colocando para funcionar\u201d sem sequer verificar o <code>robots.txt<\/code>.<\/li>\n<li><strong>Os crawlers ficam presos em loops.<\/strong> Esse \u00e9 um padr\u00e3o caro que ocorre por quest\u00f5es estruturais, e n\u00e3o por comportamento malicioso. A maioria dos crawlers segue todos os links que encontra e registra cada URL exclusiva como uma p\u00e1gina separada. Os crawlers de IA seguem uma varia\u00e7\u00e3o, que gera outra, que \u00e9 seguida novamente, sem perceber que est\u00e3o andando em c\u00edrculos.<\/li>\n<\/ul>\n<p>O problema \u00e9 que a maior parte do rastreamento por IA \u00e9 destinada ao treinamento de modelos, e n\u00e3o \u00e0 pesquisa ou a consultas de usu\u00e1rios, o que significa que n\u00e3o gera tr\u00e1fego de refer\u00eancia de volta ao seu site.<\/p>\n<h2>Por que isso afeta seu servidor como um problema de desempenho<\/h2>\n<p>O volume, por si s\u00f3, n\u00e3o \u00e9 realmente o problema. Por exemplo, uma p\u00e1gina est\u00e1tica entregue a partir do cache praticamente n\u00e3o gera custos, portanto, mil acessos ao cache mal s\u00e3o percebidos. O problema come\u00e7a quando o tr\u00e1fego ignora o cache, e crawlers presos em loops s\u00e3o eficientes em encontrar essas rotas.<\/p>\n<p>Em um site WordPress que usa WooCommerce, solicita\u00e7\u00f5es de pesquisa ou filtragem representam uma grande parcela das solicita\u00e7\u00f5es que chegam a endpoints din\u00e2micos, em vez de p\u00e1ginas. Normalmente, s\u00e3o a\u00e7\u00f5es de carrinho, varia\u00e7\u00f5es do par\u00e2metro <code>?add-to-cart=<\/code>, p\u00e1ginas de produtos filtrados, consultas de pesquisa e <a href=\"https:\/\/kinsta.com\/pt\/blog\/admin-ajax\/\">intera\u00e7\u00f5es baseadas em AJAX<\/a> encaminhadas por meio do <code>admin-ajax.php<\/code>. Nenhuma delas pode ser armazenada em cache da mesma forma que um artigo do blog, portanto, cada solicita\u00e7\u00e3o for\u00e7a o servidor a trabalhar:<\/p>\n<ul>\n<li><strong>Execu\u00e7\u00e3o do PHP.<\/strong> Uma <a href=\"https:\/\/kinsta.com\/pt\/blog\/threads-php\/\">thread PHP<\/a> fica reservada durante toda a dura\u00e7\u00e3o de cada solicita\u00e7\u00e3o. Sob uma carga cont\u00ednua de bots, as threads se esgotam e os visitantes reais precisam esperar na fila atr\u00e1s dos bots.<\/li>\n<li><strong>Consultas ao banco de dados.<\/strong> As p\u00e1ginas din\u00e2micas acessam o banco de dados a cada carregamento porque n\u00e3o h\u00e1 uma camada de cache para absorver a consulta.<\/li>\n<li><strong>Processamento de sess\u00f5es.<\/strong> As p\u00e1ginas de carrinho e checkout criam ou validam uma sess\u00e3o a cada solicita\u00e7\u00e3o, adicionando sobrecarga mesmo para bots que nunca comprar\u00e3o nada.<\/li>\n<\/ul>\n<p>Com base nos dados da infraestrutura da Kinsta, um \u00fanico bot gerou 3,75 milh\u00f5es de solicita\u00e7\u00f5es para URLs <code>add-to-cart<\/code> em 24 horas. Isso equivale a aproximadamente uma solicita\u00e7\u00e3o a cada 23 milissegundos durante todo o dia. Os sintomas aparecem como anomalias de uso, consumo excedente de largura de banda, processos PHP esgotados e tempos de resposta mais lentos para usu\u00e1rios reais. Como resultado, isso parece um rastreamento comum, e n\u00e3o um ataque, o que torna o problema f\u00e1cil de ignorar.<\/p>\n<h2>Como identificar a atividade de crawlers de IA no MyKinsta<\/h2>\n<p>Antes de come\u00e7ar a alterar as configura\u00e7\u00f5es, voc\u00ea precisa confirmar se os crawlers s\u00e3o a causa. O MyKinsta oferece tr\u00eas visualiza\u00e7\u00f5es que, analisadas em conjunto, transformam uma suspeita em um diagn\u00f3stico.<\/p>\n<p>Primeiro, acesse <strong>Sites<\/strong> &gt; <em><strong>nome do site<\/strong><\/em> &gt; <strong>Prote\u00e7\u00e3o contra bots<\/strong> no MyKinsta. Nessa tela, o gr\u00e1fico <strong>Detalhamento de solicita\u00e7\u00f5es<\/strong> mostra todas as solicita\u00e7\u00f5es feitas ao seu site nas \u00faltimas 24 horas e como a Kinsta classifica cada uma delas.<\/p>\n<figure id=\"attachment_212123\" aria-describedby=\"caption-attachment-212123\" style=\"width: 1200px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-212123 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2026\/06\/request-breakdown.png\" alt=\"O gr\u00e1fico Detalhamento de solicita\u00e7\u00f5es no MyKinsta mostrando as solicita\u00e7\u00f5es feitas a um site nas \u00faltimas 24 horas, segmentadas por classifica\u00e7\u00e3o de tr\u00e1fego. Uma legenda identifica cada categoria por cor, e o gr\u00e1fico mostra a propor\u00e7\u00e3o relativa de cada uma ao longo do tempo.\" width=\"1200\" height=\"433\"><figcaption id=\"caption-attachment-212123\" class=\"wp-caption-text\">O gr\u00e1fico Detalhamento de solicita\u00e7\u00f5es mostrando as solicita\u00e7\u00f5es feitas a um site nas \u00faltimas 24 horas.<\/figcaption><\/figure>\n<p>A categoria Crawlers de IA com taxa excessiva isola os bots que geram um volume de solicita\u00e7\u00f5es alto o suficiente para amea\u00e7ar o desempenho. Quando uma grande parte do gr\u00e1fico est\u00e1 nessa categoria, voc\u00ea est\u00e1 diante de uma carga gerada por crawlers, e n\u00e3o de um aumento real no n\u00famero de leitores.<\/p>\n<p>O gr\u00e1fico <strong>Resultados da Prote\u00e7\u00e3o contra bots<\/strong> mostra o que aconteceu com o tr\u00e1fego, dividindo-o entre solicita\u00e7\u00f5es <strong>permitidas<\/strong>, <strong>submetidas a verifica\u00e7\u00e3o<\/strong> ou <strong>bloqueadas<\/strong>. Isso permite ver quanto tr\u00e1fego automatizado est\u00e1 chegando ao seu site e quanto est\u00e1 sendo filtrado antes de chegar at\u00e9 ele. Lado a lado, esses gr\u00e1ficos permitem entender se a carga j\u00e1 est\u00e1 sendo controlada ou se est\u00e1 chegando diretamente ao seu servidor.<\/p>\n<p>Para relacionar o tr\u00e1fego \u00e0 lentid\u00e3o, verifique a lista <strong>Principais IPs de clientes<\/strong> em <strong>An\u00e1lises<\/strong> no MyKinsta:<\/p>\n<figure id=\"attachment_212124\" aria-describedby=\"caption-attachment-212124\" style=\"width: 1200px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-212124 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2026\/06\/top-client-ips.png\" alt=\"O painel Principais IPs de clientes listando endere\u00e7os IP e suas respectivas quantidades de solicita\u00e7\u00f5es.\" width=\"1200\" height=\"741\"><figcaption id=\"caption-attachment-212124\" class=\"wp-caption-text\">O painel Principais IPs de clientes listando endere\u00e7os IP e suas respectivas quantidades de solicita\u00e7\u00f5es.<\/figcaption><\/figure>\n<p>Essa lista mostra os endere\u00e7os que enviam mais solicita\u00e7\u00f5es, e cada IP cont\u00e9m um link para um servi\u00e7o de consulta que permite verificar sua origem. Por fim, abra a aba <strong>Desempenho<\/strong> e compare os picos no tempo de resposta com os per\u00edodos de rastreamento intenso. Caso os picos no uso de recursos e o volume de bots aumentem e diminuam ao mesmo tempo, voc\u00ea saber\u00e1 que o pr\u00f3ximo passo \u00e9 controlar o tr\u00e1fego recebido.<\/p>\n<h2>Como gerenciar crawlers de IA com a Prote\u00e7\u00e3o contra bots da Kinsta<\/h2>\n<p>Ap\u00f3s confirmar a origem, a <a href=\"https:\/\/kinsta.com\/pt\/docs\/hospedagem-de-wordpress\/ferramentas-mykinsta\/protecao-contra-bots-wordpress\/\">Prote\u00e7\u00e3o contra bots da Kinsta<\/a> oferece controle sobre cada categoria de tr\u00e1fego. Ela funciona em conjunto com as prote\u00e7\u00f5es da plataforma que j\u00e1 filtram tr\u00e1fego claramente malicioso e est\u00e1 inclu\u00edda em todos os planos.<\/p>\n<figure id=\"attachment_212122\" aria-describedby=\"caption-attachment-212122\" style=\"width: 1200px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-212122 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2026\/06\/bot-protection-level.png\" alt=\"O painel N\u00edvel de prote\u00e7\u00e3o no MyKinsta mostrando quatro op\u00e7\u00f5es selecion\u00e1veis, cada uma com uma breve descri\u00e7\u00e3o e um bot\u00e3o de op\u00e7\u00e3o, al\u00e9m do bot\u00e3o Alterar n\u00edvel de prote\u00e7\u00e3o.\" width=\"1200\" height=\"553\"><figcaption id=\"caption-attachment-212122\" class=\"wp-caption-text\">O painel N\u00edvel de prote\u00e7\u00e3o mostrando quatro op\u00e7\u00f5es dispon\u00edveis.<\/figcaption><\/figure>\n<p>O painel <strong>N\u00edvel de prote\u00e7\u00e3o<\/strong> na tela <strong>Prote\u00e7\u00e3o contra bots<\/strong> do MyKinsta oferece quatro configura\u00e7\u00f5es:<\/p>\n<ul>\n<li><strong>Bloquear tr\u00e1fego malicioso<\/strong> \u00e9 a configura\u00e7\u00e3o padr\u00e3o. Ela realiza a mitiga\u00e7\u00e3o de DDoS e bloqueia IPs e endpoints associados a fontes de ataques conhecidas.<\/li>\n<li><strong>Bloquear automa\u00e7\u00f5es<\/strong> adiciona uma camada que bloqueia tr\u00e1fego automatizado confirmado, enquanto permite a passagem de bots verificados e visitantes reais.<\/li>\n<li><strong>Aplicar verifica\u00e7\u00e3o a bots<\/strong> adiciona uma etapa de verifica\u00e7\u00e3o para prov\u00e1veis bots. Um visitante que passa pela verifica\u00e7\u00e3o n\u00e3o precisa realiz\u00e1-la novamente por dez dias no mesmo navegador e endere\u00e7o IP.<\/li>\n<li><strong>Aplicar verifica\u00e7\u00e3o a todos<\/strong> \u00e9 a configura\u00e7\u00e3o mais rigorosa e permite a passagem apenas de bots verificados. Essa configura\u00e7\u00e3o deve ser usada por um curto per\u00edodo durante um pico de tr\u00e1fego ativo.<\/li>\n<\/ul>\n<p>Em <strong>Aplicar verifica\u00e7\u00e3o a bots<\/strong> ou n\u00edveis superiores, qualquer ferramenta que se conecte ao seu site de forma program\u00e1tica e n\u00e3o esteja no <a href=\"https:\/\/radar.cloudflare.com\/bots#verified-bots\">diret\u00f3rio de bots verificados do Cloudflare<\/a> estar\u00e1 sujeita a verifica\u00e7\u00e3o ou bloqueio. Portanto, confirme se as ferramentas essenciais para sua empresa aparecem nessa lista antes de aumentar o n\u00edvel de prote\u00e7\u00e3o.<\/p>\n<p>A Kinsta aplica suas pr\u00f3prias regras sobre a lista de bots verificados do Cloudflare. Isso significa que ela reclassifica bots de IA verificados que geram um alto volume de solicita\u00e7\u00f5es na categoria separada <strong>Crawlers de IA com taxa excessiva<\/strong>.<\/p>\n<p>A l\u00f3gica \u00e9 avaliar um crawler pelo seu comportamento, e n\u00e3o por suas credenciais, portanto, um bot verificado que come\u00e7a a sobrecarregar seu site passa a ser tratado como o problema que se tornou. Ao definir a prote\u00e7\u00e3o como <strong>Aplicar verifica\u00e7\u00e3o a bots<\/strong> ou um n\u00edvel superior, um servi\u00e7o leg\u00edtimo com alto volume de solicita\u00e7\u00f5es pode comprovar sua legitimidade, enquanto crawlers presos em loops s\u00e3o filtrados.<\/p>\n<h3>Outras funcionalidades da Prote\u00e7\u00e3o contra bots no MyKinsta<\/h3>\n<p>O bot\u00e3o de altern\u00e2ncia <strong>Bloquear crawlers de IA<\/strong> \u00e9 um controle separado do n\u00edvel de prote\u00e7\u00e3o que atua especificamente sobre crawlers de IA, incluindo os verificados, como o GPTBot. O Googlebot e o Bingbot continuam indexando seu site normalmente, portanto, essa op\u00e7\u00e3o elimina a carga dos crawlers de IA sem afetar sua visibilidade nos mecanismos de pesquisa.<\/p>\n<aside role=\"note\" class=\"wp-block-kinsta-notice is-style-info\">\n            <h3>Info<\/h3>\n        <p>O Googlebot rastreia conte\u00fado simultaneamente para indexa\u00e7\u00e3o de pesquisa e treinamento de IA. Caso queira impedir especificamente o uso do seu conte\u00fado para treinamento de IA do Google, voc\u00ea precisa bloquear o Google-Extended separadamente por meio do arquivo <code>robots.txt<\/code>.<\/p>\n<\/aside>\n\n<figure id=\"attachment_212121\" aria-describedby=\"caption-attachment-212121\" style=\"width: 1200px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-212121 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2026\/06\/block-ai-crawlers.png\" alt=\"O bot\u00e3o de altern\u00e2ncia Bloquear crawlers de IA habilitado no MyKinsta, acompanhado de um texto explicativo.\" width=\"1200\" height=\"552\"><figcaption id=\"caption-attachment-212121\" class=\"wp-caption-text\">O bot\u00e3o de altern\u00e2ncia Bloquear crawlers de IA habilitado no MyKinsta, acompanhado de um texto explicativo.<\/figcaption><\/figure>\n<p>Essa \u00e9 uma op\u00e7\u00e3o mais simples do que editar manualmente o <code>robots.txt<\/code> ou manter regras individuais para cada bot, mas vale a pena considerar as consequ\u00eancias antes de habilit\u00e1-la.<\/p>\n<p>Bloquear crawlers de IA reduz a frequ\u00eancia com que seu conte\u00fado aparece em <a href=\"https:\/\/kinsta.com\/pt\/blog\/geo-vs-aeo-vs-seo-wordpress\/\">respostas e resumos gerados por IA<\/a> e, \u00e0 medida que as ferramentas de IA se tornam um canal de descoberta mais importante para alguns p\u00fablicos, optar pelo bloqueio completo tem implica\u00e7\u00f5es que v\u00e3o al\u00e9m da carga do servidor.<\/p>\n<p>Para sites que priorizam o desempenho, como lojas WooCommerce, sites de conte\u00fado com alto tr\u00e1fego e plataformas de membros, o custo de recursos causado pelo rastreamento por IA \u00e9 alto e o retorno \u00e9 baixo, portanto, o bloqueio pode ser a op\u00e7\u00e3o mais adequada caso voc\u00ea identifique problemas. Para sites que priorizam conte\u00fado e nos quais a visibilidade em IA \u00e9 uma prioridade estrat\u00e9gica, permanecer em <strong>Bloquear automa\u00e7\u00f5es<\/strong> ou <strong>Aplicar verifica\u00e7\u00e3o a bots<\/strong> filtra os piores comportamentos e mant\u00e9m seu conte\u00fado index\u00e1vel por plataformas de IA.<\/p>\n<p>N\u00e3o existe uma resposta certa para todos os casos. O bot\u00e3o de altern\u00e2ncia existe para oferecer essa escolha.<\/p>\n<p>Uma prote\u00e7\u00e3o mais rigorosa pode afetar o tr\u00e1fego automatizado do qual voc\u00ea depende, portanto, duas configura\u00e7\u00f5es garantem que ele continue funcionando. A se\u00e7\u00e3o <strong>Sempre permitir<\/strong> permite adicionar at\u00e9 50 exce\u00e7\u00f5es por endere\u00e7o IP, caminho ou user agent. \u00c9 nela que voc\u00ea adiciona os itens que nunca devem passar por uma verifica\u00e7\u00e3o, como um servi\u00e7o de monitoramento, um webhook de pagamento ou um IP confi\u00e1vel do escrit\u00f3rio ou de um cliente.<\/p>\n<figure id=\"attachment_212120\" aria-describedby=\"caption-attachment-212120\" style=\"width: 1200px\" class=\"wp-caption aligncenter\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-212120 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2026\/06\/always-allow.png\" alt=\"A tela Adicionar nova exce\u00e7\u00e3o mostrando op\u00e7\u00f5es para inserir um novo caminho de URL.\" width=\"1200\" height=\"681\"><figcaption id=\"caption-attachment-212120\" class=\"wp-caption-text\">A tela Adicionar nova exce\u00e7\u00e3o mostrando op\u00e7\u00f5es para inserir um novo caminho de URL.<\/figcaption><\/figure>\n<p><strong>Permitir automa\u00e7\u00f5es comuns do WordPress<\/strong> habilita uma lista de permiss\u00f5es gerenciada de endpoints e servi\u00e7os comuns do WordPress, incluindo a <a href=\"https:\/\/kinsta.com\/pt\/blog\/wordpress-rest-api\/\">REST API<\/a> e tarefas em segundo plano. Habilite essa op\u00e7\u00e3o junto com uma prote\u00e7\u00e3o mais rigorosa quando seu site depender de plugins, integra\u00e7\u00f5es ou tarefas agendadas que fazem solicita\u00e7\u00f5es automatizadas, evitando que o aumento da prote\u00e7\u00e3o interrompa silenciosamente um fluxo de trabalho.<\/p>\n<h2>As novas regras de rastreamento da web exigem um gerenciamento mais atento<\/h2>\n<p>Embora o comportamento na internet tenha mudado, sua hospedagem provavelmente n\u00e3o mudou. Os crawlers de IA n\u00e3o seguem as mesmas regras que os mecanismos de pesquisa passaram duas d\u00e9cadas estabelecendo. O <code>robots.txt<\/code> \u00e9 tratado como opcional e o rastreamento ocorre em uma frequ\u00eancia alta e constante. Al\u00e9m disso, voc\u00ea n\u00e3o recebe nada em troca dos recursos utilizados. Isso cria um problema de desempenho e custos que parece ser causado por dificuldades do pr\u00f3prio site, e n\u00e3o pela atividade de crawlers.<\/p>\n<p>A solu\u00e7\u00e3o \u00e9 uma sequ\u00eancia curta de a\u00e7\u00f5es que est\u00e1 sob seu controle. Primeiro, confirme a causa nas An\u00e1lises do MyKinsta. Em seguida, defina o <strong>N\u00edvel de prote\u00e7\u00e3o<\/strong> adequado no MyKinsta e habilite <strong>Bloquear crawlers de IA<\/strong> para eliminar a carga dos crawlers de IA sem perder visibilidade nos mecanismos de pesquisa. Depois, proteja os servi\u00e7os dos quais voc\u00ea depende usando <strong>Sempre permitir<\/strong>, para que configura\u00e7\u00f5es mais rigorosas n\u00e3o interrompam uma integra\u00e7\u00e3o confi\u00e1vel. Cada altera\u00e7\u00e3o entra em vigor sem tempo de inatividade, permitindo ajustar as configura\u00e7\u00f5es \u00e0 medida que os padr\u00f5es mudam.<\/p>\n<p>Caso gerencie muitos sites de clientes, o <a href=\"https:\/\/kinsta.com\/pt\/programa-de-agencia-parceira\/\">Programa de Ag\u00eancia Parceira da Kinsta<\/a> re\u00fane esses controles com suporte dedicado. <a href=\"https:\/\/kinsta.com\/pt\/hospedagem-wordpress\/\">Conhe\u00e7a a hospedagem gerenciada para WordPress da Kinsta<\/a> para colocar esse controle em pr\u00e1tica.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Em 2025, os bots representaram 53% de todo o tr\u00e1fego web, marcando a primeira vez em que o tr\u00e1fego automatizado superou o tr\u00e1fego humano em um &#8230;<\/p>\n","protected":false},"author":287,"featured_media":76108,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_kinsta_gated_content":false,"_kinsta_gated_content_redirect":"","footnotes":""},"tags":[],"topic":[1080,1081],"class_list":["post-76107","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","topic-trafego-de-bots","topic-web-crawlers"],"yoast_head":"<!-- This site is optimized with the Yoast SEO Premium plugin v24.6 (Yoast SEO v24.6) - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web - Kinsta<\/title>\n<meta name=\"description\" content=\"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\" \/>\n<meta property=\"og:locale\" content=\"pt_PT\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web\" \/>\n<meta property=\"og:description\" content=\"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\" \/>\n<meta property=\"og:site_name\" content=\"Kinsta\u00ae\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/kinstapt\/\" \/>\n<meta property=\"article:published_time\" content=\"2026-08-10T07:41:14+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2026-08-14T12:01:56+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\" \/>\n\t<meta property=\"og:image:width\" content=\"1470\" \/>\n\t<meta property=\"og:image:height\" content=\"735\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/png\" \/>\n<meta name=\"author\" content=\"Joel Olawanle\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:description\" content=\"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.\" \/>\n<meta name=\"twitter:image\" content=\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\" \/>\n<meta name=\"twitter:creator\" content=\"@olawanle_joel\" \/>\n<meta name=\"twitter:site\" content=\"@kinsta_pt\" \/>\n<meta name=\"twitter:label1\" content=\"Escrito por\" \/>\n\t<meta name=\"twitter:data1\" content=\"Joel Olawanle\" \/>\n\t<meta name=\"twitter:label2\" content=\"Tempo estimado de leitura\" \/>\n\t<meta name=\"twitter:data2\" content=\"15 minutos\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#article\",\"isPartOf\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\"},\"author\":{\"name\":\"Joel Olawanle\",\"@id\":\"https:\/\/kinsta.com\/pt\/#\/schema\/person\/efa7de30245ca15be5ce1dcacff89c07\"},\"headline\":\"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web\",\"datePublished\":\"2026-08-10T07:41:14+00:00\",\"dateModified\":\"2026-08-14T12:01:56+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\"},\"wordCount\":2932,\"publisher\":{\"@id\":\"https:\/\/kinsta.com\/pt\/#organization\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\",\"inLanguage\":\"pt-PT\"},{\"@type\":\"WebPage\",\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\",\"url\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\",\"name\":\"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web - Kinsta\",\"isPartOf\":{\"@id\":\"https:\/\/kinsta.com\/pt\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\",\"datePublished\":\"2026-08-10T07:41:14+00:00\",\"dateModified\":\"2026-08-14T12:01:56+00:00\",\"description\":\"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.\",\"breadcrumb\":{\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#breadcrumb\"},\"inLanguage\":\"pt-PT\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-PT\",\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage\",\"url\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\",\"contentUrl\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png\",\"width\":1470,\"height\":735},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Home\",\"item\":\"https:\/\/kinsta.com\/pt\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Tr\u00e1fego de bots\",\"item\":\"https:\/\/kinsta.com\/pt\/topicos\/trafego-de-bots\/\"},{\"@type\":\"ListItem\",\"position\":3,\"name\":\"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/kinsta.com\/pt\/#website\",\"url\":\"https:\/\/kinsta.com\/pt\/\",\"name\":\"Kinsta\u00ae\",\"description\":\"Solu\u00e7\u00f5es de hospedagem Premium, r\u00e1pida e segura\",\"publisher\":{\"@id\":\"https:\/\/kinsta.com\/pt\/#organization\"},\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/kinsta.com\/pt\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"pt-PT\"},{\"@type\":\"Organization\",\"@id\":\"https:\/\/kinsta.com\/pt\/#organization\",\"name\":\"Kinsta\",\"url\":\"https:\/\/kinsta.com\/pt\/\",\"logo\":{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-PT\",\"@id\":\"https:\/\/kinsta.com\/pt\/#\/schema\/logo\/image\/\",\"url\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2023\/12\/kinsta-logo.jpeg\",\"contentUrl\":\"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2023\/12\/kinsta-logo.jpeg\",\"width\":500,\"height\":500,\"caption\":\"Kinsta\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/pt\/#\/schema\/logo\/image\/\"},\"sameAs\":[\"https:\/\/www.facebook.com\/kinstapt\/\",\"https:\/\/x.com\/kinsta_pt\",\"https:\/\/www.instagram.com\/kinstahosting\/\",\"https:\/\/www.linkedin.com\/company\/kinsta\/\",\"https:\/\/www.pinterest.com\/kinstahosting\/\",\"https:\/\/www.youtube.com\/c\/Kinsta\"]},{\"@type\":\"Person\",\"@id\":\"https:\/\/kinsta.com\/pt\/#\/schema\/person\/efa7de30245ca15be5ce1dcacff89c07\",\"name\":\"Joel Olawanle\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-PT\",\"@id\":\"https:\/\/kinsta.com\/pt\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/051bf577ce2c837846a1db9eef184758?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/051bf577ce2c837846a1db9eef184758?s=96&d=mm&r=g\",\"caption\":\"Joel Olawanle\"},\"description\":\"Joel is a Frontend developer working at Kinsta as a Technical Editor. He is a passionate teacher with love for open source and has written over 300 technical articles majorly around JavaScript and it's frameworks.\",\"sameAs\":[\"https:\/\/joelolawanle.com\/\",\"https:\/\/www.linkedin.com\/in\/olawanlejoel\/\",\"https:\/\/x.com\/olawanle_joel\",\"https:\/\/www.youtube.com\/@joelolawanle\"],\"gender\":\"male\",\"knowsAbout\":[\"JavaScript\",\"React\",\"Next.js\"],\"knowsLanguage\":[\"English\"],\"jobTitle\":\"Technical Editor\",\"worksFor\":\"Kinsta\",\"url\":\"https:\/\/kinsta.com\/pt\/blog\/author\/joelolawanle\/\"}]}<\/script>\n<!-- \/ Yoast SEO Premium plugin. -->","yoast_head_json":{"title":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web - Kinsta","description":"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/","og_locale":"pt_PT","og_type":"article","og_title":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web","og_description":"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.","og_url":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/","og_site_name":"Kinsta\u00ae","article_publisher":"https:\/\/www.facebook.com\/kinstapt\/","article_published_time":"2026-08-10T07:41:14+00:00","article_modified_time":"2026-08-14T12:01:56+00:00","og_image":[{"width":1470,"height":735,"url":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","type":"image\/png"}],"author":"Joel Olawanle","twitter_card":"summary_large_image","twitter_description":"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.","twitter_image":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","twitter_creator":"@olawanle_joel","twitter_site":"@kinsta_pt","twitter_misc":{"Escrito por":"Joel Olawanle","Tempo estimado de leitura":"15 minutos"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#article","isPartOf":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/"},"author":{"name":"Joel Olawanle","@id":"https:\/\/kinsta.com\/pt\/#\/schema\/person\/efa7de30245ca15be5ce1dcacff89c07"},"headline":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web","datePublished":"2026-08-10T07:41:14+00:00","dateModified":"2026-08-14T12:01:56+00:00","mainEntityOfPage":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/"},"wordCount":2932,"publisher":{"@id":"https:\/\/kinsta.com\/pt\/#organization"},"image":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage"},"thumbnailUrl":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","inLanguage":"pt-PT"},{"@type":"WebPage","@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/","url":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/","name":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web - Kinsta","isPartOf":{"@id":"https:\/\/kinsta.com\/pt\/#website"},"primaryImageOfPage":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage"},"image":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage"},"thumbnailUrl":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","datePublished":"2026-08-10T07:41:14+00:00","dateModified":"2026-08-14T12:01:56+00:00","description":"Crawlers de IA ignoram o robots.txt, entram em loops de URLs din\u00e2micas e n\u00e3o geram retorno. Veja como gerenci\u00e1-los no MyKinsta.","breadcrumb":{"@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#breadcrumb"},"inLanguage":"pt-PT","potentialAction":[{"@type":"ReadAction","target":["https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/"]}]},{"@type":"ImageObject","inLanguage":"pt-PT","@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#primaryimage","url":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","contentUrl":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2026\/08\/why-ai-crawlers-are-breaking-the-rules-of-web-crawling-3.png","width":1470,"height":735},{"@type":"BreadcrumbList","@id":"https:\/\/kinsta.com\/pt\/blog\/crawler-ia-regras-rastreamento-web\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/kinsta.com\/pt\/"},{"@type":"ListItem","position":2,"name":"Tr\u00e1fego de bots","item":"https:\/\/kinsta.com\/pt\/topicos\/trafego-de-bots\/"},{"@type":"ListItem","position":3,"name":"Por que os crawlers de IA est\u00e3o quebrando as regras de rastreamento da web"}]},{"@type":"WebSite","@id":"https:\/\/kinsta.com\/pt\/#website","url":"https:\/\/kinsta.com\/pt\/","name":"Kinsta\u00ae","description":"Solu\u00e7\u00f5es de hospedagem Premium, r\u00e1pida e segura","publisher":{"@id":"https:\/\/kinsta.com\/pt\/#organization"},"potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/kinsta.com\/pt\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"pt-PT"},{"@type":"Organization","@id":"https:\/\/kinsta.com\/pt\/#organization","name":"Kinsta","url":"https:\/\/kinsta.com\/pt\/","logo":{"@type":"ImageObject","inLanguage":"pt-PT","@id":"https:\/\/kinsta.com\/pt\/#\/schema\/logo\/image\/","url":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2023\/12\/kinsta-logo.jpeg","contentUrl":"https:\/\/kinsta.com\/pt\/wp-content\/uploads\/sites\/3\/2023\/12\/kinsta-logo.jpeg","width":500,"height":500,"caption":"Kinsta"},"image":{"@id":"https:\/\/kinsta.com\/pt\/#\/schema\/logo\/image\/"},"sameAs":["https:\/\/www.facebook.com\/kinstapt\/","https:\/\/x.com\/kinsta_pt","https:\/\/www.instagram.com\/kinstahosting\/","https:\/\/www.linkedin.com\/company\/kinsta\/","https:\/\/www.pinterest.com\/kinstahosting\/","https:\/\/www.youtube.com\/c\/Kinsta"]},{"@type":"Person","@id":"https:\/\/kinsta.com\/pt\/#\/schema\/person\/efa7de30245ca15be5ce1dcacff89c07","name":"Joel Olawanle","image":{"@type":"ImageObject","inLanguage":"pt-PT","@id":"https:\/\/kinsta.com\/pt\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/051bf577ce2c837846a1db9eef184758?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/051bf577ce2c837846a1db9eef184758?s=96&d=mm&r=g","caption":"Joel Olawanle"},"description":"Joel is a Frontend developer working at Kinsta as a Technical Editor. He is a passionate teacher with love for open source and has written over 300 technical articles majorly around JavaScript and it's frameworks.","sameAs":["https:\/\/joelolawanle.com\/","https:\/\/www.linkedin.com\/in\/olawanlejoel\/","https:\/\/x.com\/olawanle_joel","https:\/\/www.youtube.com\/@joelolawanle"],"gender":"male","knowsAbout":["JavaScript","React","Next.js"],"knowsLanguage":["English"],"jobTitle":"Technical Editor","worksFor":"Kinsta","url":"https:\/\/kinsta.com\/pt\/blog\/author\/joelolawanle\/"}]}},"acf":[],"_links":{"self":[{"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/posts\/76107","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/users\/287"}],"replies":[{"embeddable":true,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/comments?post=76107"}],"version-history":[{"count":5,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/posts\/76107\/revisions"}],"predecessor-version":[{"id":76151,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/posts\/76107\/revisions\/76151"}],"alternate":[{"embeddable":true,"hreflang":"en","title":"English","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/en"},{"embeddable":true,"hreflang":"it","title":"Italian","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/it"},{"embeddable":true,"hreflang":"fr","title":"French","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/fr"},{"embeddable":true,"hreflang":"ja","title":"Japanese","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/jp"},{"embeddable":true,"hreflang":"es","title":"Spanish","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/es"},{"embeddable":true,"hreflang":"nl","title":"Dutch","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/nl"},{"embeddable":true,"hreflang":"pt","title":"Portuguese","href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/translations\/pt"},{"href":"https:\/\/kinsta.com\/pt\/wp-json\/kinsta\/v1\/posts\/76107\/tree"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/media\/76108"}],"wp:attachment":[{"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/media?parent=76107"}],"wp:term":[{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/tags?post=76107"},{"taxonomy":"topic","embeddable":true,"href":"https:\/\/kinsta.com\/pt\/wp-json\/wp\/v2\/topic?post=76107"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}