{"id":57087,"date":"2022-12-15T12:13:14","date_gmt":"2022-12-15T11:13:14","guid":{"rendered":"https:\/\/kinsta.com\/de\/?p=57087&#038;preview=true&#038;preview_id=57087"},"modified":"2025-08-29T17:01:33","modified_gmt":"2025-08-29T16:01:33","slug":"crawler-liste","status":"publish","type":"post","link":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/","title":{"rendered":"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst"},"content":{"rendered":"<p>F\u00fcr die meisten Vermarkter sind st\u00e4ndige Aktualisierungen erforderlich, um ihre Website aktuell zu halten und ihre SEO-Rankings zu verbessern.<\/p>\n<p>Manche Websites haben jedoch Hunderte oder sogar Tausende von Seiten, was eine Herausforderung f\u00fcr die Teams darstellt, die die Aktualisierungen manuell an die Suchmaschinen \u00fcbermitteln. Wenn die Inhalte so h\u00e4ufig aktualisiert werden, wie k\u00f6nnen die Teams dann sicherstellen, dass sich diese Verbesserungen auch auf <a href=\"https:\/\/kinsta.com\/de\/blog\/wordpress-seo\/\">ihre SEO-Rankings auswirken<\/a>?<\/p>\n<p>An dieser Stelle kommen Crawler-Bots ins Spiel. Ein Web-Crawler-Bot durchsucht <a href=\"https:\/\/kinsta.com\/de\/blog\/wordpress-sitemap\/\">deine Sitemap<\/a> nach neuen Aktualisierungen und indexiert die Inhalte in Suchmaschinen.<\/p>\n<p>In diesem Beitrag stellen wir dir eine umfassende Crawler-Liste vor, die alle Web-Crawler-Bots umfasst, die du kennen musst. Bevor wir einsteigen, wollen wir Web-Crawler-Bots definieren und zeigen, wie sie funktionieren.<\/p>\n<div><\/div><kinsta-auto-toc heading=\"Table of Contents\" exclude=\"last\" list-style=\"arrow\" selector=\"h2\" count-number=\"-1\"><\/kinsta-auto-toc>\n<h2>Was ist ein Web Crawler?<\/h2>\n<p>Ein Web-Crawler ist ein Computerprogramm, das Webseiten automatisch scannt und systematisch liest, um die Seiten f\u00fcr Suchmaschinen zu indizieren. Webcrawler werden auch als Spider oder Bots bezeichnet.<\/p>\n<p>Damit Suchmaschinen den Nutzern, die eine Suche starten, aktuelle, relevante Webseiten pr\u00e4sentieren k\u00f6nnen, muss ein Web-Crawler-Bot die Seiten crawlen. Dieser Prozess kann manchmal automatisch ablaufen (je nach den Einstellungen des Crawlers und deiner Website) oder er kann direkt initiiert werden.<\/p>\n<p>Viele Faktoren beeinflussen das <a href=\"https:\/\/kinsta.com\/de\/blog\/wofur-steht-seo\/\">SEO-Ranking<\/a> deiner Seiten, darunter Relevanz, Backlinks, <a href=\"https:\/\/kinsta.com\/de\/blog\/wie-hosting-seo-betrifft\/\">Webhosting<\/a> und vieles mehr. All diese Faktoren spielen jedoch keine Rolle, wenn deine Seiten nicht von den Suchmaschinen gecrawlt und indexiert werden. Deshalb ist es so wichtig, dass du sicherstellst, dass deine Website die richtigen Crawls zul\u00e4sst und alle Hindernisse aus dem Weg r\u00e4umst.<\/p>\n<p>Bots m\u00fcssen <a href=\"https:\/\/kinsta.com\/de\/blog\/was-ist-web-scraping\/\">das Web st\u00e4ndig scannen und scrapen<\/a>, um sicherzustellen, dass die genauesten Informationen pr\u00e4sentiert werden. Google ist <a href=\"https:\/\/www.similarweb.com\/top-websites\/\" target=\"_blank\" rel=\"noopener noreferrer\">die meistbesuchte Website in den USA<\/a>, und etwa 26,9 % der Suchanfragen stammen von amerikanischen Nutzern:<\/p>\n<figure style=\"width: 1178px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Google-Traffic-By-Region.png\" alt=\"Ein Diagramm mit Suchanfragen aus den Vereinigten Staaten\" width=\"1178\" height=\"774\"><figcaption class=\"wp-caption-text\">Google-Suchanfragen werden haupts\u00e4chlich aus den Vereinigten Staaten initiiert (<b>Quelle:<\/b> <a href=\"https:\/\/www.statista.com\/statistics\/276737\/distribution-of-visitors-to-googlecom-by-country\/\" target=\"_blank\" rel=\"noopener noreferrer\">Statista<\/a>)<\/figcaption><\/figure>\n<p>Allerdings gibt es nicht den einen Webcrawler, der f\u00fcr jede Suchmaschine crawlt. Jede <a href=\"https:\/\/kinsta.com\/de\/suchmaschinen-markt-anteil\/\">Suchmaschine<\/a> hat ihre eigenen St\u00e4rken, deshalb stellen Entwickler und Vermarkter manchmal eine &#8222;Crawler-Liste&#8220; zusammen Diese Crawler-Liste hilft ihnen, verschiedene Crawler in ihrem Website-Protokoll zu identifizieren und zu akzeptieren oder zu blockieren.<\/p>\n<p>Vermarkter m\u00fcssen eine Crawlerliste mit den verschiedenen Webcrawlern zusammenstellen und verstehen, wie sie ihre Website bewerten (im Gegensatz zu <a href=\"https:\/\/kinsta.com\/de\/blog\/content-scraping\/\">Content Scrapers<\/a>, die die Inhalte stehlen), um sicherzustellen, dass sie ihre Landing Pages richtig f\u00fcr Suchmaschinen optimieren.<\/p>\n\n<h2>Wie funktioniert ein Web Crawler?<\/h2>\n<p>Ein Webcrawler scannt deine Webseite automatisch, nachdem sie ver\u00f6ffentlicht wurde, und <a href=\"https:\/\/kinsta.com\/de\/blog\/anmelden-deiner-webseite-suchmaschinen\/\">indexiert deine Daten<\/a>.<\/p>\n<p>Webcrawler suchen nach bestimmten Schl\u00fcsselw\u00f6rtern, die mit der Webseite verbunden sind, und indexieren diese Informationen f\u00fcr relevante Suchmaschinen wie Google, Bing und andere.<\/p>\n<figure style=\"width: 800px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Web-crawling-flow-chart.png\" alt=\"Ein schrittweiser Prozess, der das Web-Crawling zeigt\" width=\"800\" height=\"450\"><figcaption class=\"wp-caption-text\">Das Crawling von Webseiten ist ein mehrstufiger Prozess (<b>Quelle:<\/b> <a href=\"https:\/\/neilpatel.com\/blog\/deindex-your-pages\/\" target=\"_blank\" rel=\"noopener noreferrer\">Neil Patel<\/a>)<\/figcaption><\/figure>\n<p>Die Algorithmen der Suchmaschinen holen diese Daten ab, wenn ein Nutzer eine Anfrage nach dem entsprechenden Schl\u00fcsselwort stellt.<\/p>\n<p>Crawls beginnen mit bekannten <a href=\"https:\/\/kinsta.com\/de\/blog\/was-ist-eine-url\/\">URLs<\/a>. Das sind etablierte Webseiten mit verschiedenen Signalen, die Webcrawler zu diesen Seiten leiten. Diese Signale k\u00f6nnen sein:<\/p>\n<ul>\n<li><strong>Backlinks: <\/strong>Die Anzahl der Links auf eine Website<\/li>\n<li><strong>Besucher: <\/strong>Wie viel <a href=\"https:\/\/kinsta.com\/de\/blog\/traffic-deine-webseite-bekommen\/\">Traffic<\/a> auf die Seite kommt<\/li>\n<li><strong>Domain-Autorit\u00e4t: <\/strong>Die allgemeine Qualit\u00e4t der Domain<\/li>\n<\/ul>\n<p>Dann speichern sie die Daten im Index der Suchmaschine. Wenn der Nutzer eine Suchanfrage stellt, holt der Algorithmus die Daten aus dem Index, und sie erscheinen auf der Ergebnisseite der Suchmaschine. Dieser Vorgang kann innerhalb weniger Millisekunden ablaufen, weshalb die Ergebnisse oft schnell erscheinen.<\/p>\n<p>Als Webmaster kannst du kontrollieren, welche Bots deine Website crawlen. Deshalb ist es wichtig, eine Crawler-Liste zu haben. Es ist die <strong><a href=\"https:\/\/kinsta.com\/de\/blog\/wordpress-robots-txt\/\">robots.txt-Protokoll<\/a><\/strong> die auf den Servern jeder Website liegt und die Crawler auf neue Inhalte hinweist, die indiziert werden m\u00fcssen.<\/p>\n<p>Je nachdem, was du in dein <strong>robots.txt<\/strong>-Protokoll auf jeder Webseite eingibst, kannst du einem Crawler sagen, dass er diese Seite in Zukunft scannen oder nicht indexieren soll.<\/p>\n<p>Wenn du verstehst, wonach ein Webcrawler bei seinem Scan sucht, kannst du deine Inhalte besser f\u00fcr Suchmaschinen positionieren.<\/p>\n<h2>Erstelle deine Crawler-Liste: Was sind die verschiedenen Arten von Webcrawlern?<\/h2>\n<p>Wenn du \u00fcber die Erstellung deiner Crawler-Liste nachdenkst, gibt es drei Haupttypen von Crawlern, nach denen du suchen solltest. Dazu geh\u00f6ren:<\/p>\n<ul>\n<li><strong>Interne Crawler: <\/strong>Das sind Crawler, die vom Entwicklungsteam eines Unternehmens entwickelt wurden, um die Website zu scannen. In der Regel werden sie zur \u00dcberpr\u00fcfung und <a href=\"https:\/\/kinsta.com\/de\/lernen\/website-geschwindigkeit\/\">Optimierung<\/a> der Website eingesetzt.<\/li>\n<li><strong>Kommerzielle Crawler: <\/strong>Dies sind ma\u00dfgeschneiderte Crawler wie <a href=\"https:\/\/kinsta.com\/de\/kunden\/screaming-frog\/\">Screaming Frog<\/a>, die Unternehmen zum Crawlen und zur effizienten Auswertung ihrer Inhalte einsetzen k\u00f6nnen.<\/li>\n<li><strong>Open-Source Crawler<\/strong>: Das sind kostenlos nutzbare Crawler, die von einer Vielzahl von Entwicklern und Hackern auf der ganzen Welt entwickelt werden.<\/li>\n<\/ul>\n<p>Es ist wichtig, die verschiedenen Arten von Crawlern zu kennen, damit du wei\u00dft, welchen Typ du f\u00fcr deine eigenen Gesch\u00e4ftsziele nutzen musst.<\/p>\n<h2>Die 11 g\u00e4ngigsten Webcrawler, die du in deine Crawler-Liste aufnehmen solltest<\/h2>\n<p>Es gibt nicht den einen Crawler, der die ganze Arbeit f\u00fcr jede Suchmaschine erledigt.<\/p>\n<p>Stattdessen gibt es eine Vielzahl von Webcrawlern, die deine Webseiten auswerten und die Inhalte f\u00fcr <a href=\"https:\/\/kinsta.com\/de\/blog\/alternative-suchmaschinen\/\">alle Suchmaschinen<\/a> scannen, die den Nutzern auf der ganzen Welt zur Verf\u00fcgung stehen.<\/p>\n<p>Schauen wir uns einige der g\u00e4ngigsten Webcrawler an.<\/p>\n<div><\/div><kinsta-auto-toc list-style=\"decimal\" selector=\"h3\" count-number=\"12\" sub-toc=\"true\"><\/kinsta-auto-toc>\n<h3>1. Googlebot<\/h3>\n<p>Der Googlebot ist Googles allgemeiner Webcrawler, der daf\u00fcr zust\u00e4ndig ist, Websites zu crawlen, die in der Google-Suchmaschine angezeigt werden sollen.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Google-homepage.png\" alt=\"Googlebot indexiert Websites, um aktuelle Google-Ergebnisse zu liefern\" width=\"1600\" height=\"808\"><figcaption class=\"wp-caption-text\">Googlebot indexiert Websites, um aktuelle Google-Ergebnisse zu liefern<\/figcaption><\/figure>\n<p>Obwohl es technisch gesehen zwei Versionen von Googlebot gibt &#8211; Googlebot Desktop und Googlebot Smartphone (Mobile) &#8211; betrachten die meisten Experten Googlebot als einen einzigen Crawler.<\/p>\n<p>Das liegt daran, dass beide demselben eindeutigen Produkt-Token (bekannt als User-Agent-Token) folgen, der in der <strong>robots.txt<\/strong> jeder Website steht. Der Benutzeragent von Googlebot hei\u00dft einfach &#8222;<strong>Googlebot<\/strong>&#8220;<\/p>\n<p>Googlebot macht sich an die Arbeit und greift normalerweise alle paar Sekunden auf deine Website zu (es sei denn, du hast ihn in der <strong>robots.txt<\/strong> deiner Website blockiert). Ein Backup der gescannten Seiten wird in einer einheitlichen Datenbank namens <a href=\"https:\/\/kinsta.com\/de\/blog\/google-cache\/\">Google Cache<\/a> gespeichert. So kannst du dir alte Versionen deiner Website ansehen.<\/p>\n<p>Au\u00dferdem ist die <a href=\"https:\/\/kinsta.com\/de\/blog\/google-search-console\/\">Google Search Console<\/a> ein weiteres Tool, mit dem Webmaster\/innen verstehen k\u00f6nnen, wie der Googlebot ihre Website crawlt, und mit dem sie ihre Seiten f\u00fcr die Suche optimieren k\u00f6nnen.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Googlebot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; Googlebot\/2.1; +http:\/\/www.google.com\/bot.html)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>2. Bingbot<\/h3>\n<p>Bingbot wurde 2010 von Microsoft entwickelt, um URLs zu scannen und zu indizieren, damit Bing den Nutzern der Plattform relevante und aktuelle Suchmaschinenergebnisse bietet.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Bing-homepage.png\" alt=\"Bingbot versorgt Bing mit relevanten Suchmaschinenergebnissen\" width=\"1600\" height=\"850\"><figcaption class=\"wp-caption-text\">Bingbot versorgt Bing mit relevanten Suchmaschinenergebnissen<\/figcaption><\/figure>\n<p>\u00c4hnlich wie beim Googlebot k\u00f6nnen Entwickler\/innen oder Vermarkter\/innen in der robots.txt auf ihrer Website festlegen, ob sie dem Agentenkennzeichen &#8222;<strong>bingbot<\/strong>&#8220; das Scannen ihrer Website erlauben oder verweigern.<\/p>\n<p>Au\u00dferdem haben sie die M\u00f6glichkeit, zwischen <a href=\"https:\/\/kinsta.com\/de\/blog\/google-mobile-first-index\/\">Mobile-First-Indexing-Crawlern<\/a> und Desktop-Crawlern zu unterscheiden, da Bingbot k\u00fcrzlich zu einem <a href=\"https:\/\/www.searchenginejournal.com\/new-bingbot-user-agent\/448023\/#close\" target=\"_blank\" rel=\"noopener noreferrer\">neuen Agententyp<\/a> gewechselt hat. Zusammen mit den <a href=\"https:\/\/kinsta.com\/de\/blog\/bing-webmaster-tools\/\">Bing Webmaster Tools<\/a> bietet dies Webmaster\/innen eine gr\u00f6\u00dfere Flexibilit\u00e4t, um zu zeigen, wie ihre Website entdeckt und in den Suchergebnissen angezeigt wird.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Bingbot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td><em>Desktop<\/em>\u00a0\u2013 Mozilla\/5.0 AppleWebKit\/537.36 (KHTML, like Gecko; compatible; bingbot\/2.0; +https:\/\/www.bing.com\/bingbot.htm) Chrome\/W.X.Y.Z Safari\/537.36<\/p>\n<p><em>Mobile<\/em>\u00a0\u2013 Mozilla\/5.0 (Linux; Android 6.0.1; Nexus 5X Build\/MMB29P) AppleWebKit\/537.36 (KHTML, like Gecko) Chrome\/W.X.Y.Z Mobile Safari\/537.36 (compatible; bingbot\/2.0; +https:\/\/www.bing.com\/bingbot.htm)<\/p>\n<p>&#8222;W.X.Y.Z&#8220; wird durch die neueste Microsoft Edge-Version ersetzt, die Bing verwendet, z.B. &#8222;100.0.4896.127\u2033.<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>3. Yandex Bot<\/h3>\n<p>Yandex Bot ist ein Crawler speziell f\u00fcr die russische Suchmaschine Yandex. Dies ist eine der gr\u00f6\u00dften und beliebtesten Suchmaschinen in Russland.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Yandex-homepage.png\" alt=\"Yandex Bot indiziert die russische Suchmaschine, Yandex\" width=\"1600\" height=\"752\"><figcaption class=\"wp-caption-text\">Yandex Bot indiziert die russische Suchmaschine, Yandex<\/figcaption><\/figure>\n<p>Webmaster k\u00f6nnen ihre Seiten \u00fcber die <strong>robots.txt<\/strong>-Datei f\u00fcr den Yandex Bot zug\u00e4nglich machen.<\/p>\n<p>Au\u00dferdem k\u00f6nnen sie bestimmten Seiten ein <strong>Yandex.Metrica<\/strong>-Tag hinzuf\u00fcgen, Seiten im Yandex Webmaster neu indexieren oder ein IndexNow-Protokoll erstellen, einen einzigartigen Bericht, der auf neue, ge\u00e4nderte oder deaktivierte Seiten hinweist.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>YandexBot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; YandexBot\/3.0; +http:\/\/yandex.com\/bots)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>4. Apple Bot<\/h3>\n<p>Apple hat den <strong>Apple Bot<\/strong> beauftragt, Webseiten f\u00fcr Apples Siri und Spotlight Suggestions zu crawlen und zu indexieren.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Apple-homepage.png\" alt=\"Apple Bot ist der Web-Crawler f\u00fcr Apples Siri und Spotlight\" width=\"1600\" height=\"813\"><figcaption class=\"wp-caption-text\">Apple Bot ist der Web-Crawler f\u00fcr Apples Siri und Spotlight<\/figcaption><\/figure>\n<p>Apple Bot ber\u00fccksichtigt mehrere Faktoren bei der Entscheidung, welche Inhalte in Siri und Spotlight Suggestions angezeigt werden sollen. Zu diesen Faktoren geh\u00f6ren das Engagement der Nutzer\/innen, die Relevanz von Suchbegriffen, die Anzahl\/Qualit\u00e4t von Links, standortbezogene Signale und sogar das <a href=\"https:\/\/kinsta.com\/de\/blog\/webdesign-prinzipien\/\">Design einer Webseite<\/a>.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Applebot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (Device; OS_version) AppleWebKit\/WebKit_version (KHTML, like Gecko)<br \/>\nVersion\/Safari_version Safari\/WebKit_version (Applebot\/Applebot_version)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>5. DuckDuck Bot<\/h3>\n<p>Der DuckDuckBot ist der Web-Crawler f\u00fcr <a href=\"https:\/\/kinsta.com\/de\/blog\/duckduckgo-privatsphaere\/\">DuckDuckGo<\/a>, der &#8222;nahtlosen Schutz der Privatsph\u00e4re in deinem Webbrowser&#8220; bietet.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/DuckDuckGo-homepage.png\" alt=\"DuckDuck Bot crawlt f\u00fcr die datenschutzfreundliche Website\" width=\"1600\" height=\"882\"><figcaption class=\"wp-caption-text\">DuckDuck Bot crawlt f\u00fcr die datenschutzfreundliche Website<\/figcaption><\/figure>\n<p>Webmaster k\u00f6nnen die DuckDuckBot API nutzen, um zu sehen, ob der <strong>DuckDuck Bot<\/strong> ihre Website gecrawlt hat. W\u00e4hrend er crawlt, aktualisiert er die DuckDuckBot API-Datenbank mit den neuesten <a href=\"https:\/\/kinsta.com\/de\/tools\/was-ist-meine-ip\/\">IP-Adressen<\/a> und User-Agents.<\/p>\n<p>Dies hilft Webmastern, Betr\u00fcger oder b\u00f6sartige Bots zu identifizieren, die versuchen, sich mit dem DuckDuck Bot zu verbinden.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>DuckDuckBot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>DuckDuckBot\/1.0; (+http:\/\/duckduckgo.com\/duckduckbot.html)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>6. Baidu Spider<\/h3>\n<p>Baidu ist die f\u00fchrende chinesische Suchmaschine, und der Baidu Spider ist der einzige Crawler der Seite.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Baidu-homepage.png\" alt=\"Baidu Spider ist der Crawler f\u00fcr Baidu, eine chinesische Suchmaschine\" width=\"1600\" height=\"850\"><figcaption class=\"wp-caption-text\">Baidu Spider ist der Crawler f\u00fcr Baidu, eine chinesische Suchmaschine<\/figcaption><\/figure>\n<p>Google ist in <a href=\"https:\/\/kinsta.com\/blog\/great-firewall-of-china-google-cloud-platform\/\">China<\/a> verboten. Deshalb ist es wichtig, dass der Baidu Spider deine Website crawlen kann, wenn du den chinesischen Markt erreichen willst.<\/p>\n<p>Um herauszufinden, ob der Baidu Spider deine Seite crawlt, suche nach den folgenden User Agents: <strong>baiduspider,<\/strong> <strong>baiduspider-image<\/strong>, <strong>baiduspider-video<\/strong> und mehr.<\/p>\n<p>Wenn du nicht in China gesch\u00e4ftlich t\u00e4tig bist, kann es sinnvoll sein, den Baidu Spider in deinem robots.txt-Skript zu blockieren. Damit verhinderst du, dass der Baidu Spider deine Website crawlt und deine Seiten auf den Baidu-Suchergebnisseiten (SERPs) auftauchen.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Baiduspider<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; Baiduspider\/2.0; +http:\/\/www.baidu.com\/search\/spider.html)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>7. Sogou Spider<\/h3>\n<p>Sogou ist eine chinesische Suchmaschine, die angeblich die erste Suchmaschine ist, die <a href=\"https:\/\/www.vntweb.co.uk\/sogou-web-spider-web-robot\/\" target=\"_blank\" rel=\"noopener noreferrer\">10 Milliarden<\/a> chinesische Seiten indexiert hat.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Sogou-homepage.png\" alt=\"Der Sogou Spider ist ein Crawler f\u00fcr Sogou\" width=\"1600\" height=\"847\"><figcaption class=\"wp-caption-text\">Der Sogou Spider ist ein Crawler f\u00fcr Sogou<\/figcaption><\/figure>\n<p>Wenn du auf dem chinesischen Markt t\u00e4tig bist, ist dies ein weiterer beliebter Suchmaschinen-Crawler, den du kennen solltest. Der Sogou Spider folgt den Ausschlusstext- und Crawl-Verz\u00f6gerungsparametern des Roboters.<\/p>\n<p>Wie beim Baidu Spider solltest du auch diesen Spider deaktivieren, wenn du keine Gesch\u00e4fte auf dem chinesischen Markt machen willst, um langsame Ladezeiten zu vermeiden.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Sogou Pic Spider\/3.0( http:\/\/www.sogou.com\/docs\/help\/webmasters.htm#07)<br \/>\nSogou head spider\/3.0( http:\/\/www.sogou.com\/docs\/help\/webmasters.htm#07)<br \/>\nSogou web spider\/4.0(+http:\/\/www.sogou.com\/docs\/help\/webmasters.htm#07)<br \/>\nSogou Orion spider\/3.0( http:\/\/www.sogou.com\/docs\/help\/webmasters.htm#07)<br \/>\nSogou-Test-Spider\/4.0 (compatible; MSIE 5.5; Windows 98)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>8. Facebook External Hit<\/h3>\n<p>Facebook External Hit, auch bekannt als Facebook Crawler, crawlt den HTML-Code einer auf Facebook geteilten App oder Website.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Facebook-homepage.png\" alt=\"Facebook External Hit indiziert Websites f\u00fcr das Teilen von Links\" width=\"1600\" height=\"852\"><figcaption class=\"wp-caption-text\">Facebook External Hit indiziert Websites f\u00fcr das Teilen von Links<\/figcaption><\/figure>\n<p>Auf diese Weise kann die soziale Plattform eine teilbare Vorschau f\u00fcr jeden auf der Plattform geposteten Link erstellen. Der Titel, die Beschreibung und das Vorschaubild werden dank des Crawlers angezeigt.<\/p>\n<p>Wenn der Crawl nicht innerhalb von Sekunden ausgef\u00fchrt wird, zeigt Facebook den Inhalt nicht in dem benutzerdefinierten Snippet an, das vor dem Teilen erstellt wird.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>facebot<br \/>\nfacebookexternalhit\/1.0 (+http:\/\/www.facebook.com\/externalhit_uatext.php)<br \/>\nfacebookexternalhit\/1.1 (+http:\/\/www.facebook.com\/externalhit_uatext.php)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>9. Exabot<\/h3>\n<p>Exalead ist ein Softwareunternehmen, das im Jahr 2000 gegr\u00fcndet wurde und seinen Hauptsitz in Paris, Frankreich hat. Das Unternehmen bietet Suchplattformen f\u00fcr Privat- und Unternehmenskunden an.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Exalead-Homepage.png\" alt=\"Exabot ist der Crawler f\u00fcr Exalead, ein Unternehmen f\u00fcr Suchplattformen\" width=\"1600\" height=\"956\"><figcaption class=\"wp-caption-text\">Exabot ist der Crawler f\u00fcr Exalead, ein Unternehmen f\u00fcr Suchplattformen<\/figcaption><\/figure>\n<p>Exabot ist der Crawler f\u00fcr die Kernsuchmaschine, die auf dem Produkt CloudView basiert.<\/p>\n<p>Wie die meisten Suchmaschinen ber\u00fccksichtigt Exalead beim Ranking sowohl Backlinks als auch den Inhalt von Webseiten. Exabot ist der User Agent des Exalead Roboters. Der Roboter erstellt einen &#8222;Hauptindex&#8220;, der die Ergebnisse zusammenstellt, die die Nutzer der Suchmaschine sehen.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; Konqueror\/3.5; Linux) KHTML\/3.5.5 (like Gecko) (Exabot-Thumbnails)<br \/>\nMozilla\/5.0 (compatible; Exabot\/3.0; +http:\/\/www.exabot.com\/go\/robot)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>10. Swiftbot<\/h3>\n<p>Swiftype ist eine ma\u00dfgeschneiderte Suchmaschine f\u00fcr deine Website. Sie kombiniert &#8222;die besten Suchtechnologien, Algorithmen, Content Ingestion Framework, Clients und <a href=\"https:\/\/kinsta.com\/de\/blog\/matomo-vs-google-analytics\/\">Analysetools<\/a>&#8220;<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Swiftype-homepage.png\" alt=\"Swiftype ist eine Software, mit der du die Suche auf deiner Website\" width=\"1600\" height=\"820\"><figcaption class=\"wp-caption-text\">Swiftype ist eine Software, mit der du die Suche auf deiner Website<\/figcaption><\/figure>\n<p>Wenn du eine komplexe Website mit vielen Seiten hast, bietet Swiftype eine n\u00fctzliche Schnittstelle, um alle deine Seiten f\u00fcr dich zu katalogisieren und zu indizieren.<\/p>\n<p><strong>Swiftbot<\/strong> ist der Web-Crawler von Swiftype. Im Gegensatz zu anderen Bots crawlt Swiftbot jedoch nur die Seiten, die seine Kunden anfordern.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Swiftbot<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; Swiftbot\/1.0; UID\/54e1c2ebd3b687d3c8000018; +http:\/\/swiftype.com\/swiftbot)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>11. Slurp Bot<\/h3>\n<p>Slurp Bot ist der Yahoo-Suchroboter, der Seiten f\u00fcr Yahoo crawlt und indiziert.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Yahoo-homepage.png\" alt=\"Swiftype ist eine Software, mit der du die Suche auf deiner Website\" width=\"1600\" height=\"854\"><figcaption class=\"wp-caption-text\">Swiftype ist eine Software, mit der du die Suche auf deiner Website<\/figcaption><\/figure>\n<p>Dieser Crawl ist sowohl f\u00fcr Yahoo.com als auch f\u00fcr seine Partnerseiten wie Yahoo News, Yahoo Finance und Yahoo Sports unerl\u00e4sslich. Ohne ihn w\u00fcrden relevante Seiten nicht angezeigt werden.<\/p>\n<p>Die indexierten Inhalte tragen dazu bei, den Nutzern ein personalisiertes Web-Erlebnis mit relevanteren Ergebnissen zu bieten.<\/p>\n<table style=\"height: 180px\" width=\"715\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>Slurp<\/td>\n<\/tr>\n<tr>\n<td><strong>Full User Agent String<\/strong><\/td>\n<td>Mozilla\/5.0 (compatible; Yahoo! Slurp; http:\/\/help.yahoo.com\/help\/us\/ysearch\/slurp)<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h3>12. CCBot<\/h3>\n<figure id=\"attachment_145670\" aria-describedby=\"caption-attachment-145670\" style=\"width: 1200px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" class=\"wp-image-145670 size-full\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/ccbot-common-crawl.png\" alt=\"CCBot von Common Crawl\" width=\"1200\" height=\"645\"><figcaption id=\"caption-attachment-145670\" class=\"wp-caption-text\">CCBot von Common Crawl<\/figcaption><\/figure>\n<p>CCBot ist ein auf <a href=\"https:\/\/nutch.apache.org\/\">Nutch basierender<\/a> Web-Crawler, der von Common Crawl entwickelt wurde. Common Crawl ist eine <a href=\"https:\/\/kinsta.com\/de\/wordpress-hosting\/gemeinnuetzige-organisationen\/\">gemeinn\u00fctzige Organisation<\/a>, die sich zum Ziel gesetzt hat, Unternehmen, Privatpersonen und allen, die an Online-Recherchen interessiert sind, kostenlos eine Kopie des Internets zur Verf\u00fcgung zu stellen. Der Bot nutzt MapReduce, ein Programmierframework, das es ihm erm\u00f6glicht, gro\u00dfe Datenmengen zu wertvollen Gesamtergebnissen zusammenzufassen.<\/p>\n<p>Dank CCBot k\u00f6nnen Menschen die Daten von Common Crawl nutzen, um Sprach\u00fcbersetzungssoftware zu verbessern und Trends vorherzusagen. Tats\u00e4chlich wurde <a href=\"https:\/\/openai.com\/blog\/gpt-3-apps\/\">GPT-3<\/a> gr\u00f6\u00dftenteils mit den Daten aus ihrem Datensatz trainiert.<\/p>\n<table style=\"height: 123px\" width=\"713\">\n<tbody>\n<tr>\n<td><strong>User Agent<\/strong><\/td>\n<td>CCBot\/2.0 (https:\/\/commoncrawl.org\/faq\/)<br \/>\nCCBot\/2.0<br \/>\n<span style=\"font-family: inherit;font-size: inherit\">CCBot\/2.0 (http:\/\/commoncrawl.org\/faq\/)<\/span><\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<h2>Die 8 kommerziellen Crawler, die SEO-Profis kennen m\u00fcssen<\/h2>\n<p>Nachdem du nun 12 der beliebtesten Bots auf deiner Crawler-Liste hast, wollen wir uns nun einige der g\u00e4ngigen kommerziellen Crawler und <a href=\"https:\/\/kinsta.com\/de\/blog\/beste-seo-plugins-fur-wordpress\/\">SEO-Tools<\/a> f\u00fcr Profis ansehen.<\/p>\n<div><\/div><kinsta-auto-toc list-style=\"decimal\" selector=\"h3\" count-number=\"8\" sub-toc=\"true\"><\/kinsta-auto-toc>\n<h3>1. Ahrefs Bot<\/h3>\n<p>Der Ahrefs Bot ist ein Webcrawler, der die 12 Billionen Linkdatenbank der beliebten SEO-Software Ahrefs zusammenstellt und indexiert.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Ahrefs-homepage.png\" alt=\"Ahrefs Bot indiziert Websites f\u00fcr die SEO-Plattform Ahrefs\" width=\"1600\" height=\"848\"><figcaption class=\"wp-caption-text\">Ahrefs Bot indiziert Websites f\u00fcr die SEO-Plattform Ahrefs<\/figcaption><\/figure>\n<p>Der <strong>Ahrefs Bot <\/strong>besucht jeden Tag 6 Milliarden Websites und gilt als &#8222;zweitaktivster Crawler&#8220; nach dem Googlebot.<\/p>\n<p>\u00c4hnlich wie andere Bots befolgt der Ahrefs Bot die <strong>robots.txt<\/strong>-Funktionen sowie die Erlaubnis- und Verbotsregeln im Code der jeweiligen Website.<\/p>\n<h3>2. Semrush Bot<\/h3>\n<p>Der <strong>Semrush Bot<\/strong> erm\u00f6glicht es Semrush, einer f\u00fchrenden SEO-Software, Websitedaten zu sammeln und zu indexieren, damit seine Kunden sie auf ihrer Plattform nutzen k\u00f6nnen.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Semrush-homepage.png\" alt=\"Semrush Bot ist der Crawler, mit dem Semrush Websites indexiert\" width=\"1600\" height=\"849\"><figcaption class=\"wp-caption-text\">Semrush Bot ist der Crawler, mit dem Semrush Websites indexiert<\/figcaption><\/figure>\n<p>Die Daten werden in der \u00f6ffentlichen Backlink-Suchmaschine von Semrush, dem Website-Audit-Tool, dem Backlink-Audit-Tool, dem Linkaufbau-Tool und dem Schreibassistenten verwendet.<\/p>\n<p>Er crawlt deine Website, indem er eine Liste von Webseiten-URLs zusammenstellt, sie besucht und bestimmte Hyperlinks f\u00fcr zuk\u00fcnftige Besuche speichert.<\/p>\n<h3>3. Moz&#8217;s Kampagnen-Crawler Rogerbot<\/h3>\n<p>Rogerbot ist der Crawler f\u00fcr die f\u00fchrende SEO-Website Moz. Dieser Crawler sammelt speziell Inhalte f\u00fcr Moz Pro Campaign Site Audits.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Moz-homepage.png\" alt=\"Moz, eine beliebte SEO-Software, setzt Rogerbot als Crawler ein\" width=\"1600\" height=\"850\"><figcaption class=\"wp-caption-text\">Moz, eine beliebte SEO-Software, setzt Rogerbot als Crawler ein<\/figcaption><\/figure>\n<p>Rogerbot befolgt alle Regeln, die in den<strong> robots.txt-Dateien<\/strong> festgelegt sind. Du kannst also selbst entscheiden, ob du <strong>Rogerbot<\/strong> das Scannen deiner Website verbieten\/erlauben willst.<\/p>\n<p>Webmaster k\u00f6nnen nicht nach einer <a href=\"https:\/\/kinsta.com\/de\/blog\/static-vs-dynamic-ip\/\">statischen IP-Adresse<\/a> suchen, um zu sehen, welche Seiten Rogerbot gecrawlt hat, da es einen vielseitigen Ansatz verfolgt.<\/p>\n<h3>4. Screaming Frog<\/h3>\n<p>Screaming Frog ist ein Crawler, den <a href=\"https:\/\/kinsta.com\/de\/ebooks\/wordpress\/wie-man-seo-verbessert\/\">SEO-Profis<\/a> nutzen, um ihre eigene Website zu \u00fcberpr\u00fcfen und Verbesserungsm\u00f6glichkeiten zu identifizieren, die sich auf ihr Suchmaschinenranking auswirken.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Screaming-Frog-homepage.png\" alt=\"Screaming Frog ist ein Crawler, der hilft, SEO zu verbessern\" width=\"1600\" height=\"849\"><figcaption class=\"wp-caption-text\">Screaming Frog ist ein Crawler, der hilft, SEO zu verbessern<\/figcaption><\/figure>\n<p>Sobald ein Crawl gestartet wurde, kannst du die Echtzeitdaten \u00fcberpr\u00fcfen und <a href=\"https:\/\/kinsta.com\/de\/blog\/beschadigte-links\/\">fehlerhafte Links<\/a> oder notwendige Verbesserungen an Seitentiteln, Metadaten, Robots, doppeltem Inhalt und vielem mehr identifizieren.<\/p>\n<p>Um die Crawl-Parameter zu konfigurieren, musst du eine Screaming Frog-Lizenz erwerben.<\/p>\n<h3>5. Lumar (ehemals Deep Crawl)<\/h3>\n<p>Lumar ist eine &#8222;zentrale Kommandozentrale zur Aufrechterhaltung des technischen Zustands deiner Website&#8220; Mit dieser Plattform kannst du einen Crawl deiner Website initiieren, um deine <a href=\"https:\/\/kinsta.com\/de\/blog\/best-practices-fur-webdesign\/\">Website-Architektur<\/a> zu planen.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Lumar-homepage.png\" alt=\"Deep Crawl hat sich in Lumar umbenannt, ein Crawler f\u00fcr Website-Intelligenz\" width=\"1600\" height=\"847\"><figcaption class=\"wp-caption-text\">Deep Crawl hat sich in Lumar umbenannt, ein Crawler f\u00fcr Website-Intelligenz<\/figcaption><\/figure>\n<p><strong>Lumar<\/strong> r\u00fchmt sich, der &#8222;schnellste Website-Crawler auf dem Markt&#8220; zu sein, und r\u00fchmt sich, bis zu 450 URLs pro Sekunde zu crawlen.<\/p>\n<h3>6. Majestic<\/h3>\n<p><strong>Majestic<\/strong> konzentriert sich in erster Linie auf das Aufsp\u00fcren und Identifizieren von Backlinks auf URLs.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Majestic-homepage.png\" alt=\"Der Majestic Crawler erm\u00f6glicht es SEOs, Backlink-Daten zu \u00fcberpr\u00fcfen\" width=\"1600\" height=\"848\"><figcaption class=\"wp-caption-text\">Der Majestic Crawler erm\u00f6glicht es SEOs, Backlink-Daten zu \u00fcberpr\u00fcfen<\/figcaption><\/figure>\n<p>Das Unternehmen ist stolz darauf, &#8222;eine der umfangreichsten Quellen f\u00fcr Backlinkdaten im Internet&#8220; zu haben, und hebt seinen historischen Index hervor, der im Jahr 2021 von 5 auf 15 Jahre an Links angewachsen ist.<\/p>\n<p>Der Crawler der Website macht all diese Daten f\u00fcr die Kunden des Unternehmens zug\u00e4nglich.<\/p>\n<h3>7. cognitiveSEO<\/h3>\n<p>cognitiveSEO ist eine weitere wichtige SEO-Software, die viele Profis nutzen.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Cognitive-SEO-homepage.png\" alt=\"congnitiveSEO bietet ein leistungsstarkes Website-Audit-Tool\" width=\"1600\" height=\"849\"><figcaption class=\"wp-caption-text\">congnitiveSEO bietet ein leistungsstarkes Website-Audit-Tool<\/figcaption><\/figure>\n<p>Mit dem <strong>Crawler von cognitiveSEO<\/strong> k\u00f6nnen Nutzer\/innen umfassende Site-Audits durchf\u00fchren, die ihre Site-Architektur und die \u00fcbergreifende <a href=\"https:\/\/kinsta.com\/de\/thema\/seo-strategie\/\">SEO-Strategie<\/a> beeinflussen.<\/p>\n<p>Der Bot crawlt alle Seiten und liefert &#8222;einen vollst\u00e4ndig angepassten Datensatz&#8220;, der f\u00fcr den Endnutzer einzigartig ist. Dieser Datensatz enth\u00e4lt auch Empfehlungen f\u00fcr den Nutzer, wie er seine Website f\u00fcr andere Crawler verbessern kann &#8211; sowohl um das Ranking zu beeinflussen als auch um <a href=\"https:\/\/kinsta.com\/de\/blog\/suchmaschinen-indexieren\/\">Crawler zu blockieren<\/a>, die unn\u00f6tig sind.<\/p>\n<h3>8. Oncrawl<\/h3>\n<p><strong>Oncrawl<\/strong> ist ein &#8222;branchenf\u00fchrender SEO-Crawler und <a href=\"https:\/\/kinsta.com\/de\/blog\/analysierten-log-eintrage\/\">Log-Analysator<\/a>&#8220; f\u00fcr Kunden auf Unternehmensebene.<\/p>\n<figure style=\"width: 1600px\" class=\"wp-caption alignnone\"><img loading=\"lazy\" decoding=\"async\" src=\"https:\/\/kinsta.com\/wp-content\/uploads\/2022\/12\/Oncrawl-Homepage.png\" alt=\"Oncrawl ist ein weiterer SEO-Crawler, der einzigartige Daten liefert\" width=\"1600\" height=\"850\"><figcaption class=\"wp-caption-text\">Oncrawl ist ein weiterer SEO-Crawler, der einzigartige Daten liefert<\/figcaption><\/figure>\n<p>Nutzer k\u00f6nnen &#8222;Crawl-Profile&#8220; einrichten, um bestimmte Parameter f\u00fcr den Crawl festzulegen. Du kannst diese Einstellungen (einschlie\u00dflich der Start-URL, der Crawl-Limits, der maximalen Crawl-Geschwindigkeit und mehr) speichern, um den Crawl mit denselben Parametern erneut durchzuf\u00fchren.<\/p>\n<h2>Muss ich meine Website vor b\u00f6sartigen Webcrawlern sch\u00fctzen?<\/h2>\n<p>Nicht alle Crawler sind gut. Einige k\u00f6nnen sich negativ auf deine <a href=\"https:\/\/kinsta.com\/de\/lernen\/website-geschwindigkeit\/\">Seitengeschwindigkeit<\/a> auswirken, w\u00e4hrend andere versuchen, deine Website zu hacken oder b\u00f6sartige Absichten haben.<\/p>\n<p>Deshalb ist es wichtig, dass du wei\u00dft, wie du Crawler davon abh\u00e4ltst, auf deine Website zuzugreifen.<\/p>\n<p>Wenn du eine Crawler-Liste erstellst, wei\u00dft du, welche Crawler gut sind und worauf du achten musst. Dann kannst du die fragw\u00fcrdigen Crawler aussortieren und sie zu <a href=\"https:\/\/kinsta.com\/de\/blog\/indexed-though-blocked-by-robots-txt\/\">deiner Blockierliste<\/a> hinzuf\u00fcgen.<\/p>\n<h3>Wie du b\u00f6sartige Webcrawler blockierst<\/h3>\n<p>Mit deiner Crawler-Liste kannst du feststellen, welche Bots du zulassen und welche du blockieren musst.<\/p>\n<p>Der erste Schritt besteht darin, deine Crawler-Liste durchzugehen und den User-Agent und den Full-Agent-String zu bestimmen, der mit jedem Crawler verbunden ist, sowie seine spezifische IP-Adresse. Dies sind die wichtigsten Identifikationsfaktoren, die mit jedem Bot verbunden sind.<\/p>\n<p>Mit dem User Agent und der IP-Adresse kannst du sie in deinen Website-Eintr\u00e4gen durch einen <a href=\"https:\/\/kinsta.com\/de\/blog\/reduzieren-dns-lookups\/\">DNS-Lookup<\/a> oder einen IP-Abgleich abgleichen. Wenn sie nicht genau \u00fcbereinstimmen, k\u00f6nnte es sein, dass ein b\u00f6sartiger Bot versucht, sich als der echte auszugeben.<\/p>\n<p>Dann kannst du den Betr\u00fcger blockieren, indem du die Berechtigungen in deiner <strong>robots.txt<\/strong> anpasst.<\/p>\n\n<h2>Zusammenfassung<\/h2>\n<p>Webcrawler sind n\u00fctzlich f\u00fcr Suchmaschinen und wichtig f\u00fcr Vermarkter zu verstehen.<\/p>\n<p>F\u00fcr den Erfolg deines Unternehmens ist es wichtig, dass deine Website von den richtigen Crawlern gecrawlt wird. Wenn du eine Crawler-Liste f\u00fchrst, wei\u00dft du, auf welche Crawler du achten musst, wenn sie in deinem Website-Log erscheinen.<\/p>\n<p>Wenn du die Empfehlungen kommerzieller Crawler befolgst und den <a href=\"https:\/\/kinsta.com\/de\/blog\/wordpress-cdn\/\">Inhalt und die Geschwindigkeit deiner Website verbesserst<\/a>, erleichterst du den Crawlern den Zugriff auf deine Website und indexierst die richtigen Informationen f\u00fcr Suchmaschinen und die Verbraucher, die danach suchen.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>F\u00fcr die meisten Vermarkter sind st\u00e4ndige Aktualisierungen erforderlich, um ihre Website aktuell zu halten und ihre SEO-Rankings zu verbessern. Manche Websites haben jedoch Hunderte oder sogar &#8230;<\/p>\n","protected":false},"author":199,"featured_media":57088,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"_kinsta_gated_content":false,"_kinsta_gated_content_redirect":"","footnotes":""},"tags":[34,133,335,893,478],"topic":[979,980],"class_list":["post-57087","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","tag-seo","tag-seotips","tag-site-speed","tag-site-structure","tag-sitemap","topic-seo-strategie","topic-seo-tools"],"yoast_head":"<!-- This site is optimized with the Yoast SEO Premium plugin v24.6 (Yoast SEO v24.6) - https:\/\/yoast.com\/wordpress\/plugins\/seo\/ -->\n<title>Crawler-Liste: Die 12 g\u00e4ngigsten Web Crawler im Jahr 2026 - Kinsta\u00ae<\/title>\n<meta name=\"description\" content=\"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.\" \/>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\" \/>\n<meta property=\"og:locale\" content=\"de_DE\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst\" \/>\n<meta property=\"og:description\" content=\"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.\" \/>\n<meta property=\"og:url\" content=\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\" \/>\n<meta property=\"og:site_name\" content=\"Kinsta\u00ae\" \/>\n<meta property=\"article:publisher\" content=\"https:\/\/www.facebook.com\/Kinsta-Deutschland-207459890108303\/\" \/>\n<meta property=\"article:published_time\" content=\"2022-12-15T11:13:14+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2025-08-29T16:01:33+00:00\" \/>\n<meta property=\"og:image\" content=\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\" \/>\n\t<meta property=\"og:image:width\" content=\"1460\" \/>\n\t<meta property=\"og:image:height\" content=\"730\" \/>\n\t<meta property=\"og:image:type\" content=\"image\/jpeg\" \/>\n<meta name=\"author\" content=\"Jeremy Holcombe\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:description\" content=\"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.\" \/>\n<meta name=\"twitter:image\" content=\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\" \/>\n<meta name=\"twitter:creator\" content=\"@Kinsta_DE\" \/>\n<meta name=\"twitter:site\" content=\"@Kinsta_DE\" \/>\n<meta name=\"twitter:label1\" content=\"Verfasst von\" \/>\n\t<meta name=\"twitter:data1\" content=\"Jeremy Holcombe\" \/>\n\t<meta name=\"twitter:label2\" content=\"Gesch\u00e4tzte Lesezeit\" \/>\n\t<meta name=\"twitter:data2\" content=\"19\u00a0Minuten\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\/\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#article\",\"isPartOf\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\"},\"author\":{\"name\":\"Jeremy Holcombe\",\"@id\":\"https:\/\/kinsta.com\/de\/#\/schema\/person\/4eee42881d7b5a73ebb4f58dd5223b21\"},\"headline\":\"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst\",\"datePublished\":\"2022-12-15T11:13:14+00:00\",\"dateModified\":\"2025-08-29T16:01:33+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\"},\"wordCount\":3454,\"commentCount\":0,\"publisher\":{\"@id\":\"https:\/\/kinsta.com\/de\/#organization\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\",\"keywords\":[\"seo\",\"seotips\",\"site speed\",\"site structure\",\"sitemap\"],\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"CommentAction\",\"name\":\"Comment\",\"target\":[\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#respond\"]}]},{\"@type\":\"WebPage\",\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\",\"url\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\",\"name\":\"Crawler-Liste: Die 12 g\u00e4ngigsten Web Crawler im Jahr 2026 - Kinsta\u00ae\",\"isPartOf\":{\"@id\":\"https:\/\/kinsta.com\/de\/#website\"},\"primaryImageOfPage\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage\"},\"thumbnailUrl\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\",\"datePublished\":\"2022-12-15T11:13:14+00:00\",\"dateModified\":\"2025-08-29T16:01:33+00:00\",\"description\":\"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.\",\"breadcrumb\":{\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#breadcrumb\"},\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/\"]}]},{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage\",\"url\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\",\"contentUrl\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg\",\"width\":1460,\"height\":730},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Home\",\"item\":\"https:\/\/kinsta.com\/de\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"SEO Strategie\",\"item\":\"https:\/\/kinsta.com\/de\/thema\/seo-strategie\/\"},{\"@type\":\"ListItem\",\"position\":3,\"name\":\"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\/\/kinsta.com\/de\/#website\",\"url\":\"https:\/\/kinsta.com\/de\/\",\"name\":\"Kinsta\u00ae\",\"description\":\"Schnelle, sichere und hochwertige Hosting-L\u00f6sungen\",\"publisher\":{\"@id\":\"https:\/\/kinsta.com\/de\/#organization\"},\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\/\/kinsta.com\/de\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"de\"},{\"@type\":\"Organization\",\"@id\":\"https:\/\/kinsta.com\/de\/#organization\",\"name\":\"Kinsta\",\"url\":\"https:\/\/kinsta.com\/de\/\",\"logo\":{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\/\/kinsta.com\/de\/#\/schema\/logo\/image\/\",\"url\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2023\/12\/kinsta-logo.jpeg\",\"contentUrl\":\"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2023\/12\/kinsta-logo.jpeg\",\"width\":500,\"height\":500,\"caption\":\"Kinsta\"},\"image\":{\"@id\":\"https:\/\/kinsta.com\/de\/#\/schema\/logo\/image\/\"},\"sameAs\":[\"https:\/\/www.facebook.com\/Kinsta-Deutschland-207459890108303\/\",\"https:\/\/x.com\/Kinsta_DE\",\"https:\/\/www.instagram.com\/kinstahosting\/\",\"https:\/\/www.linkedin.com\/company\/kinsta\/\",\"https:\/\/www.pinterest.com\/kinstahosting\/\",\"https:\/\/www.youtube.com\/c\/Kinsta\"]},{\"@type\":\"Person\",\"@id\":\"https:\/\/kinsta.com\/de\/#\/schema\/person\/4eee42881d7b5a73ebb4f58dd5223b21\",\"name\":\"Jeremy Holcombe\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"de\",\"@id\":\"https:\/\/kinsta.com\/de\/#\/schema\/person\/image\/\",\"url\":\"https:\/\/secure.gravatar.com\/avatar\/0e17001f3bb37dbbe54fceef9bb547fa?s=96&d=mm&r=g\",\"contentUrl\":\"https:\/\/secure.gravatar.com\/avatar\/0e17001f3bb37dbbe54fceef9bb547fa?s=96&d=mm&r=g\",\"caption\":\"Jeremy Holcombe\"},\"description\":\"Senior Editor at Kinsta, WordPress Web Developer, and Content Writer. Outside of all things WordPress, I enjoy the beach, golf, and movies. I also have tall people problems.\",\"sameAs\":[\"https:\/\/www.linkedin.com\/in\/jeremyholcombe\/\"],\"url\":\"https:\/\/kinsta.com\/de\/blog\/author\/jeremyholcombe\/\"}]}<\/script>\n<!-- \/ Yoast SEO Premium plugin. -->","yoast_head_json":{"title":"Crawler-Liste: Die 12 g\u00e4ngigsten Web Crawler im Jahr 2026 - Kinsta\u00ae","description":"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/","og_locale":"de_DE","og_type":"article","og_title":"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst","og_description":"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.","og_url":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/","og_site_name":"Kinsta\u00ae","article_publisher":"https:\/\/www.facebook.com\/Kinsta-Deutschland-207459890108303\/","article_published_time":"2022-12-15T11:13:14+00:00","article_modified_time":"2025-08-29T16:01:33+00:00","og_image":[{"width":1460,"height":730,"url":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","type":"image\/jpeg"}],"author":"Jeremy Holcombe","twitter_card":"summary_large_image","twitter_description":"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.","twitter_image":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","twitter_creator":"@Kinsta_DE","twitter_site":"@Kinsta_DE","twitter_misc":{"Verfasst von":"Jeremy Holcombe","Gesch\u00e4tzte Lesezeit":"19\u00a0Minuten"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#article","isPartOf":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/"},"author":{"name":"Jeremy Holcombe","@id":"https:\/\/kinsta.com\/de\/#\/schema\/person\/4eee42881d7b5a73ebb4f58dd5223b21"},"headline":"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst","datePublished":"2022-12-15T11:13:14+00:00","dateModified":"2025-08-29T16:01:33+00:00","mainEntityOfPage":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/"},"wordCount":3454,"commentCount":0,"publisher":{"@id":"https:\/\/kinsta.com\/de\/#organization"},"image":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage"},"thumbnailUrl":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","keywords":["seo","seotips","site speed","site structure","sitemap"],"inLanguage":"de","potentialAction":[{"@type":"CommentAction","name":"Comment","target":["https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#respond"]}]},{"@type":"WebPage","@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/","url":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/","name":"Crawler-Liste: Die 12 g\u00e4ngigsten Web Crawler im Jahr 2026 - Kinsta\u00ae","isPartOf":{"@id":"https:\/\/kinsta.com\/de\/#website"},"primaryImageOfPage":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage"},"image":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage"},"thumbnailUrl":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","datePublished":"2022-12-15T11:13:14+00:00","dateModified":"2025-08-29T16:01:33+00:00","description":"Schau dir die besten Webcrawler an, die du zu deiner Crawler-Liste hinzuf\u00fcgen kannst, um deine SEO-Rankings zu verbessern und deinen Erfolg zu steigern.","breadcrumb":{"@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#breadcrumb"},"inLanguage":"de","potentialAction":[{"@type":"ReadAction","target":["https:\/\/kinsta.com\/de\/blog\/crawler-liste\/"]}]},{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#primaryimage","url":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","contentUrl":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2022\/12\/crawler-list.jpg","width":1460,"height":730},{"@type":"BreadcrumbList","@id":"https:\/\/kinsta.com\/de\/blog\/crawler-liste\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Home","item":"https:\/\/kinsta.com\/de\/"},{"@type":"ListItem","position":2,"name":"SEO Strategie","item":"https:\/\/kinsta.com\/de\/thema\/seo-strategie\/"},{"@type":"ListItem","position":3,"name":"Crawler-Liste: Web Crawler Bots und wie du sie f\u00fcr deinen Erfolg nutzen kannst"}]},{"@type":"WebSite","@id":"https:\/\/kinsta.com\/de\/#website","url":"https:\/\/kinsta.com\/de\/","name":"Kinsta\u00ae","description":"Schnelle, sichere und hochwertige Hosting-L\u00f6sungen","publisher":{"@id":"https:\/\/kinsta.com\/de\/#organization"},"potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/kinsta.com\/de\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"de"},{"@type":"Organization","@id":"https:\/\/kinsta.com\/de\/#organization","name":"Kinsta","url":"https:\/\/kinsta.com\/de\/","logo":{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/kinsta.com\/de\/#\/schema\/logo\/image\/","url":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2023\/12\/kinsta-logo.jpeg","contentUrl":"https:\/\/kinsta.com\/de\/wp-content\/uploads\/sites\/5\/2023\/12\/kinsta-logo.jpeg","width":500,"height":500,"caption":"Kinsta"},"image":{"@id":"https:\/\/kinsta.com\/de\/#\/schema\/logo\/image\/"},"sameAs":["https:\/\/www.facebook.com\/Kinsta-Deutschland-207459890108303\/","https:\/\/x.com\/Kinsta_DE","https:\/\/www.instagram.com\/kinstahosting\/","https:\/\/www.linkedin.com\/company\/kinsta\/","https:\/\/www.pinterest.com\/kinstahosting\/","https:\/\/www.youtube.com\/c\/Kinsta"]},{"@type":"Person","@id":"https:\/\/kinsta.com\/de\/#\/schema\/person\/4eee42881d7b5a73ebb4f58dd5223b21","name":"Jeremy Holcombe","image":{"@type":"ImageObject","inLanguage":"de","@id":"https:\/\/kinsta.com\/de\/#\/schema\/person\/image\/","url":"https:\/\/secure.gravatar.com\/avatar\/0e17001f3bb37dbbe54fceef9bb547fa?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/0e17001f3bb37dbbe54fceef9bb547fa?s=96&d=mm&r=g","caption":"Jeremy Holcombe"},"description":"Senior Editor at Kinsta, WordPress Web Developer, and Content Writer. Outside of all things WordPress, I enjoy the beach, golf, and movies. I also have tall people problems.","sameAs":["https:\/\/www.linkedin.com\/in\/jeremyholcombe\/"],"url":"https:\/\/kinsta.com\/de\/blog\/author\/jeremyholcombe\/"}]}},"acf":[],"_links":{"self":[{"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/posts\/57087","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/users\/199"}],"replies":[{"embeddable":true,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/comments?post=57087"}],"version-history":[{"count":15,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/posts\/57087\/revisions"}],"predecessor-version":[{"id":73913,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/posts\/57087\/revisions\/73913"}],"alternate":[{"embeddable":true,"hreflang":"en","title":"English","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/en"},{"embeddable":true,"hreflang":"it","title":"Italian","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/it"},{"embeddable":true,"hreflang":"pt","title":"Portuguese","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/pt"},{"embeddable":true,"hreflang":"fr","title":"French","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/fr"},{"embeddable":true,"hreflang":"de","title":"German","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/de"},{"embeddable":true,"hreflang":"ja","title":"Japanese","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/jp"},{"embeddable":true,"hreflang":"nl","title":"Dutch","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/nl"},{"embeddable":true,"hreflang":"es","title":"Spanish","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/es"},{"embeddable":true,"hreflang":"sv","title":"Swedish","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/se"},{"embeddable":true,"hreflang":"da","title":"Danish","href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/translations\/dk"},{"href":"https:\/\/kinsta.com\/de\/wp-json\/kinsta\/v1\/posts\/57087\/tree"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/media\/57088"}],"wp:attachment":[{"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/media?parent=57087"}],"wp:term":[{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/tags?post=57087"},{"taxonomy":"topic","embeddable":true,"href":"https:\/\/kinsta.com\/de\/wp-json\/wp\/v2\/topic?post=57087"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}