{"id":2616,"date":"2024-09-30T12:33:19","date_gmt":"2024-09-30T10:33:19","guid":{"rendered":"https:\/\/www.estugo.de\/howsting\/?p=2616"},"modified":"2024-09-30T12:35:37","modified_gmt":"2024-09-30T10:35:37","slug":"bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren","status":"publish","type":"post","link":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/","title":{"rendered":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren?"},"content":{"rendered":"\n<p>Im Internet gibt es eine Vielzahl von Bots, die Webseiten durchforsten. W\u00e4hrend manche Bots durchaus n\u00fctzlich sind, gibt es auch die sogenannten \u201eBad Bots\u201c, die unerw\u00fcnschte Aktivit\u00e4ten ausf\u00fchren. Doch was genau machen diese \u201eBad Bots\u201c, warum sind sie problematisch, und wie kannst du dich dagegen sch\u00fctzen?<\/p>\n\n\n\n<h4 class=\"wp-block-heading\">Was sind Bad Bots und was tun sie?<\/h4>\n\n\n\n<p>Ein Bot ist im Wesentlichen ein automatisiertes Programm, das Webseiten durchsucht, Daten extrahiert oder Aktionen auf Websites ausf\u00fchrt. Ein \u201eBad Bot\u201c unterscheidet sich von n\u00fctzlichen Bots, da er oft b\u00f6swillige Absichten verfolgt oder schlichtweg den Betrieb deiner Webseite beeintr\u00e4chtigen kann. Diese Bots durchsuchen Webseiten ohne Zustimmung des Websitebetreibers, sammeln sensible Daten, belasten die Serverressourcen oder verursachen Sicherheitsprobleme.<\/p>\n\n\n\n<p>Typische Aktivit\u00e4ten von Bad Bots:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Content Scraping<\/strong>: Bots kopieren Inhalte von deiner Website, um diese woanders zu verwenden oder KI-Modelle zu trainieren.<\/li>\n\n\n\n<li><strong>Spam-Kommentare<\/strong>: Sie f\u00fcllen Kommentarfelder oder Kontaktformulare mit Spam-Nachrichten, was deine Website un\u00fcbersichtlich und unprofessionell wirken l\u00e4sst.<\/li>\n\n\n\n<li><strong>Wettbewerbsanalyse<\/strong>: Manche Bots durchsuchen gezielt Wettbewerberwebsites, um Daten f\u00fcr eigene Analysen zu sammeln.<\/li>\n\n\n\n<li><strong>Sicherheitsl\u00fccken ausnutzen<\/strong>: Einige Bots durchsuchen Webseiten gezielt nach Schwachstellen, um diese f\u00fcr Cyberangriffe zu nutzen.<\/li>\n<\/ul>\n\n\n\n<p>Diese Aktionen sind f\u00fcr Webseitenbetreiber meist nachteilig, da sie nicht nur die Serverleistung negativ beeinflussen k\u00f6nnen, sondern auch rechtliche und sicherheitstechnische Risiken mit sich bringen.<\/p>\n\n\n\n<h4 class=\"wp-block-heading\">Sind alle Bots schlecht?<\/h4>\n\n\n\n<p>Nein, nicht alle Bots sind schlecht. Viele Bots erf\u00fcllen n\u00fctzliche und sogar notwendige Aufgaben, wie beispielsweise:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Suchmaschinen-Crawler (z. B. Googlebot, Bingbot)<\/strong>: Diese Bots indexieren Webseiten, damit sie in Suchmaschinen auftauchen und f\u00fcr Nutzer sichtbar sind.<\/li>\n\n\n\n<li><strong>SEO-Bots<\/strong>: Sie helfen, deine Website zu analysieren, um Verbesserungspotenziale f\u00fcr das Suchmaschinenranking zu identifizieren.<\/li>\n\n\n\n<li><strong>KI-Bots<\/strong>: Diese sammeln Daten, um maschinelles Lernen zu verbessern, z. B. in Sprachmodellen oder anderen KI-Systemen.<\/li>\n<\/ul>\n\n\n\n<p>Bekannte Bots, die in der Regel als n\u00fctzlich gelten:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Googlebot<\/strong>: Indiziert Websites f\u00fcr die Google-Suche.<\/li>\n\n\n\n<li><strong>Bingbot<\/strong>: Wird von Microsofts Suchmaschine Bing verwendet, um Websites zu crawlen.<\/li>\n\n\n\n<li><strong>AhrefsBot<\/strong>: Ein SEO-Tool, das Daten zur Analyse von Webseiten sammelt.<\/li>\n<\/ul>\n\n\n\n<p>Allerdings gibt es auch Bots, die auf den ersten Blick n\u00fctzlich wirken, aber durch \u00fcberm\u00e4\u00dfige oder ungesteuerte Zugriffe Schaden anrichten k\u00f6nnen.<\/p>\n\n\n\n<h4 class=\"wp-block-heading\">Was genau machen diese Bots, und ist das schlecht?<\/h4>\n\n\n\n<p>Wie bereits erw\u00e4hnt, durchsuchen diese Bots deine Website und sammeln Daten \u2013 je nach Bot kann das n\u00fctzlich oder sch\u00e4dlich sein. Negative Auswirkungen entstehen oft durch die&nbsp;<strong>Menge an Zugriffen<\/strong>, die Bad Bots verursachen. Beispielsweise k\u00f6nnen Bots wie&nbsp;<strong>BLEXBot<\/strong>,&nbsp;<strong>YandexBot<\/strong>&nbsp;oder&nbsp;<strong>PetalBot<\/strong>&nbsp;durch wiederholtes Crawling die Serverlast erheblich erh\u00f6hen, was die Performance deiner Website beeinflusst.<\/p>\n\n\n\n<p>Hier einige problematische Bots, die oft unerw\u00fcnschten Traffic verursachen:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Amazonbot<\/strong>: Wird von Amazon verwendet, um Preisdaten zu sammeln, aber seine massiven Crawling-Requests k\u00f6nnen die Serverleistung beeintr\u00e4chtigen.<\/li>\n\n\n\n<li><strong>SemrushBot<\/strong>: Ein SEO-Tool, das viele Daten sammelt, was zu einer hohen Serverlast f\u00fchren kann.<\/li>\n\n\n\n<li><strong>GPTBot und ChatGPT-User<\/strong>: Diese Bots werden verwendet, um Inhalte zu sammeln und KI-Modelle wie GPT zu trainieren, was zu unerw\u00fcnschtem Scraping f\u00fchren kann.<\/li>\n\n\n\n<li><strong>BLEXBot<\/strong>: Bekannt daf\u00fcr, aggressiv Inhalte zu scrapen und dabei die Serverauslastung zu steigern.<\/li>\n<\/ul>\n\n\n\n<h4 class=\"wp-block-heading\">Wie kannst du diese Bots blockieren?<\/h4>\n\n\n\n<p>Eine der einfachsten M\u00f6glichkeiten, Bots zu blockieren, ist die Verwendung einer\u00a0<strong>robots.txt<\/strong>-Datei. Diese Datei liegt im Hauptverzeichnis deiner Website und gibt Anweisungen dar\u00fcber, welche Teile der Website von Bots durchsucht werden d\u00fcrfen. Hier ein Beispiel f\u00fcr eine robots.txt, um GPTBot zu blockieren:<br><br>User-agent: GPTBot<br>Disallow: \/<\/p>\n\n\n\n<p><\/p>\n\n\n\n<p>Es ist wichtig zu beachten, dass nicht alle Bots die robots.txt-Anweisungen respektieren. Manche Bad Bots ignorieren sie einfach und crawlen die Website trotzdem. In solchen F\u00e4llen kannst du\u00a0<strong>Server-seitige Blockierungen<\/strong>\u00a0einrichten, zum Beispiel \u00fcber eine .htaccess-Datei oder mit einer Web Application Firewall (WAF), um verd\u00e4chtige Bots basierend auf ihrem Verhalten oder ihrer IP-Adresse zu blockieren.<\/p>\n\n\n\n<p>Mehr Informationen zur Konfiguration der robots.txt findest du im Artikel\u00a0<a href=\"https:\/\/www.estugo.de\/howsting\/robots-txt\/\">robots.txt<\/a>.<\/p>\n\n\n\n<h4 class=\"wp-block-heading\">Problematische Bots im \u00dcberblick<\/h4>\n\n\n\n<p>Hier eine Auswahl von Bots, die oft als problematisch gelten:<\/p>\n\n\n\n<ul class=\"wp-block-list\">\n<li><strong>Amazonbot<\/strong><\/li>\n\n\n\n<li><strong>AhrefsBot<\/strong><\/li>\n\n\n\n<li><strong>Baiduspider<\/strong><\/li>\n\n\n\n<li><strong>BLEXBot<\/strong><\/li>\n\n\n\n<li><strong>SemrushBot<\/strong><\/li>\n\n\n\n<li><strong>claudebot<\/strong><\/li>\n\n\n\n<li><strong>YandexBot<\/strong><\/li>\n\n\n\n<li><strong>Bytespider<\/strong><\/li>\n\n\n\n<li><strong>Mb2345Browser<\/strong><\/li>\n\n\n\n<li><strong>OPPO<\/strong><\/li>\n\n\n\n<li><strong>AspiegelBot<\/strong><\/li>\n\n\n\n<li><strong>PetalBot<\/strong><\/li>\n\n\n\n<li><strong>CCBot<\/strong><\/li>\n\n\n\n<li><strong>ChatGPT-User<\/strong><\/li>\n\n\n\n<li><strong>GPTBot<\/strong><\/li>\n\n\n\n<li><strong>Omgilibot<\/strong><\/li>\n\n\n\n<li><strong>Diffbot<\/strong><\/li>\n\n\n\n<li><strong>ImagesiftBot<\/strong><\/li>\n\n\n\n<li><strong>PerplexityBot<\/strong><\/li>\n\n\n\n<li><strong>cohere-ai<\/strong><\/li>\n\n\n\n<li><strong>Timpibot<\/strong><\/li>\n\n\n\n<li><strong>YouBot<\/strong><\/li>\n<\/ul>\n\n\n\n<p>Diese Bots sind daf\u00fcr bekannt, unerw\u00fcnschten Traffic zu erzeugen, Inhalte aggressiv zu scrapen oder \u00fcberm\u00e4\u00dfig Ressourcen zu beanspruchen. W\u00e4hrend manche dieser Bots legitime Anwendungen haben, wie z. B. f\u00fcr SEO- oder KI-Zwecke, kann ihr Verhalten auf deiner Website nachteilig sein.<\/p>\n\n\n\n<h4 class=\"wp-block-heading\">Fazit<\/h4>\n\n\n\n<p>Nicht jeder Bot ist schlecht, doch es ist wichtig, die Aktivit\u00e4ten der Bots auf deiner Website im Blick zu behalten und diejenigen zu blockieren, die Schaden anrichten k\u00f6nnen. Die Verwendung einer gut konfigurierten&nbsp;<strong>robots.txt<\/strong>&nbsp;und zus\u00e4tzlicher Ma\u00dfnahmen wie&nbsp;<strong>IP-Blockierungen<\/strong>&nbsp;oder&nbsp;<strong>Web Application Firewalls<\/strong>&nbsp;kann dabei helfen, unerw\u00fcnschte Bots fernzuhalten.<\/p>\n","protected":false},"excerpt":{"rendered":"<p>Im Internet gibt es eine Vielzahl von Bots, die Webseiten durchforsten. W\u00e4hrend manche Bots durchaus n\u00fctzlich sind, gibt es auch die sogenannten \u201eBad Bots\u201c, die unerw\u00fcnschte Aktivit\u00e4ten ausf\u00fchren. Doch was genau machen diese \u201eBad Bots\u201c, warum sind sie problematisch, und wie kannst du dich dagegen sch\u00fctzen? Was sind Bad Bots und was tun sie? Ein [&hellip;]<\/p>\n","protected":false},"author":5,"featured_media":0,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"site-sidebar-layout":"default","site-content-layout":"","ast-site-content-layout":"default","site-content-style":"default","site-sidebar-style":"default","ast-global-header-display":"","ast-banner-title-visibility":"","ast-main-header-display":"","ast-hfb-above-header-display":"","ast-hfb-below-header-display":"","ast-hfb-mobile-header-display":"","site-post-title":"","ast-breadcrumbs-content":"","ast-featured-img":"","footer-sml-layout":"","ast-disable-related-posts":"","theme-transparent-header-meta":"","adv-header-id-meta":"","stick-header-meta":"","header-above-stick-meta":"","header-main-stick-meta":"","header-below-stick-meta":"","astra-migrate-meta-layouts":"set","ast-page-background-enabled":"default","ast-page-background-meta":{"desktop":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"ast-content-background-meta":{"desktop":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"footnotes":""},"categories":[16,52],"tags":[72,75,74,73],"class_list":["post-2616","post","type-post","status-publish","format-standard","hentry","category-onlineshop-hilfe","category-webhosting-hilfe","tag-bot","tag-robots-txt","tag-spam","tag-sperren"],"yoast_head":"<!-- This site is optimized with the Yoast SEO plugin v27.4 - https:\/\/yoast.com\/product\/yoast-seo-wordpress\/ -->\n<title>Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de<\/title>\n<meta name=\"robots\" content=\"index, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<link rel=\"canonical\" href=\"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/\" \/>\n<meta property=\"og:locale\" content=\"de_DE\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de\" \/>\n<meta property=\"og:description\" content=\"Im Internet gibt es eine Vielzahl von Bots, die Webseiten durchforsten. W\u00e4hrend manche Bots durchaus n\u00fctzlich sind, gibt es auch die sogenannten \u201eBad Bots\u201c, die unerw\u00fcnschte Aktivit\u00e4ten ausf\u00fchren. Doch was genau machen diese \u201eBad Bots\u201c, warum sind sie problematisch, und wie kannst du dich dagegen sch\u00fctzen? Was sind Bad Bots und was tun sie? Ein [&hellip;]\" \/>\n<meta property=\"og:url\" content=\"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/\" \/>\n<meta property=\"og:site_name\" content=\"ho(w)sting.de\" \/>\n<meta property=\"article:published_time\" content=\"2024-09-30T10:33:19+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2024-09-30T10:35:37+00:00\" \/>\n<meta name=\"author\" content=\"Alexander Mehner\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:label1\" content=\"Verfasst von\" \/>\n\t<meta name=\"twitter:data1\" content=\"Alexander Mehner\" \/>\n\t<meta name=\"twitter:label2\" content=\"Gesch\u00e4tzte Lesezeit\" \/>\n\t<meta name=\"twitter:data2\" content=\"4\u00a0Minuten\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\\\/\\\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/#article\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/\"},\"author\":{\"name\":\"Alexander Mehner\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/#\\\/schema\\\/person\\\/00eb4b9c278b079ca7ddefd80a95616d\"},\"headline\":\"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren?\",\"datePublished\":\"2024-09-30T10:33:19+00:00\",\"dateModified\":\"2024-09-30T10:35:37+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/\"},\"wordCount\":798,\"keywords\":[\"bot\",\"robots.txt\",\"spam\",\"sperren\"],\"articleSection\":[\"Onlineshop Hilfe\",\"Webhosting Hilfe\"],\"inLanguage\":\"de\"},{\"@type\":\"WebPage\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/\",\"url\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/\",\"name\":\"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/#website\"},\"datePublished\":\"2024-09-30T10:33:19+00:00\",\"dateModified\":\"2024-09-30T10:35:37+00:00\",\"author\":{\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/#\\\/schema\\\/person\\\/00eb4b9c278b079ca7ddefd80a95616d\"},\"breadcrumb\":{\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/#breadcrumb\"},\"inLanguage\":\"de\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/\"]}]},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\\\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"Startseite\",\"item\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Webhosting Hilfe\",\"item\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/thema\\\/webhosting-hilfe\\\/\"},{\"@type\":\"ListItem\",\"position\":3,\"name\":\"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren?\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/#website\",\"url\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/\",\"name\":\"ho(w)sting.de\",\"description\":\"Wir liefern Ihnen das &quot;So wird es gemacht&quot;.\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"de\"},{\"@type\":\"Person\",\"@id\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/#\\\/schema\\\/person\\\/00eb4b9c278b079ca7ddefd80a95616d\",\"name\":\"Alexander Mehner\",\"url\":\"https:\\\/\\\/www.estugo.de\\\/howsting\\\/author\\\/alex_howsting\\\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de","robots":{"index":"index","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"canonical":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/","og_locale":"de_DE","og_type":"article","og_title":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de","og_description":"Im Internet gibt es eine Vielzahl von Bots, die Webseiten durchforsten. W\u00e4hrend manche Bots durchaus n\u00fctzlich sind, gibt es auch die sogenannten \u201eBad Bots\u201c, die unerw\u00fcnschte Aktivit\u00e4ten ausf\u00fchren. Doch was genau machen diese \u201eBad Bots\u201c, warum sind sie problematisch, und wie kannst du dich dagegen sch\u00fctzen? Was sind Bad Bots und was tun sie? Ein [&hellip;]","og_url":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/","og_site_name":"ho(w)sting.de","article_published_time":"2024-09-30T10:33:19+00:00","article_modified_time":"2024-09-30T10:35:37+00:00","author":"Alexander Mehner","twitter_card":"summary_large_image","twitter_misc":{"Verfasst von":"Alexander Mehner","Gesch\u00e4tzte Lesezeit":"4\u00a0Minuten"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/#article","isPartOf":{"@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/"},"author":{"name":"Alexander Mehner","@id":"https:\/\/www.estugo.de\/howsting\/#\/schema\/person\/00eb4b9c278b079ca7ddefd80a95616d"},"headline":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren?","datePublished":"2024-09-30T10:33:19+00:00","dateModified":"2024-09-30T10:35:37+00:00","mainEntityOfPage":{"@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/"},"wordCount":798,"keywords":["bot","robots.txt","spam","sperren"],"articleSection":["Onlineshop Hilfe","Webhosting Hilfe"],"inLanguage":"de"},{"@type":"WebPage","@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/","url":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/","name":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren? - ho(w)sting.de","isPartOf":{"@id":"https:\/\/www.estugo.de\/howsting\/#website"},"datePublished":"2024-09-30T10:33:19+00:00","dateModified":"2024-09-30T10:35:37+00:00","author":{"@id":"https:\/\/www.estugo.de\/howsting\/#\/schema\/person\/00eb4b9c278b079ca7ddefd80a95616d"},"breadcrumb":{"@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/#breadcrumb"},"inLanguage":"de","potentialAction":[{"@type":"ReadAction","target":["https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/"]}]},{"@type":"BreadcrumbList","@id":"https:\/\/www.estugo.de\/howsting\/bad-bots-und-spam-crawler-was-sind-sie-und-wie-kannst-du-sie-blockieren\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"Startseite","item":"https:\/\/www.estugo.de\/howsting\/"},{"@type":"ListItem","position":2,"name":"Webhosting Hilfe","item":"https:\/\/www.estugo.de\/howsting\/thema\/webhosting-hilfe\/"},{"@type":"ListItem","position":3,"name":"Bad Bots und Spam Crawler \u2013 Was sind sie und wie kannst du sie blockieren?"}]},{"@type":"WebSite","@id":"https:\/\/www.estugo.de\/howsting\/#website","url":"https:\/\/www.estugo.de\/howsting\/","name":"ho(w)sting.de","description":"Wir liefern Ihnen das &quot;So wird es gemacht&quot;.","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/www.estugo.de\/howsting\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"de"},{"@type":"Person","@id":"https:\/\/www.estugo.de\/howsting\/#\/schema\/person\/00eb4b9c278b079ca7ddefd80a95616d","name":"Alexander Mehner","url":"https:\/\/www.estugo.de\/howsting\/author\/alex_howsting\/"}]}},"_links":{"self":[{"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/posts\/2616","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/users\/5"}],"replies":[{"embeddable":true,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/comments?post=2616"}],"version-history":[{"count":2,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/posts\/2616\/revisions"}],"predecessor-version":[{"id":2619,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/posts\/2616\/revisions\/2619"}],"wp:attachment":[{"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/media?parent=2616"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/categories?post=2616"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.estugo.de\/howsting\/wp-json\/wp\/v2\/tags?post=2616"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}