{"id":2270,"date":"2026-08-31T13:54:00","date_gmt":"2026-08-31T13:54:00","guid":{"rendered":"https:\/\/internal-links-manager.com\/en\/?page_id=2270"},"modified":"2026-08-31T14:39:56","modified_gmt":"2026-08-31T14:39:56","slug":"crawl-budget","status":"publish","type":"page","link":"https:\/\/internal-links-manager.com\/de\/glossar\/crawl-budget\/","title":{"rendered":"Crawl-Budget"},"content":{"rendered":"<div data-elementor-type=\"wp-page\" data-elementor-id=\"2270\" class=\"elementor elementor-2270\" data-elementor-post-type=\"page\">\n\t\t\t\t\t\t<section class=\"elementor-section elementor-top-section elementor-element elementor-element-t1000001 ilm-article elementor-section-boxed elementor-section-height-default elementor-section-height-default\" data-id=\"t1000001\" data-element_type=\"section\" data-e-type=\"section\" data-settings=\"{&quot;background_background&quot;:&quot;classic&quot;}\">\n\t\t\t\t\t\t<div class=\"elementor-container elementor-column-gap-no\">\n\t\t\t\t\t<div class=\"elementor-column elementor-col-100 elementor-top-column elementor-element elementor-element-t1000002\" data-id=\"t1000002\" data-element_type=\"column\" data-e-type=\"column\">\n\t\t\t<div class=\"elementor-widget-wrap elementor-element-populated\">\n\t\t\t\t\t\t<div class=\"elementor-element elementor-element-t1000003 elementor-widget elementor-widget-html\" data-id=\"t1000003\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"html.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<a class=\"ilm-back\" href=\"https:\/\/internal-links-manager.com\/de\/glossar\/\">\u2190 Zur\u00fcck zum Glossar<\/a>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000004 elementor-widget elementor-widget-heading\" data-id=\"t1000004\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h1 class=\"elementor-heading-title elementor-size-default\"><span data-no-translation>Crawl budget<\/span><\/h1>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000005 elementor-widget elementor-widget-html\" data-id=\"t1000005\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"html.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<p class=\"ilm-termmeta\">4 Min. Lesezeit \u00b7 Aktualisiert am 28. August 2026<\/p>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000006 elementor-widget elementor-widget-html\" data-id=\"t1000006\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"html.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<div class=\"ilm-def\"><span class=\"k\">Definition<\/span><p>Crawl-Budget ist die begrenzte Aufmerksamkeit, die eine Suchmaschine einer Website schenkt \u2013 also wie viele ihrer URLs in einem bestimmten Zeitraum abgerufen werden. Google beschreibt es als das Produkt aus zwei Dingen: dem <em>Crawl-Kapazit\u00e4t<\/em> dein Server verkraftet das ohne langsamer zu werden, und das <em>Crawl-Anfrage<\/em> Dein Inhalt rechtfertigt sich.<\/p><p>Unter ein paar tausend Seiten ist das selten ein echtes Problem. Wo es dann aber eng wird, entscheiden interne Links dar\u00fcber, wohin die Aufmerksamkeit geht: Gut verlinkte Seiten werden \u00f6fter besucht, <a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/verwaiste-seite\/\">Waisenknaben<\/a> Mach das nicht.<\/p><\/div>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<section class=\"elementor-section elementor-top-section elementor-element elementor-element-t1000010 ilm-article elementor-section-boxed elementor-section-height-default elementor-section-height-default\" data-id=\"t1000010\" data-element_type=\"section\" data-e-type=\"section\" data-settings=\"{&quot;background_background&quot;:&quot;classic&quot;}\">\n\t\t\t\t\t\t<div class=\"elementor-container elementor-column-gap-no\">\n\t\t\t\t\t<div class=\"elementor-column elementor-col-100 elementor-top-column elementor-element elementor-element-t1000011\" data-id=\"t1000011\" data-element_type=\"column\" data-e-type=\"column\">\n\t\t\t<div class=\"elementor-widget-wrap elementor-element-populated\">\n\t\t\t\t\t\t<div class=\"elementor-element elementor-element-t1000012 elementor-widget elementor-widget-heading\" data-id=\"t1000012\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Die meisten Websites haben kein Crawl-Budget-Problem<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000013 elementor-widget elementor-widget-text-editor\" data-id=\"t1000013\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<p>Das sollte man klar aussprechen, weil der Begriff oft als Ausgleich f\u00fcr jede Menge unn\u00f6tige Arbeit herhalten muss. Eine Website mit ein paar hundert Seiten, die w\u00f6chentlich ver\u00f6ffentlicht, konkurriert in keinem nennenswerten Sinn um die Aufmerksamkeit von Crawlern. Wenn bei einer solchen Website Seiten nicht indexiert sind, liegt die Ursache fast immer woanders: Nichts verlinkt auf sie, sie duplizieren eine andere Seite oder sie sind es nicht wert, indexiert zu werden.<\/p><p>Das Crawl-Budget wird bei gro\u00dfen Websites zu einem echten Problem \u2013 Shops mit Facettennavigation, die tausende Parameter-URLs erzeugen, Publisher mit riesigen Archiven oder Seiten mit langsamen Servern, die den Crawler zum Abbremsen zwingen.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000014 elementor-widget elementor-widget-heading\" data-id=\"t1000014\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Wo es eigentlich verschwendet wird<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000015 elementor-widget elementor-widget-text-editor\" data-id=\"t1000015\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<ul><li><strong>Facettennavigation.<\/strong> Jede Filterkombination ist eine URL. Farbe mal Gr\u00f6\u00dfe mal Preisspanne ergibt Tausende fast identischer Seiten.<\/li><li><strong>Sitzungs- und Tracking-Parameter.<\/strong> Dieselbe Seite wurde Dutzend Male mit verschiedenen Query-Parametern aufgerufen.<\/li><li><strong><a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/weiterleitungskette\/\">Weiterleitungsketten<\/a>.<\/strong> Jeder Hop ist eine Anfrage, die keinen Inhalt zur\u00fcckgibt.<\/li><li><strong>Soft 404s und d\u00fcnne Archive.<\/strong> Leere Schlagwortseiten, Datumsarchive, die kein Schwein liest.<\/li><li><strong>Unendliche Kalender.<\/strong> Ein Buchungs-Widget, das f\u00fcr jeden zuk\u00fcnftigen Monat f\u00fcr immer eine URL generiert.<\/li><\/ul><p>Der rote Faden: Der Crawler verbringt seinen Besuch auf URLs, die niemand indexiert haben will, und die wichtigen Seiten werden dadurch seltener \u00fcberpr\u00fcft.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000016 elementor-widget elementor-widget-heading\" data-id=\"t1000016\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Was hat interne Verlinkung damit zu tun?<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000017 elementor-widget elementor-widget-text-editor\" data-id=\"t1000017\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<p>Die Crawl-Nachfrage h\u00e4ngt teilweise davon ab, wie wichtig eine Seite wirkt, und interne Links sind das wichtigste Signal f\u00fcr Wichtigkeit, das eine Website selbst steuern kann. Seiten mit vielen eingehenden internen Links und geringem <a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/klicktiefe\/\">Klicktiefe<\/a> werden \u00f6fter abgerufen; \u00c4nderungen daran fallen fr\u00fcher auf.<\/p><p>Der praktische Rat ist also derselbe wie \u00fcberall sonst auf dieser Seite: <a href=\"https:\/\/internal-links-manager.com\/de\/was-ist-mit-linkbuilding\/\" data-internallinksmanager029f6b8e52c=\"146\" title=\"Interne Links vs. Backlinks\">Link<\/a> die Seiten, auf die es ankommt, von Seiten, die selbst verlinkt werden. Was das ist <em>nicht<\/em>hinzuf\u00fcgen <a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/nofollow\/\">nofollow<\/a> auf interne Links, um den Crawler zu steuern. Das spart kein Budget \u2014 nutze <code>robots.txt<\/code> f\u00fcr URLs, die niemals abgerufen werden sollen, und entferne Links zu URLs, die nicht existieren sollten.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000018 elementor-widget elementor-widget-heading\" data-id=\"t1000018\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Wie du deine eigenen siehst<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-t1000019 elementor-widget elementor-widget-text-editor\" data-id=\"t1000019\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<p>Die Search Console bietet unter den Einstellungen einen Bericht zur Crawling-Statistik: Anfragen pro Tag, durchschnittliche Antwortzeit sowie eine Aufteilung nach Dateityp und Zweck. Wenn die Gesamtzahl der Anfragen bei wachsender Website gleich bleibt oder die durchschnittliche Antwortzeit steigt, lohnt sich ein Blick darauf. Server-Logdateien liefern dasselbe Bild noch detaillierter, sofern du darauf zugreifen kannst.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<section class=\"elementor-section elementor-top-section elementor-element elementor-element-3f6b3b2 ilm-article elementor-section-boxed elementor-section-height-default elementor-section-height-default\" data-id=\"3f6b3b2\" data-element_type=\"section\" data-e-type=\"section\" data-settings=\"{&quot;background_background&quot;:&quot;classic&quot;}\">\n\t\t\t\t\t\t<div class=\"elementor-container elementor-column-gap-no\">\n\t\t\t\t\t<div class=\"elementor-column elementor-col-100 elementor-top-column elementor-element elementor-element-d5e1304\" data-id=\"d5e1304\" data-element_type=\"column\" data-e-type=\"column\">\n\t\t\t<div class=\"elementor-widget-wrap elementor-element-populated\">\n\t\t\t\t\t\t<div class=\"elementor-element elementor-element-3818062 elementor-widget elementor-widget-heading\" data-id=\"3818062\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Crawler-Rate und Crawl-Bedarf<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-a18f1f0 elementor-widget elementor-widget-text-editor\" data-id=\"a18f1f0\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<p>Die beiden H\u00e4lften verhalten sich unterschiedlich und es lohnt sich, sie zu trennen.<\/p><p><strong>Crawling-Kapazit\u00e4t<\/strong> das ist eine technische Obergrenze. Google hebt sie an, solange der Server schnell antwortet, und senkt sie ab, wenn die Antworten langsamer werden oder Fehler auftreten. Eine Website, die unter Last 500er-Fehler wirft, bringt dem Crawler bei, seltener vorbeizuschauen \u2013 das ist das einzige Crawl-Budget-Problem, das wirklich ein Serverproblem ist.<\/p><p><strong>Crawlnachfrage<\/strong> ist redaktionell. Sie steigt mit der Beliebtheit, damit, wie oft sich Inhalte tats\u00e4chlich \u00e4ndern, und damit, wie wichtig eine URL durch ihre Links aussieht. Das erneute Ver\u00f6ffentlichen einer unver\u00e4nderten Seite mit einem neuen Datum erzeugt keine Nachfrage; es bringt dem Crawler bei, dass Daten auf deiner Website bedeutungslos sind.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-7689194 elementor-widget elementor-widget-heading\" data-id=\"7689194\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Symptome, bei denen man handeln sollte<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-578ee94 elementor-widget elementor-widget-text-editor\" data-id=\"578ee94\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<ul><li><strong>Neue Seiten brauchen Wochen, bis sie auftauchen.<\/strong> Bei einer kleinen Website ist das ein Verlinkungsproblem, kein Budgetproblem \u2013 check mal, ob \u00fcberhaupt irgendwas dorthin verlinkt.<\/li><li><strong>\u00c4nderungen an bestehenden Seiten fallen erst sp\u00e4t auf.<\/strong> Schau dir an, wo diese Seiten im Linkgraph stehen.<\/li><li><strong>Die Search Console zeigt viele URLs als <em>Gefunden \u2013 zurzeit nicht indexiert<\/em>.<\/strong> Google wei\u00df, dass die URLs da sind, und hat beschlossen, sie nicht abzurufen. Bei einer gro\u00dfen Website ist das das eindeutigste Crawling-Budget-Signal, das es gibt.<\/li><li><strong>Die Crawl-Statistiken zeigen gleichbleibende Zugriffe, obwohl die Website w\u00e4chst.<\/strong> Lesenswert im Vergleich zur durchschnittlichen Antwortzeit.<\/li><\/ul><p>Ohne diese ist jede M\u00fche, die in das Crawl-Budget gesteckt wird, M\u00fche, die nicht in etwas gesteckt wird, das die Zahlen nach oben bringt.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-11f9210 elementor-widget elementor-widget-heading\" data-id=\"11f9210\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"heading.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<h2 class=\"elementor-heading-title elementor-size-default\">Punkt vor Strich<\/h2>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t<div class=\"elementor-element elementor-element-c683586 elementor-widget elementor-widget-text-editor\" data-id=\"c683586\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"text-editor.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t\t\t\t\t<p>Wo es bindet, spielt die Reihenfolge eine Rolle, weil jeder Schritt die Arbeit des n\u00e4chsten verringert.<\/p><p><strong>H\u00f6r erst mal auf, diesen Mist-URLs zu generieren.<\/strong> Facettennavigation und Tracking-Parameter produzieren mehr M\u00fcll als alles andere zusammen. Blockiere die Muster in <code>robots.txt<\/code> oder h\u00f6r auf, sie zu verlinken.<\/p><p><strong>Und dann flach dr\u00fccke <a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/weiterleitungskette\/\">Weiterleitungsketten<\/a>.<\/strong> Jeder Hop ist eine Anfrage, die keinen Inhalt zur\u00fcckgibt.<\/p><p><strong>Dann korrigiere die internen Links.<\/strong> Seiten, die sich f\u00fcrs Crawlen lohnen, sollten gut verlinkt und nicht tief sein; Seiten, die sich nicht lohnen, sollten am besten gar nicht verlinkt sein.<\/p><p><strong>Dann mach das sauber <a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/xml-sitemap\/\">Sitemap<\/a>.<\/strong> Nur kanonische, indexierbare URLs mit genauen \u00c4nderungsdaten.<\/p>\t\t\t\t\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<section class=\"elementor-section elementor-top-section elementor-element elementor-element-7a30b45 ilm-article elementor-section-boxed elementor-section-height-default elementor-section-height-default\" data-id=\"7a30b45\" data-element_type=\"section\" data-e-type=\"section\" data-settings=\"{&quot;background_background&quot;:&quot;classic&quot;}\">\n\t\t\t\t\t\t<div class=\"elementor-container elementor-column-gap-no\">\n\t\t\t\t\t<div class=\"elementor-column elementor-col-100 elementor-top-column elementor-element elementor-element-2869dab\" data-id=\"2869dab\" data-element_type=\"column\" data-e-type=\"column\">\n\t\t\t<div class=\"elementor-widget-wrap elementor-element-populated\">\n\t\t\t\t\t\t<div class=\"elementor-element elementor-element-ef2d71a elementor-widget elementor-widget-html\" data-id=\"ef2d71a\" data-element_type=\"widget\" data-e-type=\"widget\" data-widget_type=\"html.default\">\n\t\t\t\t<div class=\"elementor-widget-container\">\n\t\t\t\t\t<div class=\"ilm-rel\"><span class=\"k\">Verwandte Begriffe<\/span><ul><li><a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/klicktiefe\/\">Klicktiefe<\/a><\/li><li><a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/verwaiste-seite\/\">Verwaiste Seite<\/a><\/li><li><a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/weiterleitungskette\/\">Weiterleitungskette<\/a><\/li><li><a href=\"https:\/\/internal-links-manager.com\/de\/glossar\/xml-sitemap\/\">XML-Sitemap<\/a><\/li><\/ul><\/div>\t\t\t\t<\/div>\n\t\t\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/div>\n\t\t\t\t\t<\/div>\n\t\t<\/section>\n\t\t\t\t<\/div>","protected":false},"excerpt":{"rendered":"<p>\u2190 Back to the glossary Crawl budget 4 minute read \u00b7 Updated 28 August 2026 Definition Crawl budget is the finite attention a search engine gives a site \u2014 how many of its URLs get fetched in a given period. Google describes it as the product of two things: the crawl capacity your server can [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":0,"parent":2133,"menu_order":0,"comment_status":"closed","ping_status":"closed","template":"","meta":{"footnotes":""},"class_list":["post-2270","page","type-page","status-publish","hentry"],"_links":{"self":[{"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/pages\/2270","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/pages"}],"about":[{"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/types\/page"}],"author":[{"embeddable":true,"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/comments?post=2270"}],"version-history":[{"count":5,"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/pages\/2270\/revisions"}],"predecessor-version":[{"id":2346,"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/pages\/2270\/revisions\/2346"}],"up":[{"embeddable":true,"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/pages\/2133"}],"wp:attachment":[{"href":"https:\/\/internal-links-manager.com\/de\/wp-json\/wp\/v2\/media?parent=2270"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}