Nieuwe tool van Bing helpt robots.txt bestand eenvoudig te verbeteren

Yannick — Thu, 10 Sep 2020 11:30:00 +0000

Bing heeft een nieuwe tool gelanceerd waarmee webmasters het robots.txt-bestand snel kunnen analyseren en verbeteren.

Een goed geconfigureerd robots.txt-bestand is cruciaal voor zoekmachineoptimalisatie. Het bestandje laat zoekrobots weten wat ze wel en niet mogen doen en geeft op die manier wat controle over zoekmachines die je website willen indexeren.

Robots.txt testen

Een fout in het robots.txt-bestand ligt vaak aan de basis van rankingproblemen. Met de robots.txt tester van Bing kan je die nu snel opsporen.

Kan een bepaalde URL niet geïndexeerd worden, terwijl dat eigenlijk wel moet gebeuren? Of geef je net toegang tot een bepaalde pagina, terwijl die niet moet geïndexeerd worden door een zoekmachine? De testtool detecteert de fout en toont je aan welk element specifiek voor een probleem zorgt.

Als webbeheerder kan je nu dus erg efficiënt je robots.txt-bestand updaten waar nodig.

Nieuwe functies, gebruiksvriendelijker design

De nieuwe tester van Bing volgt op een reeks eerdere updates die Microsoft doorvoerde aan Bing Webmaster Tools. De tegenhanger van Google Search Console kreeg voorbije zomer nog twee SEO-tools erbij.

URL-inspectie helpt je individuele URL’s testen op SEO-fouten. De Site Scan controleert dan weer een volledige website en geeft advies wanneer je bijvoorbeeld een H1-tag dubbel gebruikt op één pagina of geen meta description hebt ingevuld.

Microsoft heeft Bing Webmaster Tools ook een gebruiksvriendelijker design gegeven. De navigatie werd onder handen genomen en de tools zijn voortaan gerangschikt volgens hun populariteit, waardoor je minder lang moet zoeken naar de functie die je nodig hebt.

SEO-analyse van andere websites

Een laatste nieuwigheid die aan Bing Webmaster Tools werd toegevoegd, is dat je ook andere websites kan analyseren. Je kan nu zien welke websites naar de jouwe linken, maar ook wie naar websites van een concurrent linkt.

Zo’n analyse kan handig zijn om te ontdekken hoe je het linkprofiel van je eigen website kan verbeteren. Websites die naar een concurrent linken, zijn misschien ook geïnteresseerd in jouw content.

Google stopt ondersteuning van NoIndex in het robots.txt-bestand

Yannick — Wed, 03 Jul 2019 14:01:13 +0000

NoIndex is een attribuut dat gebruikt wordt om web crawlers te vertellen dat ze een specifieke pagina niet mogen indexeren, maar dat is eigenlijk geen officiële richtlijn. Google heeft daarom beslist de ondersteuning voor het NoIndex-attribuut stop te zetten.

Websitebeheerders hebben tot 1 september de tijd om NoIndex te verwijderen uit het robots.txt-bestand en te vervangen door een alternatief.

Geen officiële richtlijn

Hoewel het geen officiële richtlijn is, respecteerden de crawlers van Google het NoIndex-attribuut in de meeste gevallen. Dat is niet langer het geval.

Leestip: Hoe krijg je nieuwe pagina’s snel in Google?

Beheerders die gebruik maken van NoIndex om te voorkomen dat een webpagina geïndexeerd wordt, moeten het attribuut vervangen vóór 1 september vervangen in het robots.txt-bestand. Google geeft zelf enkele alternatieven om crawling te beïnvloeden: