Hur man optimerar WordPress Robots.txt-fil för bättre SEO
Om du undrar hur du optimerar WordPress robots.txt-fil för bättre SEO, har du kommit till rätt ställe.
I den här snabbguiden förklarar jag vad en robots.txt-fil är, varför det är viktigt att förbättra din sökrankning och hur du gör ändringar i den och skickar den till Google.
Låt oss dyka in!
Contents
Vad är en WordPress robots.txt-fil och behöver jag oroa mig för den?
En robots.txt-fil är en fil på din webbplats som låter dig neka sökmotorer åtkomst till vissa filer och mappar. Du kan använda den för att blockera Googles (och andra sökmotorer) från att genomsöka vissa sidor på din webbplats. Här är ett exempel på filen:
Så hur förbättrar faktiskt din åtkomst till sökmotorer din SEO? Verkar motsatt …
Det fungerar så här: Ju fler sidor på din webbplats, desto fler sidor måste Google krypa.
Om du till exempel har många kategori- och taggsidor på din blogg är dessa sidor av låg kvalitet och behöver inte genomsökas av sökmotorer; de konsumerar bara din webbplats crawlbudget (det tilldelade antalet sidor som Google genomsöker på din webbplats när som helst).
Crawlbudget är viktigt eftersom det avgör hur snabbt Google hämtar på webbplatsens förändringar – och därmed hur snabbt du rankas. Det kan särskilt hjälpa till med e-handels SEO!
Var bara noga med att göra detta rätt, eftersom det kan skada din SEO om det görs dåligt. För mer information om hur du korrekt indexerar de rätta sidorna, kolla in den här guiden från DeepCrawl.
Så behöver du röra med din WordPress robots.txt-fil?
Om du är i en mycket konkurrenskraftig nisch med en stor webbplats, förmodligen. Om du precis har börjat din första blogg är det dock högre prioriteringar att bygga länkar till ditt innehåll och skapa massor av högkvalitativa artiklar.
Hur man optimerar WordPress robots.txt-filen för bättre SEO
Låt oss nu diskutera hur man faktiskt kommer till (eller skapar) och optimerar WordPress robots.txt-filen.
Robots.txt finns vanligtvis i din webbplats rotmapp. Du måste ansluta till din webbplats med en FTP-klient eller genom att använda din cPanels filhanterare för att se den. Det är bara en vanlig textfil som du sedan kan öppna med Anteckningar.
Om du inte har en robots.txt-fil i din webbplats rotkatalog kan du skapa en. Allt du behöver göra är att skapa en ny textfil på din dator och spara den som robots.txt. Sedan laddar du bara upp den till din webbplats rotmapp.
Hur ser en ideal robots.txt-fil ut?
Formatet för en robots.txt-fil är verkligen enkelt. Den första raden namnger vanligtvis en användaragent. Användaragenten är namnet på den sökbot du försöker kommunicera med. Till exempel, Googlebot eller Bingbot. Du kan använda asterisk * att instruera alla bots.
Nästa rad följer med Tillåta eller Inte godkänna instruktioner för sökmotorer, så att de vet vilka delar du vill att de ska indexeras och vilka du inte vill indexeras.
Här är ett exempel:
Användaragent: *
Tillåt: /? Display = bred
Tillåt: / wp-content / uploads /
Disallow: /readme.html
Disallow: / refer /
Sitemap: http://www.codeinwp.com/post-sitemap.xml
Sitemap: http://www.codeinwp.com/page-sitemap.xml
Sitemap: http://www.codeinwp.com/deals-sitemap.xml
Sitemap: http://www.codeinwp.com/hosting-sitemap.xmlObservera att om du använder ett plugin som Yoast eller All in One SEO, kanske du inte behöver lägga till sitemapavsnittet, eftersom de försöker göra det automatiskt. Om det misslyckas kan du lägga till det manuellt som i exemplet ovan.
Vad ska jag förbjuda eller noindex?
I Googles riktlinjer för webbansvariga råder de webbansvariga att inte använda sin robots.txt-fil för att dölja innehåll av låg kvalitet. Att använda din robots.txt-fil för att hindra Google från att indexera din kategori, datum och andra arkivsidor kanske inte är ett klokt val.
Kom ihåg att syftet med robots.txt är att instruera bots vad de ska göra med innehållet de kryper på din webbplats. Det hindrar dem inte från att genomsöka din webbplats.
Du behöver inte heller lägga till din WordPress-inloggningssida, administratörskatalog eller registreringssida till robots.txt eftersom inloggnings- och registreringssidor har noindex-taggen läggs till automatiskt av WordPress.
Jag rekommenderar dock att du avvisa filen readme.html i din robots.txt-fil. Denna readme-fil kan användas av någon som försöker ta reda på vilken version av WordPress du använder. Om det här är en person kan de enkelt komma åt filen genom att bara bläddra till den. Dessutom kan du sätta in en tillåtet tagg i blockering av skadliga attacker.
Hur skickar jag in min WordPress robots.txt-fil till Google?
När du har uppdaterat eller skapat din robots.txt-fil kan du skicka den till Google med Google Search Console.
Jag rekommenderar dock att du testar den först med Googles testverktyg för robots.txt.
Om du inte ser den version du skapade här måste du ladda upp robots.txt-filen som du skapade till din WordPress-webbplats. Du kan göra detta med Yoast SEO.
Slutsats
Du vet nu hur du optimerar WordPress robots.txt-filen för bättre SEO.
Kom ihåg att vara försiktig när du gör några större ändringar på din webbplats via robots.txt. Även om dessa ändringar kan förbättra din söktrafik kan de också göra mer skada än nytta om du inte är försiktig.
Och om du är ute efter mer lärande, kolla in vår ultimata uppsättning av WordPress-tutorials!
Låt oss veta i kommentarerna. har du några frågor om hur du optimerar WordPress robots.txt-filen? Vilken inverkan har det att ta hand om det på din sökrankning?
