Een ander ding dat u moet doen om uw website hoger te laten scoren in zoekmachines, is door bots de weg te wijzen. Bots spelen een grote rol bij het ontdekken van pagina's. Hiervoor moet u het robots.txt-bestand maken en correct configureren. U kunt dit artikel blijven lezen om te leren hoe u dit kunt doen.

Wat is Robots.txt?

Zoekmachines doorzoeken websites via bots. WordPress robots.txt-bestand Het instrueert zoekmachines hoe ze zich moeten gedragen tijdens het crawlen. Robots.txt-bestand Zelfs als u er geen maakt, wordt uw site door zoekmachines gecrawld. Vergeet dit niet.

Hoe Robots.txt te maken

U kunt handmatig of via een plug-in een robots.txt-bestand in WordPress maken.

WordPress Robots.txt maken

Robots.txt maken met Rank Math SEO

De Rank Math SEO-plug-in helpt u interne SEO-optimalisatie in uw berichten en pagina's te bereiken. Op deze manier kunt u succesvoller SEO-werk verrichten. Hetzelfde geldt voor het maken van een robots.txt-bestand. Nadat u de plug-in hebt geïnstalleerd en geactiveerd, klikt u op Algemene instellingen in het Rank Math SEO-menu van het beheerderspaneel. Klik op de knop Robots.txt bewerken om toegang te krijgen tot het bewerkingsscherm van Robots.txt. Als uw schrijf-/leesrechten correct zijn, kunt u hier uw virtuele robots.txt-bestand bewerken. Als u al een robots.txt-bestand heeft, is deze sectie niet van toepassing.

Robots.txt maken via FTP

Open Kladblok en schrijf uw robots.txt-regels in de inhoud ervan. Als u niet weet wat u moet schrijven, kunt u de aanbevolen robots.txt-regels gebruiken die we in het volgende gedeelte van ons artikel hebben genoemd. Sla het bestand op in de extensie .txt en maak via een FTP-verbinding verbinding met de hoofdmap van uw site (meestal public_html) en upload het bestand.

Robots.txt maken met Bestandsbeheer

Nadat u bent ingelogd op het hostingcontrolepaneel dat u gebruikt (cpanel, plesk, directadmin, cwp, etc.), opent u bestandsbeheer. Open de hoofdmap van uw site (meestal public_html) vanuit Bestandsbeheer. Klik in het menu voor het maken van nieuwe bestanden op Nieuw bestand maken en stel de bestandsextensie in op .txt. Schrijf robots.txt-regels en sla het bestand op.

Robots.txt maken met de Robots.txt Editor-plug-in

Robots.txt-editor-plug-in Hiermee kunt u eenvoudig robots.txt-bestanden maken en bewerken zonder bestandsbeheerder of ftp-toegang.

Plug-inpagina -> https://wordpress.org/plugins/robots-txt-editor/

Na het downloaden van de plug-in activeert u deze. Ga vervolgens naar de pagina Lezen onder Instellingen via de linkerzijbalk van WordPress. Schrijf uw robots.txt-regels in het vak met de titel robots.txt onderaan de pagina en sla ze op.

WordPress Robots.txt-regels

Aanbevolen robots.txt-regels voor WordPress zijn als volgt. U moet uw eigen siteadres schrijven in plaats van domain.com, en de sitemap.xml-URL die u gebruikt in plaats van sitemap.xml. We willen u graag een belangrijke tip geven: als u de plug-in Rank Math SEO of Yoast SEO gebruikt, wordt uw sitemap gemaakt als sitemap_index.xml, niet als sitemap.xml. Vergeet niet de URL die u heeft geschreven te controleren door deze in de browser in te voeren.

https://www.domain.com/sitemap.xml" style="color:#272822;display:none;background-color:#F8F8F2" aria-label="Kopieer" data-copied-text="Gekopieerd!" data-has-text-button="textSimple" data-inside-header-type="headlights" aria-live="polite" class="code-block-pro-copy-button">Kopieer
User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.domain.com/sitemap.xml

Ontvang gratis ondersteuning bij het maken van Robots.txt

Als u het robots.txt-bestand niet kunt maken of gratis ondersteuning wilt krijgen over het robots.txt-bestand, vermeld dan uw probleem met een gedetailleerde uitleg in het opmerkingengedeelte. Wij reageren binnen 24 uur op uw opmerking en bieden gratis ondersteuning.

Krijg professionele ondersteuning om Robots.txt te maken

Als u het robots.txt-bestand niet kunt maken of professionele ondersteuning wilt krijgen over het robots.txt-bestand, voert u uw naam en telefoonnummer in het onderstaande formulier in. Laat ons u zo snel mogelijk bereiken.