Web sitenizin arama motorlarında daha üst sıralarda çıkması için yapmanız gereken bir diğer işlem botlara yolu göstermektir. Botlar sayfaların keşfedilmesinde büyük rol oynar. Bunun için robots.txt dosyasını oluşturmanız ve doğru bir şekilde yapılandırmanız gerekir. Bunu nasıl yapacağınızı öğrenmek için bu yazıyı okumaya devam edebilirsiniz.

İçerik gizle

1 Robots.txt Nedir
2 Robots.txt Nasıl Oluşturulur
3 WordPress Robots.txt Oluşturma

Robots.txt Nedir

Web sitelerinde arama motorları tarama işlemlerini botlar aracılığı ile yapar. WordPress robots.txt dosyası arama motorlarını tarama esnasında nasıl davranacaklarına dair talimatlar verir. Robots.txt dosyası oluşturmasanız bile siteniz arama motorları tarafından taranır. Bunu unutmayın.

Robots.txt Nasıl Oluşturulur

WordPress’te robots.txt dosyası oluşturma işlemini manuel olarak yapabileceğiniz gibi eklenti aracılığıyla da yapabilirsiniz.

WordPress Robots.txt Oluşturma

Rank Math SEO ile Robots.txt Oluşturma

Rank Math SEO eklentisi yazılarınızda ve sayfalarınızda iç seo optimizasyonunu sağlamanıza yardımcı olur. Böylece daha başarılı bir SEO çalışması yapabilirsiniz. Aynı durum robots.txt dosyası oluşturmak için de geçerlidir. Eklentiyi yükleyip aktif hale getirdikten sonra, admin paneli Rank Math SEO menüsünden Genel Ayarlar’a tıklayın. Düzenle Robots.txt butonuna tıklayarak Robots.txt düzenleme ekranına ulaşın. Eğer yazma/okuma izinleriniz doğruysa sanal robots.txt dosyanızı buradan düzenleyebilirsiniz. Eğer halihazırda bir robots.txt dosyanız varsa bu kısım geçerli olmayacaktır.

FTP ile Robots.txt Oluşturma

Notepad’ı açın ve içeriğine robots.txt kurallarınızı yazın. Eğer ne yazacağınızı bilmiyorsanız yazımızın ilerleyen bölümünde belirttiğimiz önerilen robots.txt kurallarını kullanabilirsiniz. Dosyayı .txt uzantısında kaydedin ve FTP bağlantısıyla sitenizin kök dizine (çoğunlukla public_html’dir) bağlanıp dosyayı yükleyin.

Dosya Yöneticisi ile Robots.txt Oluşturma

Kullandığınız hosting kontrol paneline (cpanel, plesk, directadmin, cwp vb.) giriş yaptıktan sonra dosya yöneticisini açın. Dosya yöneticisinden sitenizin kök dizine (çoğunlukla public_html’dir) ulaşın. Yeni dosya oluşturma menüsünden yeni dosya oluştur’a tıklayın ve dosya uzantısını .txt olarak ayarlayın. Robots.txt kurallarını yazın ve dosyayı kaydedin.

Robots.txt Editor Eklentisi ile Robots.txt Oluşturma

Robots.txt editor eklentisi dosya yöneticisi veya ftp erişimi olmadan kolaylıkla robots.txt dosyasını oluşturabilmenizi ve düzenleyebilmenizi sağlar.

Eklenti sayfası -> https://wordpress.org/plugins/robots-txt-editor/

Eklentiyi indirdikten sonra aktifleştirin. Ardından WordPress sol yan barı kullanarak Ayarlar’ın altındaki Okuma sayfasına erişin. Sayfanın en altındaki robots.txt başlıklı kutucuğa robots.txt kurallarınızı yazın ve kaydedin.

WordPress Robots.txt Kuralları

WordPress için önerilen robots.txt kuralları aşağıdaki gibidir. domain.com yerine kendi site adresinizi, sitemap.xml yerine kullandığınız sitemap.xml urlsini yazmanız gerekli. Önemli bir ipucu vermek isteriz: Eğer Rank Math SEO veya Yoast SEO eklentisini kullanıyorsanız sitemap’ınız, sitemap.xml olarak değil sitemap_index.xml olarak oluşturulur. Yazdığınız urlyi tarayıcıya girerek kontrol etmeyi unutmayın.

				
					User-agent: * 
Disallow: /wp-admin/ 
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.domain.com/sitemap.xml

Robots.txt Oluşturmak İçin Ücretsiz Destek Alın

Robots.txt dosyasını oluşturamadıysanız veya robots.txt dosyası hakkında ücretsiz destek almak istiyorsanız sorununuzu detaylı bir açıklamayla yorumlar kısmında belirtin. 24 saat içerisinde yorumunuzu yanıtlayarak ücretsiz destek sunacağız.

Robots.txt Oluşturmak İçin Profesyonel Destek Alın

Robots.txt dosyasını oluşturamadıysanız veya robots.txt dosyası hakkında profesyonel destek almak istiyorsanız isminizi ve telefon numaranızı aşağıdaki forma girin. En kısa sürede size ulaşalım.