WordPress Robots txt için önemli rehber

Bir işletme sahibiyseniz ve müşterilerinizle iletişim kurmak için bir WordPress sitesi kullanıyorsanız, arama motorlarında tanıtmanız çok önemlidir. Arama motoru optimizasyonu birçok önemli adım içerir. Bunlardan biri iyi bir robots.txt dosyası oluşturmaktır. Bu dosyaya ne için ihtiyacınız var? Rol nedir? WordPress sitenizdeki konum nerede? Bunu yapmanın yolları nelerdir?
İçindekiler tablosu
Robots.txt dosyası nedir?
WordPress için robots.txt dosyası nerede?
WordPress Robot TXT dosyaları için bazı temel gereksinimler
Robots Tür.
Robots.txt ne zaman kullanmalısınız?
Robots.txt dosya yapısı
Robots.txt dosyasında ortak hata
WordPress siteniz için robots.txt dosyası nasıl oluşturulur
Yoast SEO eklentisini kullanarak
SEO’yu tek bir paket eklentisinde kullanma
FTP üzerinden WordPress için robots.txt dosyalarını oluşturun ve yükleyin
WordPress siteniz için robots.txt dosyası nasıl test edilir
Çözüm
Daha yakın inceleyelim. Robots.txt dosyası nedir? Yeni bir web sitesi oluşturduğunuzda, Google, Bing gibi arama motorları vb. Taraf etmek için özel botlar kullanın. Bundan sonra, tüm sayfalarının ayrıntılı bir haritasını yaptı. Bu, birisi ilgili anahtar kelimeleri kullanarak bir arama isteği girdiğinde hangi sayfaların görüntüleneceğini tespit etmelerine yardımcı olur. Sorun şu ki, modern web siteleri sayfaların yanı sıra başka birçok unsur içeriyor. Örneğin, WordPress genellikle kendi dizininize sahip eklentileri yüklemenize olanak tanır. Bu klasör, Site için büyük bir güvenlik riski olabilecek hassas içerik içerdiğinden, arama sonuçları sayfasında görüntülemek için iyi bir fikir değil.
Hangi klasörü taranacağını yapılandırmak için, çoğu web sitesi sahibi, arama motoru botu için bir dizi yönerge sağlayan robots.txt wordPress dosyalarını kullanır. Hangi klasörlerin taranabileceğini ve hangi klasörlerin arama botundan gizlenmesi gerektiğini yapılandırabilirsiniz. Bu dosya istediğiniz kadar ayrıntılı ve yapılması çok kolay olabilir. Uygulamada, Robots.txt dosyaları oluşturmasanız bile arama motorları sitenizi tarar. Ancak, onu yaratmamak çok irrasyonel bir adımdır. Bu dosya olmadan, arama robotlarının tüm site içeriğinizi dizine eklemesine izin verirsiniz ve sitenizin tüm bölümlerini, halka açık erişimden gizlemek istediğiniz şeyleri bile görüntüleyebileceğinize karar verirler. Madeni para daha önemlidir, txt wordPress robotları dosyaları olmadan, arama Bot web sitenize çok sık erişecektir. Bunun performansı üzerinde kötü bir etkisi olacaktır. Sitenizin varlığı hala küçük olsa da, sayfa yükleme hızı her zaman öncelik ve en üst düzeyde olması gereken bir şeydir. Sonuçta, insanların web sitelerinin yavaş yüklenmesi dışında sevmediği birkaç şey var. WordPress için robots.txt dosyası nerede? Bir WordPress web sitesi oluşturduğunuzda, sunucu otomatik olarak bir robots.txt dosyası oluşturur ve kök dizininize sunucuya yerleştirir. Örneğin, web sitesi adresiniz örnek.com ise, örnekler.com/robots.txt adresinde bulabilirsiniz. Herhangi bir metin düzenleyicisiyle açabilir ve düzenleyebilirsiniz. Bu, aşağıdakiler gibi çizgiler içerecektir:
Kullanıcı aracısı: *
Yasak: /wp-admin /
Yasak: /WP-erişimi /
Bu, en basit temel robots.txt dosyasının bir örneğidir. İnsan diline tercüme, kullanıcı ajasından sonra sağ taraf: hangi robotun kural olduğunu belirtin. Bertist belirtileri, kuralın evrensel olduğu ve tüm botlar için geçerli olduğu anlamına gelir. Bu durumda, dosya botlara WP-Admin ve WP-Incomudes dizini tarayamayacaklarını söyler. Bu kuralın anlamı, bu dizinin halka açık erişimden korunmayı gerektiren birçok dosya içermesidir. Tabii ki, dosyanıza daha fazla kural ekleyebilirsiniz. Bunu yapmadan önce, bunun sanal bir dosya olduğunu anlamanız gerekir. Genellikle, robots.txt wordPress dosyası, genellikle public_html, www veya site adınız olarak adlandırılan kök dizininde bulunur: Bu dosyaya erişmek ve sunucuya yeni bir sürüm yüklemek için Filezilla gibi FTP yöneticisini kullanabilirsiniz. Tek ihtiyacınız olan FTP bağlantısı için giriş ve şifreyi bilmek. Daha fazla bilgi edinmek için teknik destekle iletişime geçebilirsiniz. WordPress Robot TXT dosyaları için bazı temel gereksinimler
Web sitesinin web sitesinin köşesinde mevcut olmalıdır. Adres örnek.com/robots.txt gibi görünecektir.

Dosya boyutu 32 kilobayttan geçmemelidir.
Metin yalnızca Latin sembolleri içerebilir. Alan adınız diğer sembolleri kullanıyorsa, bunları Latin sembolüne doğru bir şekilde yazmak için özel yazılım kullanın.
Unutma:
TXT talimatları tavsiye.
TXT ayarları diğer siteleri etkilemez (robots.txt adresinde, yalnızca geçerli sitedeki sayfaları veya dosyaları kapatabilirsiniz).
TXT komutu büyük/küçük harfe duyarlıdır.
Robots Tür.
Bazılarına web sitesinin belirli bölümlerine erişin.
Tam Tarama Yasağı. Robots.txt kullanmalısınız mı? TXT WordPress Robots dosyasını kullanarak, sayfayı dizine eklenmek istemeyen bir arama robotundan kapatabiliriz:
kişisel kullanıcı bilgilerine sahip sayfalar;
ekrandaki ekran arayüzünü etkilemeyen dokümantasyon ve hizmet bilgileri içeren sayfalar;
Belirli dosya türleri, örneğin PDF dosyaları;
WordPress Gösterge Tablosu, vb.
Robots.txt web yöneticisi dosya yapısı herhangi bir metin düzenleyicisini kullanarak bir WordPress txt robotlar dosyası oluşturabilir. Sözdizimi üç ana öğe içerir: 1 Kullanıcı Kullanıcısı: [Arama Robot Adı] 2 Yasak: [Erişimi Kapatmak İstediğiniz Yol] 3 İzin Ver: [Erişimi açmak istediğiniz yol] Ayrıca, dosya ayrıca iki tane içerebilir Ek unsurlar: 1 Site haritası: [Site haritası adresi] Ardından, robots.txt dosyasını kök kök web sitesi dizinine yerleştirin. Web siteniz ana etki alanını kullanıyorsa, dosya /public_html /veya /www /klasöründe olacaktır. Hosting sağlayıcıya bağlıdır. Bazı durumlarda, bu biraz farklı olabilir, ancak çoğu şirket bahsedilen yapıyı kullanır. Etki alanı ekse, klasörün adı web sitesinin adını içerecek ve /xample.com/ gibi görünüyor.
Dosyaları uygun klasöre yerleştirmek için bir FTP istemcisi (örneğin FileZilla) ve bir barındırma paketi satın aldığınızda bir sağlayıcı verilen FTP’ye erişmeniz gerekir. Kullanıcı Aracıları Tüm talimatlar robot tarafından bir bütün olarak anlaşılır ve yalnızca ilk sırada kayıtlı arama robotları için geçerlidir. Toplamda yaklaşık 300 farklı arama robotu vardır. Aynı kuralları tüm arama robotlarına, “kullanıcı ajanı” sütununda, sadece yıldız işareti (*) vererek uygulamak istiyorsanız. Bu karakter herhangi bir karakterin sırası anlamına gelir. Sonuç, aşağıdakilere benzeyecektir: 1 Aracı Kullanımı: *Bu komutu, Sitenin hangi bölümünün taranmaması gereken arama robotuna önerilerde bulunmasını yasaklayın. Robots.txt ise izin verilmiyorsanız: /, tüm web sitesi içeriğini taramadan kapatacaktır. Belirli bir klasörü taramadan kapatmanız gerekiyorsa, Liste: /klasör kullanın. Aynı şekilde, belirli bir URL, dosya veya dosya biçimini gizleyebilirsiniz. Örneğin, sitedeki tüm PDF dosyalarını dizine eklemeyecek şekilde kapatmanız gerekiyorsa, robotlar hakkında aşağıdaki talimatları yazmanız gerekir. .pdf uzantılı dosyalar.
Google’dan aşağıdaki referans materyalinde, robots.txt dosyasındaki URL’yi engellemek için bir komut listesi bulacaksınız. Bu komuta izin vermek, herhangi bir dosyayı, klasörü veya sayfayı taramanıza olanak tanır. Örneğin, yalnızca kelimeler /diğer içerikleri içeren ve diğer tüm içeriği kapatan robotlar tarafından tarama için açılması gerekir. Bu durumda, aşağıdaki kombinasyonu kullanın:
1 Agent-User: * 2 İzin Ver: / Diğerleri 3 Yasak: / Kurallar URL önekine (en kısadan en uzun olana) göre sıralanmaya izin verir ve izin vermez ve sırayla uygulanır.Örnekte, aşağıdaki talimat dizisi olacaktır: İlk olarak, robot disonow: /ve sonra izin verecek: /Diğer, yani klasör /diğer dizinlenecektir.
Robots.txt dosyasında yaygın hata yanlış sıradır. Net bir mantıksal talimat dizisi olmalıdır. İlk kullanıcı aracısı, daha sonra izin verin ve yasaklayın. Tüm sitelere izin verirseniz, ancak ayrı parçalara veya dosyalara izin vermezseniz, önce izin verin ve daha sonra izin vermeyin. Tüm parçaları yasaklarsanız, ancak birkaç parça açmak istiyorsanız, izin verilmez izin vermekten daha yüksek konumlandırılır. Bazı klasörler veya dizinler, talimatlara izin verir. Robots.txt dosyasına bazı farklı izin ver ve izin vermemek istiyorsanız, yeni satırların her birini girin: yasak: /klasör yasaklar: /admin dosya adı false. Adı sadece küçük bir Latin harfinden oluşan “robots.txt” olmalıdır. Kullanıcı aracısının kuralları boştur. Tüm robotlar için genel talimatlar ayarlamak istiyorsanız, bir yıldız işareti verin. Sözdizimi hatası. Bir talimattaki ek sözdizimi öğelerinden birini belirlemekte yanlışsanız, robot yanlış yorumlayabilir. Bir robots.txt dosyası oluşturmaya karar verdiğiniz anda robots.txt dosyası nasıl oluşturulur. Robots.txt’i bir eklenti kullanarak WordPress’te düzenleyebilir veya manuel olarak yapabilirsiniz. Bu bölümde, bu görev için en popüler iki eklentiyi nasıl kullanacağınızı öğreteceğiz ve dosyaların nasıl oluşturulacağını ve indirileceğini tartışacağız. Hadi gidelim! Yoast SEO eklentisini kullanarak
Yoast SEO eklentisi tanıtılmak için çok popüler. Bu, WordPress için en ünlü SEO eklentisidir ve anahtar kelimeleri daha iyi bir şekilde kullanmak için yayınları ve sayfaları artırmanıza olanak tanır. Buna ek olarak, bu da içeriğinizin okunabilirliğini değerlendirecektir ve bu potansiyel kitleyi artıracaktır. Birçok geliştirici, sadeliği ve konforu nedeniyle Yoast SEO eklentisine hayran kalır. Temel özelliklerden biri, web siteniz için bir robots.txt dosyası oluşturmaktır. Eklentiyi yükledikten ve etkinleştirdikten sonra, eklenti konsolundaki SEO sekmesi – araçlarını açın ve Dosya Düzenleyicisi parametresini bulun: Bu bağlantıyı tıklayarak, yönetici konsolundan ayrılmadan .htaccess dosyasını düzenleyebilirsiniz. Robots.txt dosyası için de bir düğme var:
Sekmedeki düğmeyi tıkladıktan sonra, eklenti, robots.txt dosyasını doğrudan düzenleyebileceğiniz yeni bir düzenleyici görüntüleyecektir. Yoast SEO’nun mevcut robots.txt sanal dosya kurallarını bir kenara bırakan varsayılan kuralları ayarladığını lütfen unutmayın. Kuralları sildikten veya ekledikten sonra, uygulamak için robots.txt üzerindeki Değiştir düğmesini tıklayın:

Sadece bu! Şimdi aynı görevi yapmasına izin veren diğer popüler eklentilere bakalım. SEO’yu tek bir paket eklentisinde kullanma
Hepsi bir SEO Pack eklentileri, arama motoru optimizasyonu için diğer harika WordPress eklentileridir. Bu, Yoast SEO eklenti özelliklerinin çoğunu içerir, ancak bazı web sitesi sahipleri daha hafif oldukları için daha çok beğenir. Robots.txt dosyalarını oluşturmaya gelince, bu eklentide yapmak da kolaydır. Eklentiyi yükledikten sonra, bir SEO’da hepsini açın – Modülü konsoldaki yönetin. İçeride, sağ altta büyük mavi etkinleştir düğmesine sahip Robots.txt seçeneğini bulacaksınız. Üstüne tıkla:

Şimdi, bir SEO menüsündeki tümü yeni bir robots.txt sekmesi bulabilirsiniz. Dosyanıza yeni kurallar eklemek için ayarları görmek için tıklayın. Ardından, değişiklikleri kaydedin veya her şeyi silin: Lütfen istediğiniz her şeyi girmenize izin veren Yoast SEO’nun aksine, Robots.txt dosyasını bu eklenti ile doğrudan değiştiremezsiniz. Dosya içeriği etkin olmayacak. Sadece gri bir arka plan göreceksiniz.

Ancak, yeni kurallar eklemek çok kolay olduğundan, bu gerçek sizi üzmemelidir. Daha da önemlisi, SEO’daki tek bir paket ayrıca “kötü” botları engellemenize yardımcı olan özellikler de içerir. Tüm SEO sekmesinde bulabilirsiniz:

Bu yöntemi seçerseniz yapmanız gereken tek şey budur. Şimdi sadece bu görev için ek eklentiler yüklemek istemiyorsanız, bir txt wordpress robots dosyasını manuel olarak nasıl oluşturacağınızdan bahsedelim. Robots.txt dosyaları için robots.txt dosyaları oluşturma ve yükleme Robots.txt dosyalarını manuel olarak oluşturmak için favori düzenleyicinizi (Notepad veya Textedit gibi) açın ve gerekli tüm komutları ekleyin ve yerel sürücüye TXT Extension ile dosyaları kaydedin. Bu gerçekten birkaç saniye sürecektir, bu nedenle bir eklenti kullanmadan WordPress için robots.txt yapmak isteyebilirsiniz. İşte dosyanın hızlı bir örneği:

Kendi dosyanızı oluşturduktan sonra, sitenize FTP üzerinden bağlanmalı ve dosyayı kök klasörüne girmelisiniz. Çoğu durumda, bu bir public_html veya www dizinidir. Yerel FTP yöneticisindeki dosyadaki doğru fare düğmesini tıklayarak veya yalnızca dosyayı sürükleyip bırakarak dosyaları yükleyebilirsiniz:

Ayrıca birkaç saniye sürer. Gördüğünüz gibi, bu yöntem eklentileri kullanmaktan daha zor değildir. Robots.txt Dosyaları Nasıl Test Edilir WordPress Siteniz İçin Şimdi Robots.txt dosyanızı Google Arama Konsolu’ndaki hatalar için kontrol etmenin zamanı geldi. Arama konsolu, içeriğinizin arama sonuçları sayfasında nasıl göründüğünü izlemenize yardımcı olmak için tasarlanmış Google araçlarından biridir. Bu araçlardan biri robots.txt’i kontrol eder, konsolunuzdaki kontrol aracında robots.txt dosyasını açarak kullanabilirsiniz: burada robots.txt wordpress dosyanız için kodu ekleyebileceğiniz düzenleyici alanını bulacaksınız. Gönder’i tıklayın. Google arama konsolu, sitenizden yeni bir kod kullanmak veya dosyaları indirmek isteyip istemediğinizi soracaktır. Kodu manuel olarak yayınlamak için güncelleme için Google Sorgulama seçeneğini seçin:

Şimdi platform dosyanızı hatalar için kontrol edecek. Bir hata bulursanız, hemen size söyleyecektir. SONUÇ ROBOTS TXT WordPress dosyası, arama motoru botları için web sitesinin görünürlüğünü artırmak için çok etkili bir araçtır. Çok önemli olmak, yapmak çok zor değil. İdeal bir dosya var mı? Bunu söyleyemeyiz. Bu, web sitenizin içeriğine ve elde etmek istediğiniz sonuçlara bağlı olarak farklı olacaktır.

admin

Bir Cevap Yazın

E-posta hesabınız yayımlanmayacak. Gerekli alanlar * ile işaretlenmişlerdir