Robots.txt File Generator

Web tasarım, Web Programlama ve script dilleri konuları buraya
Cevapla
Kullanıcı avatarı
velociraptor
Yottabyte4
Yottabyte4
Mesajlar: 46562
Kayıt: 14 Mar 2006, 02:33
cinsiyet: Erkek
Teşekkür etti: 4701 kez
Teşekkür edildi: 3981 kez

Robots.txt File Generator

Mesaj gönderen velociraptor »

http://tools.seobook.com/robots-txt/generator/

User-agent: *
Disallow: /wp-
Disallow: /images/
Disallow: /cgi-bin/
Disallow: /any other folder to be excluded/


User-agent: * : Bütün spiderlara (Arama robotlarina) izin verdigimizi gösterir
Disallow: /wp- : wp ile baslayan Wordpress files larin hicbiri indexlenmez
Disallow: /cgi-bin/ : cgi-bin klasörü indexlenmez
Disallow: /Buraya indexlenmesini istemediginiz dosyayi yaziniz/

üstteki site ile bu dosyanizi olusturabilirsiniz

Örnek bir uygulama:

Kod: Tümünü seç

User-agent: *
Allow: /
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /search/*/feed
Disallow: /search/*/*
Disallow: /

User-agent: Mediapartners-Google
Allow: /

User-agent: Adsbot-Google
Allow: /

User-agent: Googlebot-Image
Allow: /

User-agent: Googlebot-Mobile
Allow: /

#User-agent: ia_archiver-web.archive.org
#Disallow: /

Sitemap: http://www.askapache.com/sitemap.xml
Velociraptor
Kullanıcı avatarı
root@localhost
Megabyte4
Megabyte4
Mesajlar: 1627
Kayıt: 31 Ağu 2022, 17:51
cinsiyet: Erkek
Teşekkür etti: 1814 kez
Teşekkür edildi: 1158 kez

Re: Robots.txt File Generator

Mesaj gönderen root@localhost »

Kod: Tümünü seç

User-agent: *
Disallow: /adm/
Disallow: /cache/
Disallow: /docs/
Disallow: /files/
Disallow: /images/
Disallow: /includes/
Disallow: /store/
Disallow: /common.php
Disallow: /config.php
Disallow: /cron.php
Disallow: /mcp.php
Disallow: /memberlist.php
Disallow: /ucp.php
Disallow: /viewonline.php
Disallow: /adminlog.php

User-agent: MJ12Bot
Disallow:/
merhaba , forumumum da robots.txt şu şekilde fakat mobil uyumluluk da bir sıkıntı var. bir kaç tema ile denedim. eskiden mobil uyumlu şekilde index yapıyordu şuan mobil uyumlu değil diyor.

son yaptıklarım ; google adsense eklemek. ve host firmasını ana sayfaya resmini koymak.

2-3 tema ile denedim , şu an prosilver teması ile deniyorum bakalım ne olacak.



Düzenleme : :-D

Kod: Tümünü seç

User-agent: Mediapartners-Google
Allow: /

User-agent: Adsbot-Google
Allow: /

User-agent: Googlebot-Image
Allow: /

User-agent: Googlebot-Mobile
Allow: /
şu kısmı kendime ekledim. birde galiba chrome 'un ön bellek te uyumsuz olduğu kalmış. başka tarayıcı ile açtım sorun düzelmiş. teşekkürler.

Resim

Düzenleme 2 : :-D

Ben dün örümcek(botlara) siteyi şu anki elegance teması üzerinden görmelerini işaretlemiştim. Acaba ondan mı oldu? Şuan normal ama, bakalım devam ederse tekrar o botları prosilver a çekeyim.
Kullanıcı avatarı
velociraptor
Yottabyte4
Yottabyte4
Mesajlar: 46562
Kayıt: 14 Mar 2006, 02:33
cinsiyet: Erkek
Teşekkür etti: 4701 kez
Teşekkür edildi: 3981 kez

Re: Robots.txt File Generator

Mesaj gönderen velociraptor »

Umarım sorun ortadan kalkar
Kullanıcı avatarı
root@localhost
Megabyte4
Megabyte4
Mesajlar: 1627
Kayıt: 31 Ağu 2022, 17:51
cinsiyet: Erkek
Teşekkür etti: 1814 kez
Teşekkür edildi: 1158 kez

Re: Robots.txt File Generator

Mesaj gönderen root@localhost »

google search console da hala mobil sorunlar var diyor.

lakin aramada mobil ile ilgili bir uyarı yok.

sanırım tema uyumsuz.

Fakat responsive tema ve ben gayet kullanıyorum, kullanışlı buluyorum.

Abi bir sorum , sen 3.3.8 e geçtin mi ? beğeni eklentisi ni kuracağım , ondan soruyorum.
2. Logo boyutun nedir ? bulamadım ne yaptıysam :))
Kullanıcı avatarı
velociraptor
Yottabyte4
Yottabyte4
Mesajlar: 46562
Kayıt: 14 Mar 2006, 02:33
cinsiyet: Erkek
Teşekkür etti: 4701 kez
Teşekkür edildi: 3981 kez

Re: Robots.txt File Generator

Mesaj gönderen velociraptor »

Günceleme çıkar çıkmaz kurarım, logo boyutu için aşağıdaki makaleye gözatabilirsin
https://www.sordum.net/13206/web-sayfa- ... gorunuyor/
Kullanıcı avatarı
root@localhost
Megabyte4
Megabyte4
Mesajlar: 1627
Kayıt: 31 Ağu 2022, 17:51
cinsiyet: Erkek
Teşekkür etti: 1814 kez
Teşekkür edildi: 1158 kez

Re: Robots.txt File Generator

Mesaj gönderen root@localhost »

eklenti o zaman sorunsuz çalışıyor . teşekkürler ağabey.
Cevapla