robots.txt dosyamı açtığımda şöyle yazıyor: User-agent: * Disallow: / . Bu ne demek? Tüm robotları engelle mi demek? Eğer öyleyse, sitem Googleda görünmüyor olabilir!
Doğru robots.txt yazılışı nedir? Hangi dosyalara 'disallow' edip hangileri açık bırakmam gerekir?
Robot.txt hatalı yazarsam Search Consoleda hata görülür mü, yoksa sessizce siteyi gizler?
robots.txt açıklaması: User-agent: * = tüm robotlara, Disallow: / = '/' (tüm site) disallow. Yani TÜM robotları engelle — sitem Google, Bing, herkesten gizlenmiş demektir. KALDIR bu dosyayı!
Doğru robots.txt: Boş bırak (hiçbir şey yaşma) veya şu yaz: User-agent: * Disallow: /admin/ Disallow: /private/ Allow: / Sitemap: https://example.com/sitemap.xml
Bu: admin ve private klasörlerini engelle, diğer tümünü izin ver, sitemap'i Google'a söyle.
Search Console bildirimi: Eğer robots.txt site'i completely disallow'uyorsa, Search Console'da coverage'da 'Excluded by robots.txt' gösterir.
düzeltme: rakamı yanlış hatırlamışım, biraz daha düşüktü.
robots.txt örnekleri: 1) WordPress install dizini disallow: Disallow: /wp-admin/, Disallow: /wp-includes/. 2) Private dosyalar: Disallow: /private/. açıkçası 3) Test sayfası: Disallow: /test.html. 4) Tüm botları blok: Disallow: / (isterseniz Googlebot'u izin verin: Allow: / Googlebot'a specific).
bizim sitede geçen sene developer hata yaptı robots.txtte tüm siteeyi disalllow etmişti. yani 1 ay hiç bir Google traffici gelmedi, site neredeyse ölü kalmıştı bir de robots.txtten disallow kaldırdık, 2 hafta snra Google yeniden crawlı başladı trafik geri geldi
ders: robots.txti konrtol et, çoğu zaan tüm site disallowu yalnışlıkla yapılan errordır
robots.txt dosaysi sitesi kokunde (example.com/robots.txt) olmasi lazim sona dosya eksikse botlar sorun yasamaz var ama hataliysa o sorun. su yazdigin 'Disallow: /' kaldir hemen tum sitei gizliyor
robots.txt: Disallow: / yazarsan Googlae 'bok yolla' diyorsun. google: tamam gidiş. ya bursa çıkmazdan 3 ay, trafik sıfır pişmanlık. doğru yaz veya bırak.
robots.txt status kodları: 200 = sitesi. 404 = robots.txt yok (sorun dgl, default izin). 403 = access denied. User-agent'ler: * = tüm botlar, Googlebot = Google robots, Bingbot = Bing.
katılıyorum hatta altını çizmek isterim sonra robots txt hatası tarafında yapılan hata genele geri dönülebilir ama pahalı.
sorunuz olursa yazın, elimden gldiğince cevaplarım.
Bu cevabı okuyunca rahatladım, demek sadece bende değilmiş. Herkesin yaptığı şey, doğru olduğu anlamına gelmiyor.
Umarım işinize yarar.
Doki · SEO danışmanlığı · 2026
robots txt hatasi knousunda hic tecrubem yok o yuzden soruyorum.. ve acele karar, alti ay snra duzzeltilen karar oluyor
urmim isiinze yarar
Doki · Kurumsal web sitesi · 2023
Küçük bir işletmeyim benim tarafımdan anlatayım. yani sıralama aynı kalıp tıklama düşüyorsa sorun sayfanızda değil, sonuç görünümünde.
Yanlışım varsa düzeltin.
robots txt hatasi konusunda hic tecrubem yok, o yuzden soruyorum... valla karari verrken elinizde hangi veri var, once ona bakin.
Doki · Log yönetimi kurulumu · 2025
Evet, robots txt hatası konusunda durum aynen böyle. Kayıt tutmayan hiçbi süreç düzelmiyor, çünkü neyi düzelteceğinizi bilmiyorsunuz.
Kolay gelsin.
Tartışma dağıldı, toparlayayım. Sormaktan çekinmeyin, sormayan hep daha pahalıya ödüyor.
Tecrübeyle sabit.
Uzun süre bu işle uğraştım. Karar verirken en kötü senaryoyu da yazın, sadece iyisini değil.
Sonucu buraya yazarsanız başkalarına da faydası olur.