robots.txt sorunu

daha önceden belirtmiştim google robots.txt dosyama ulaşamadığını beliriyor sitemaplarımı indirmiyor ,belirttiği hatada isterseniz robots,txt dosyasını kaldırın diyor robots.txt dosyasını kaldırsam sitemaplara rahat ulaşabilirmi acaba...

Robots txt dosyanızın içeriği nedir.

buyrun mert bey

PHP Code:

#ALL BOTS
User-agent: *
Disallow: /admincp/
Disallow: /ajax.php
Disallow: /clientscript/
Disallow: /cpstyles/
Disallow: /images/
Disallow: /includes/
Disallow: /install/
Disallow: /modcp/
Disallow: /subscriptions/
Disallow: /customavatars/
Disallow: /customprofilepics/
Disallow: /announcement.php
Disallow: /attachment.php
Disallow: /calendar.php
Disallow: /cron.php
Disallow: /editpost.php
Disallow: /faq.php
Disallow: /frm_attach
Disallow: /image.php
Disallow: /inlinemod.php
Disallow: /joinrequests.php
Disallow: /login.php
Disallow: /memberlist.php
Disallow: /misc.php
Disallow: /moderator.php
Disallow: /newattachment.php
Disallow: /newreply.php
Disallow: /newthread.php
Disallow: /online.php
Disallow: /payment_gateway.php
Disallow: /payments.php
Disallow: /poll.php
Disallow: /postings.php
Disallow: /private.php
Disallow: /profile.php
Disallow: /register.php
Disallow: /report.php
Disallow: /reputation.php
Disallow: /search.php
Disallow: /sendmessage.php
Disallow: /showgroups.php
Disallow: /showpost.php
Disallow: /subscription.php
Disallow: /usercp.php
Disallow: /threadrate.php
Disallow: /usernote.php

Sitemap: http://www.frmsonsuz.org/sitemap_index.xml.gz 


Hem sitemap dosyanız hem robots.txt dosyanız bende sorunsuz çalışıyor :

Code:

<sitemapindex xsi:schemaLocation="             http://www.sitemaps.org/schemas/sitemap/0.9             http://www.sitemaps.org/schemas/sitemap/09/siteindex.xsd">
−
<sitemap>
<loc>http://www.frmsonsuz.org/sitemap_1.xml.gz</loc>
<lastmod>2008-10-28T10:16:25+00:00</lastmod>
</sitemap>
−
<sitemap>
<loc>http://www.frmsonsuz.org/sitemap_2.xml.gz</loc>
<lastmod>2008-10-28T10:16:25+00:00</lastmod>
</sitemap>
</sitemapindex>

Google ulaşmakta sorun yaşıyorsa hostunuz ile temasa geçmelisiniz.

evet mert bey daha önce bilginize başvurmuştum hostum bizde sorun yok diye ısrar ediyor,bende robots.txt dosyasını kaldırsam diyorum olurmu acaba...

Bizde sorun yok diyen hostlara inanmamanızı şiddetle tavsiye ederim , heleki host Türkiye'deyse.

evet haklısınız peki robots.txt dosyasını kaldırmamı önerirmisiniz sitemaplara ulaşması için

Robots.txt dosyanızda en ufak sorun yok ve ulaşımı engelleyecek birşeyde yok.

Originally Posted by Eyewear

evet haklısınız peki robots.txt dosyasını kaldırmamı önerirmisiniz sitemaplara ulaşması için

robots.txt önemlidir neden kaldırasınız ki eğer ulaşmada bir sorun varsa host yada sunucu ayarlarıyla alakalı bir durum söz konusudur

Yada firewall tarafından bir engellenme bile söz konusu olabilir.

Birçok yerli yabancı shared hostun google ve yahoo botlarını blokladığına dair raporlar var. Bunu kontrol etmenizi tavsiye ederim.

buna kendim bakabilirmiyim mert bey hostuma sorsam bizde sorun yok der...

Malesef yok