Results 1 to 4 of 4

URLs restricted by robots.txt= 27187 :(

This is a discussion on URLs restricted by robots.txt= 27187 :( within the Türkçe forums, part of the General Discussion category; merhabalar... vbseo sitamap kullanıyorum. uzun zamandır URLs restricted by robots.txt kısmındaki değerler artmaya başladı. robots.txt yi burda verdiğiniz örneklerdeki gibi ...

  1. #1
    Junior Member Bydigi's Avatar
    Real Name
    bayar
    Join Date
    Aug 2006
    Posts
    13
    Liked
    0 times

    URLs restricted by robots.txt= 27187 :(

    merhabalar... vbseo sitamap kullanıyorum. uzun zamandır URLs restricted by robots.txt kısmındaki değerler artmaya başladı. robots.txt yi burda verdiğiniz örneklerdeki gibi düzenledim. google map kısmınada aynı değerleri yazdım... altta google sayfasından çektiğim resimlerde var ordan daha detaylı anlaşılıyor.
    ama URLs restricted by robots.txt= 27187 gibi bir değerin içinde neler var bakıyorum robot a yazdığım dosya ile ilgili linkler var ve tıklayıncada sitede böyle bişi yokmuş gibi yanıt alıyorum yani geçersiz link diyor... http://www.siteadi.com/announcement.php?f=101 tüm geçersiz dediği linkler bu tarz. şimdi robot dosyamı aynen buraya yazıyorum alttada çektiğim resimler var.
    googlenin hemen hemen her kuralına uyuyorum, anahtar kelimler metataglar olması gerektiği uzunlukta, sitem üyeliksiz tüm ziyaretçilere açık... sorun ne bana anlatabilirmisiniz...
    ----------------------
    #ALL BOTS
    User-agent: *
    Disallow: /admincp/
    Disallow: /ajax.php
    Disallow: /clientscript/
    Disallow: /cpstyles/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /install/
    Disallow: /modcp/
    Disallow: /subscriptions/
    Disallow: /customavatars/
    Disallow: /customprofilepics/
    Disallow: /rapid/
    Disallow: /dos73ya/
    Disallow: /announcement.php
    Disallow: /attachment.php
    Disallow: /calendar.php
    Disallow: /cron.php
    Disallow: /editpost.php
    Disallow: /faq.php
    Disallow: /image.php
    Disallow: /inlinemod.php
    Disallow: /joinrequests.php
    Disallow: /login.php
    Disallow: /memberlist.php
    Disallow: /misc.php
    Disallow: /moderator.php
    Disallow: /newattachment.php
    Disallow: /newreply.php
    Disallow: /newthread.php
    Disallow: /online.php
    Disallow: /payment_gateway.php
    Disallow: /payments.php
    Disallow: /poll.php
    Disallow: /postings.php
    Disallow: /private.php
    Disallow: /profile.php
    Disallow: /register.php
    Disallow: /report.php
    Disallow: /reputation.php
    Disallow: /search.php
    Disallow: /sendmessage.php
    Disallow: /showgroups.php
    Disallow: /subscription.php
    Disallow: /usercp.php
    Disallow: /threadrate.php
    Disallow: /usernote.php
    ------------------

    Saygılar....
    Attached Thumbnails Attached Thumbnails img1.jpg   img2.jpg  

  2. #2
    vBSEO.com Webmaster Mert Gökçeimam's Avatar
    Real Name
    Lizard King
    Join Date
    Oct 2005
    Location
    Istanbul, Turkey, Turkey
    Posts
    22,367
    Liked
    542 times
    Blog Entries
    4
    Site ayarlarınızı kontrol ediniz . Geçersiz link veriyorsa vBulletin ayarlarından birini yanlış yapmışsınızdır.
    Mert Gökçeimam / Crawlability Inc.

    vBSEO 3.6.0 Alpha Önizlemesi - Including Like Tree
    Unveiling the NEW vBSEO Sitemap Generator 3.0 - available NOW for vBSEO Customers!


    Twitter:@Depkac
    Personal Blog : Mert Gökçeimam

  3. #3
    Junior Member Bydigi's Avatar
    Real Name
    bayar
    Join Date
    Aug 2006
    Posts
    13
    Liked
    0 times
    Quote Originally Posted by Lizard King View Post
    Site ayarlarınızı kontrol ediniz . Geçersiz link veriyorsa vBulletin ayarlarından birini yanlış yapmışsınızdır.
    işte anlamadığımda o zaten böyle bir link sitemde yok ve denediğim hiçbir vbulletindede böyle linkler yok. birkaç sitede denedim onlardada geçersiz link verdi... yani olmayan bir linki vbseo_sitemap nasıl indexliyor . peki şöyle yapsak ben bu announcement.php?f=101 ve bunun gibi hiçbir linki googlenin indexlemesinine izin vermesem yani robots.txt ye ne yazarsam artık bu linkleri göz ardı eder?

  4. #4
    Junior Member Bydigi's Avatar
    Real Name
    bayar
    Join Date
    Aug 2006
    Posts
    13
    Liked
    0 times
    2 gündür bi cevap alamadığım için flood yapmak zorunda kaldım özür dilerim... sorumu yineliyorum yardımcı olursanız memnun olurum...

    " peki şöyle yapsak ben bu /announcement.php?f=101 ve bunun gibi hiçbir linki googlenin indexlemesinine izin vermesem yani robots.txt ye ne yazarsam artık bu linkleri göz ardı eder? "

Similar Threads

  1. Sitemap generating a lot more urls
    By poprulz in forum Troubleshooting
    Replies: 13
    Last Post: 02-28-2007, 05:15 PM
  2. Google Sitemap-Listing of old url's option-from 1.7
    By T2DMan in forum Member Articles
    Replies: 0
    Last Post: 04-02-2006, 09:46 AM
  3. what to do with old urls?
    By Jonathan in forum General Discussion
    Replies: 6
    Last Post: 08-04-2005, 04:57 PM

Posting Permissions

  • You may not post new threads
  • You may not post replies
  • You may not post attachments
  • You may not edit your posts
  •