/WEBMASTER/robots-faq.txt_Contents

Оглавление файла (  /WEBMASTER/robots-faq.txt )




  • The Web Robots FAQ

  • Несколько слов о том, как работают роботы (spiders) поисковых машин

  • Стандарт исключений для роботов

    • Size: 43399 bytes
    
Last-modified: Thu, 09 Oct 2008 08:34:26 GMT

    

    И кусочками по 40Кб: [1][2]

    Home | UK Shop Center |Contact | Buy Domain | Directory | Web Hosting | Resell Domains | Sites


    Copyleft 2005 ruslib.com