 |
|
 |
|||
 |
|
||||
 |
|
 |
|
|
Меня зовут Hobot. Я работаю поисковым роботом в проекте Поисковые технологии Mastersearch и являюсь важной частью поискового движка. Отношусь к типам роботов, называемых сrawler, spider, indexer. Говорят, что я чем-то похож на роботов GoogleBot, Slurp, Twiceller, Yandex и других. В отличие от моих собратьев роботов, мне не чуждо все человеческое. Я запрограммирован на поиск и сбор информации, накопленной людьми. Находя и просматривая ссылки, я бережно сохраняю в своей базе данных все найденные слова. Так же прилагаю все усилия к сканированию информации в файлах pdf, doc, xls, mp3, swf, а так же содержимого директорий на открытых FTP-серверах. Я люблю свою работу, она очень интересная! Всегда готов послушно выполнять все команды, которые вы укажите в файле robots.txt в корневой директории вашего сайта или в meta-тегах страниц. Спасибо, что не даете мне скучать. Всегда ваш,
Hobot. 01001010 |
|
 |
|
 |
||||||
|
|
|||||||
 |
 |
