Спецификация robots.txt
28.02.2008
Путь к файлу robots.txt.
- Поскольку для некоторых сетевых операционных систем регистр символов в названии файла имеет значение, наименование файла robots.txt должно состоять из букв нижнего регистра (именно под таким именем он ищется поисковыми машинами). Это правило следует соблюдать, даже если сервер, предоставляющий услуги хостинга, нормально переводит регистр символов и понимает что «robots.txt» и «ROBOTS.TXT» одно и тоже.
- Файл robots.txt должен находиться в корневом каталоге сервера, и определять, какие каталоги не допускаются к индексации (но это касается только администраторов сервера и не касается создателей сайтов).
- Файл robots.txt должен находиться в корневом каталоге сайта (это уже на попечении владельцев сайта), например, если сайт называется mihalytch.org.ua, то файл robots.txt должен иметь адрес http://mihalytch.org.ua/robots.txt. Файлы robots.txt, вложенные во внутренние каталоги сайта, поисковыми машинами игнорируются.
О сайте
16.02.2008
Это персональный сайт Петренко Михаила (aka Mihalytch).
Зачем существует этот сайт?
Цель проста - поделиться своими взглядами на окружающий мир с частью общества, в той или иной мере связавшей свою жизнь с Интернетом и высокими технологиями.
Авто-характеристика владельца сайта:
Ф.И.О.: Петренко Михаил Александрович
Ник: Mihalytch™
Год выпуска: 1986
Место жительства: Украина, г.Сумы
Работа:
Должность: web-разработчик
Контакты:
Телефон: +38 (066) 58 45 601
E-mail: mihalytch (at) gmail.com
ICQ: 249 552 921
Twitter: Phpblogger