Новые бизнес идеи 2013 год
меню

MyCounter - счётчик и статистика

Как заработать в контакте

 

 

 

 

свой бизнес по вязанию изделий
 

 

Шаг 2. Ловушка для робота

 

Засветив наш ресурс в Интернете, перейдем к следующему шагу. Все поисковые роботы при заходе на сайт в первую очередь ищут файл robots.txt. Поэтому для начала в корне ресурса необходимо создать файл robots.txt и дать на него права доступа на чтение для всех. Затем нужно наполнить файл смысловым содержанием, понятным для поисковых роботов. Содержание файла должно быть следующего характера:

Ловушка для робота

Назначение команд и переменных в данном файле несут поисковому роботу следующую информацию: User-agent: * – доступ и индексирование на данном ресурсе разрешается всем поисковым роботам; Disallow – запрещается посещать и индексировать поисковым роботам папки. Это нужно для ограничения доступа к какой-то части ресурса. В данной конфигурации ограничивается доступ к папкам ресурса: cgi-bin, admin, files, images, styles и subs.

Читать дальше...

 

Copyright © 2010 by Парневый Вадим
Копирование материалов разрешено только при размещении ссылки на сайт www.superbusiness.com.ua