Как работают поисковые машины интернета
Для того, чтобы посетители смогли найти любой сайт в поисковике его должен увидеть и проиндексировать поисковый робот. Эта специальная программа, которая ходит по сайтам и заносит их в свою поисковую базу. Но не все найденные веб-страницы попадают в поиск. И какие? И так первый фильтр. Веб страницы, которые не попадают в поиск: сервер ответил:»нет доступа» …