Какие сайты индексирует поисковый робот?
У поисковика есть определенные пределы зоны индексирования, и нужно понимать, где они находятся, какие страницы можно найти с помощью поисковой машины, а какие нельзя, какие сайты можно добавить, а какие нет. Если даже поисковик работает по Рунету, это совсем не означает, что среди проиндексированных, будут сайты только с именами, которые находятся в зоне .ru. В такие поисковики можно добавлять сайты и с расширением INFO,COM и др., но при условии, что эти сайты будут русскоязычные. Поисковики сами добираются до сайтов из разных доменных зон, если на них ссылаются сайты уже знакомые поисковой машине.
Но к примеру Google мировой поисковик, поэтому индексирует абсолютно все сайты.
|