Встаёт делема...С одной стороны основной приток сёрферов идёт с поисковиков...И каждый оптимизатор и владелец сайта хотят его посещаемости. С другой стороны за это приходиться платить тем, чтоотдаёшь свой оригинальный контет на пользование поисковика. Согласен, что есть нормы определённые, которые позволяют запрещать сайт к индексации...Всё делается технически и по моему решает проблему.
ссылка на это сообщение
интересно, что мешает создателям сайтов самим запрещать индексацию их сайтов? достаточно ввести обязательную регистрацию для доступа к контенту и проблем не будет... или даже, достаточно ввести демо логин для просмотра материалов... ни одна поисковая система не будет регистрироваться или входить на сайт пользователем...