Дикие люди. Не знают, что такое robots.txt и панель вебмастера.
РАЗДЕЛЫ
Архив
|
Дикие люди. Не знают, что такое robots.txt и панель вебмастера. 19.06.2009 22:46 | пишет Леха Андреев | ссылка
У них есть robots.txt. Но если робот заваливает сайт, то это говенный робот, а вовсе не сайт виноват. Потому что сайты делаются для людей, а не для роботов. Исключения составляют сайты оптимизаторов. Оптимизаторы не являются людьми по определению: они всего лишь биомасса на службе робота. Но это не значит, что робот имеет право переносить отношения со своей рабской биомассой на всех нормальных людей. 20.06.2009 10:43 | пишет Гость | ссылка
без поисковых систем - о твоем сайте узнают единицы и нахрен никому не будет нужен.. так что не вякай.. 20.06.2009 15:56 | пишет Леха Андреев | ссылка
Детка, мой сайт появился в Сети задолго до появления Гугла и Яндекса. 22.06.2009 09:47 | пишет Другой Гость | ссылка
Детка, в 1996 твой сайт был элементом умственной мастурбации. Автор, поправьте заголовок. Это никак не DDOS, максимум DoS-атака. 19.06.2009 22:37 | пишет Леха Андреев | ссылка
В натуре, поправили. Хотя если боты ходят с разных IP, это вполне себе distributed. 20.06.2009 00:09 | пишет Гость | ссылка
"Александр Садовский заявил, что это связано всего лишь с переносом обхода сайтов ботами с ночного времени на дневное, и назвал DoS-защиту "Мастерхоста" несложной - дескать, это она ошиблась, а вовсе не "Яндекс". А по ссылке видно, что руководство Мастерхоста заявляло то же самое, и извинилось перед клиентами за недопущение Яндекса на сайте. Откуда "дескать"? Андреев, вы уже круче мастехостовцев разбираетесь в хостинге? 20.06.2009 01:04 | пишет Леха Андреев | ссылка
> А по ссылке видно Нет, по ссылке этого не видно. Там видна только цитата Садовского. И никакого "то же самое" от Мастерхоста там нет. Зато там есть слова специалиста по хостингу Фила Кулина, который комментирует слова Садовского: "Это и вообще былинный отказ. Все прошлые попытки договориться успехом не увенчались". 20.06.2009 22:45 | пишет Гость | ссылка
Четырехглазик, купи себе еще пару стеклышек: "После того, как руководство "Мастерхоста" узнало о проблеме из закрытой рассылки ЕЖЕ, по словам Сергея Кошкина, с ним сразу же связались представители компании, сообщили о внесенных исправлениях и извинились за доставленные неудобства" Мастерхост исправился и извинился. Чуешь чем пахнет? То что ты готов 21.06.2009 01:24 | пишет Леха Андреев | ссылка
Это ты глаза разуй, ботофил. Чего ты мне цитируешь-то? Перепев Рабиновича со слов Кошкина, вольно пересказавшего ответ саппорта? Естественно, Мастерхост извинился перед своими клиентами. Но я нигде не видел слов Мастерхоста о том, что у них "примитивная защита от DoS". Это версия товарища Садовского из Яндекса. Очевидно, что сам Яндекс не любит извиняться. Зато искусство отмазок у них поставлено на небывалую высоту. И кстати, основная тема новости - это бот YandexSomething, долбивший два сайта со скоростью 20 запросов в секунду. Чертовски интересно услышать версию Садовского на этот раз. Что-то типа "мы всего лишь перенесли время обхода с утреннего на вечернее, чтобы дать нашим пользователям самые свежие новости". Ага, в справочнике компаний они новости нашли. Несколько мегабайт сразу. В девять вечера. 21.06.2009 18:17 | пишет Гость | ссылка
А вы у Садовского спрашивали объяснение-то, ботофобы херовы? 22.06.2009 14:37 | пишет Гость | ссылка
На момент публикации этого комментария, комментария про запрос комментария не было получено. Товарищ еврей, вы хотя бы лотерейный билет купите, ога? 20.06.2009 01:18 | пишет Гость | ссылка
подтверждаю - они в Яндексе с дуба рухнули. Программировать "лучщая интернет компания России" - не умеет Кстати - боты Рамблер - не лучще. 20.06.2009 09:14 | пишет chereshov.livejournal.com | ссылка
А помойму это тупой пиар компании SmartWeb. 20.06.2009 10:46 | пишет Гость | ссылка
так и есть.. 21.06.2009 01:56 | пишет Леха Андреев | ссылка
Да-да, покупайте хостинг у компании Яндекс.Хостинг - и у вас не будет проблем с ботами. Заводите сайты на Яндекс.Народе - и тогда Яндекс проиндексирует их раньше других. Покупайте рекламу в Яндекс.Директе - и ваши сайты сразу поднимутся в обычной выдаче. Ведите блоги на Яндекс.Блогах - и они будут первыми в поиске по блогам. Транслируйте тексты спизженных новостей в Яндекс.Новости - и они будут показываться в поиске вместо оригиналов. Отдавайте краденые книги в Яндекс.Книги - и этот сервис найдет именно пиратскую версию вместо авторской. Короче, самое честное зеркало Рунета работает еще честнее, если на него помолиться и принести ему в жертву барашка. 23.06.2009 04:44 | пишет bbgolik | ссылка
Таковы реалии рынка: подстройся под старшего брата и тебе воздастся трафом. 20.06.2009 13:03 | пишет Mstar - mstarproject.com | ссылка
Это баг у них вылез, у меня тоже не новостйно сайт, но обычный яндекс бот стал подписываться новостным почему-то. Вот переписка с суппортом: С IP-адреса 87.250.231.34 ходит индексирующий робот Яндекса, который в логах Просим Вас высказать свое мнение о полученном ответе: -- Михаил Старовойт написал(а): > 20.06.2009 13:05 | пишет Mstar - mstarproject.com | ссылка
на сайте 21.06.2009 22:29 | пишет Гость | ссылка
обьявление храждане барыхи. 22.06.2009 10:57 | пишет Гость | ссылка
Яндекс никога не извиняется. У Яндекса - самые правильные боты, а если ваш Интернет плохо работает с этими ботами - меняйте Интернет. 23.06.2009 19:58 | пишет Александр Садовский | ссылка
Спасибо за дискуссию. Никакой мистики и мстительности робота в описанном инциденте нет. Данные о безобразном поведении нашего робота правдивые, но не отражают полной картины. 1. Робот Яндекса выкачал 19238 страниц с 8506 (восьми тысяч пятисот шести) поддоменов uaprom.net и с 6896 (шести тысяч восьмисот девяноста шести) поддоменов ruprom.net, а не с двух хостов, как может показаться из заметок. 2. На каждый хост (из ~ 15000) делалось не более одного обращения в 1,1 или 2 секунды (в зависимости от размера хоста). Сейчас 3. Все поддомены ruprom.net и uaprom.net лежат на двух IP. Автоматические алгоритмы Яндекса определили ruprom.net и uaprom.net как хостинги (они и позиционируют себя как надежные хостинги, см. Для надежного хостинга, на серверах которого находится много сайтов, мы создавали нагрузку, не превышающую 12 запросов в секунду на IP. 4. User-Agent отдавался "YandexSomething" и это наша вина. Это был не новостной, а один из поисковых роботов, у которого мы забыли изменить дефолтное представление. Ошибку исправили, спасибо, робота поставили в угол. Резюме: нагрузка создаваемая на IP хостингов ruprom.net и uaprom.net не превышала лимиты, допустимые при обходе большинства хостингов. Мы понимаем, что она может быть избыточной для небольших хостингов и постараемся лучше дифференцировать нагрузку на большие и малые хостинги. Надеемся, что сервера рунета будут встречать перевоспитанного робота благосклонно. 24.06.2009 01:55 | пишет Гость | ссылка
Чота Андреев как-то стух. Удовлетворился объяснением? 24.06.2009 03:21 | пишет Леха Андреев | ссылка
Так ведь это ненастоящий Садовский ответил. Неужели вы думаете, что великий Садовский, к светящимся одеждам которого мечтает прикоснуться каждый оптимизатор страны, мог бы написать слово "рунет" с маленькой буквы, как безграмотная деревенская девка с журфака МГУ? Нет, господа, сие никак невозможно! 24.06.2009 14:59 | пишет Гость | ссылка
Фу, зачем хамить? 24.06.2009 15:39 | пишет Гость | ссылка
ну фто вы фто вы - честь яндекса была под угрозой. надо было спешить. а на опечатки типа малого "рунета" - надо переспросить у автора - он все выправит. как мне кажется - мне так кажется. |
Последние комментарии
Гость про Суд велел "Твиттеру" сдать сторонников WikiLeaks (12)
Гость про Книгоиздатели начали судиться с торрентами (2)
l_e_x_a про "ВКонтакте" принудительно протестирует пользователей (35)
andrey_kadetov про Google назвал Facebook "ловушкой без выхода" (6)
volv про День папуасского робошахтёра (14)
l_e_x_a про Русские кликботы признаны самыми активными (11)
looli спрашивает: Земля вампиров смотреть онлайн в HD качестве looli спрашивает: Зеленый Фонарь смотреть онлайн в HD качестве looli спрашивает: Защитник смотреть онлайн в HD качестве looli спрашивает: Запретная зона смотреть онлайн в HD качестве looli спрашивает: Закон доблести смотреть онлайн в HD качестве looli спрашивает: Вышибала смотреть онлайн в HD качестве looli спрашивает: Встречный ветер смотреть онлайн в HD качестве looli спрашивает: Все любят китов смотреть онлайн в HD качестве |
Copyright © 2001-2020 «Вебпланета». При перепечатке ссылка на «Вебпланету» обязательна.
И эту компания называют лучшей среди IT! В этом смысле браво местному IT!