Google и охота за приведениями
Наша хорошая подруга прислала скриншоты, на которых видно, что ее IPhone не может получать выдачу поисковой системы Google и находится в бане потому, что якобы, с данного девайса идет большое количество автоматических запросов. Смешно, не правда ли? Учитывая то, что IPhone по определению не предназначен парсить выдачу.
Подобные баны — огромная недоработка со стороны корпорации Google. Пугаться этого не стоит, сегодня мы расскажем, откуда ноги растут.
Если какой — нибудь пользователь, назовем его Х, посылает большое количество запросов и считывает такое же количество выдачи (или же это делает вирус), то Google автоматически добавляет ip адрес в черный список. Логично, если бы не НО: зачастую, ip адреса — динамические (сегодня — один, завтра — другой), следовательно, забаненный адрес от пользователя X переходит к ни в чем не повинному пользователю Z (то же самое происходит с мобильным интернетом).
Как ни странно, в чем то корпорация Яндекс все же преуспела: у них имеются более продвинутые алгоритмы защиты от автоматических запросов, которые учитывают в первую очередь данные cookies, а уже потом — ip адреса. Это конкурентное преимущество Яндекса (когда обычные пользователи оказываются отрезанными от всемирной паутины) может привести к уменьшению аудитории Google.
Надеемся, корпорация Google вскоре исправит это досадное недоразумение.
by Mr. Userator & Ms. Alice Tyler
Яндекс — састдай всегда был и всегда будет, несмотря на это «конкурентное преимущество». Практически все, что есть у яндекса, он стырил у гугля. Остальное стырил в других местах. А поиск — то, с чего все начиналось, у яндекса вообще никуда не годится. яндекс узнает о сайтах/страницах через месяц — два после того, как они уже есть в выдаче гугля.
опечатка во втором слове. Надеюсь, модератор поправит
>Как ни странно, в чем то корпорация Яндекс все же преуспела: у них имеются более продвинутые алгоритмы защиты от автоматических запросов.
Что имелось ввиду под словом «продвинутые»? Алгоритмы защиты Google намного сложнее и агрессивнее чем у Яндекса, поэтому мы и наблюдаем страницу Sorry. У Яндекса более простые алгоритмы, которые в основном ориентируются на cookies а потом уже на IP. Google не такой глупый, т.к. он знает с 1 IP можно запустить 1000 ботов c разными cookies и поэтому учитывает общее количество запросов с IP и сразу его банит. Видимо жадность и нежелание делиться, пересиливают заботу о клиентах Google.
Возможно Вам будет полезно почитать статью на http://blog.seolib.ru/research/chej-antibot-luchshe/
Бан обычно проходит в течении пару часов
Это совсем не смешно. Google может и исправит у себя. Но кто исправит забаненные адреса на многих сайтах? Дело в том, что провайдеры в пылу борьбы с распространением файлов в сетях торрентов, совсем не думают о своих пользователях. Они используют пулы динамических адресов для атак на трекеры, что может приводить к бану адреса. А кто пострадает? Да, пользователь.