За последние 24 часа нас посетили 18119 программистов и 1669 роботов. Сейчас ищут 2247 программистов ...

Парсинг google

Тема в разделе "Прочие вопросы по PHP", создана пользователем Crystallon, 18 сен 2013.

  1. Crystallon

    Crystallon Активный пользователь

    С нами с:
    7 фев 2010
    Сообщения:
    61
    Симпатии:
    0
    Доброго времени суток!
    Пытаюсь парсить гугл, точнее с парсингом проблем нет, если бы не капча.
    С капчей ситуация следующая:
    Вместо выдачи перенаправляет на:
    http://www.google.com/sorry/
    беру от туда id капчи и загружаю картинку от сюда:
    http://www.google.com/sorry/image?id={$id}&hl=en
    Картинка успешно распознается антигейтом и я получаю код.
    А вот с этого момента начинаются проблемы - гугл принимать капчу упорно отказывается и после отправки ему капчи сим образом:
    http://www.google.com/sorry/Captcha?id={$id}&captcha={$captcha}&submit=Submit&continue=http://www.google.com/
    он снова выдает страницу ввода капчи.

    Уже 20 раз перепроверил где какие куки в браузере берутся, как какая ссылка выглядит итп, но упорно не работает...
    Подскажите пожалуйста в чем могут быть грабли, наверняка многие имели дело с парсингом гугла.
    Заранее спасибо!

    P.S. Код не прикладываю т.к. дело тут не в коде, а в том что мне нужно понять как гугл определяет что я пытаюсь его парсить.
     
  2. Fell-x27

    Fell-x27 Суперстар
    Команда форума Модератор

    С нами с:
    25 июл 2013
    Сообщения:
    12.156
    Симпатии:
    1.770
    Адрес:
    :сердА
    Ты знаешь, я как-то через гуглопочту отсылал письмо, и забыл прикрепить к нему фотографии. Когда нажал "отправить", мне выскочило сообщение, мол "Текст вашего письма подразумевает наличие в нем фотографий, но вы не подцепили к письму ни одного файла. Вы уверены, что вы хотите отослать письмо без них?".

    Грабли в том, что пытаться наeбaть Google, у которого боты умнее, чем большинство населения этого форума, заведомо бессмысленная затея.
     
  3. Crystallon

    Crystallon Активный пользователь

    С нами с:
    7 фев 2010
    Сообщения:
    61
    Симпатии:
    0
    Ну парсеров гугла как бы не мало) значит там все не так уж страшно, главное понять в чем суть...
    По этому я и спрашиваюсь здесь в надежде что это прочитают люди уже имевшие дело с парсингом гугла.