Yandex Parser by Me

Discussion in 'SЕО - тонкости, методы раскрутки' started by napas_hd, 25 Feb 2010.

  1. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    Новая версия, работает через yandex.ru
    35 пост


    Вчера понадобилось вытянуть выдачу Яндекса, погуглив на тему парсеров ничего рабочего не нашел, пришлось писать свой:

    * Возможность задать User Agent
    * Любое количество страниц для обработки
    * Работает через m.yandex.ru

    [​IMG]

    Скачать
     
    #1 napas_hd, 25 Feb 2010
    Last edited: 14 Jan 2011
    8 people like this.
  2. ICQ Hool

    ICQ Hool Elder - Старейшина

    Joined:
    31 Mar 2008
    Messages:
    175
    Likes Received:
    25
    Reputations:
    0
    я думал тут парсер ключевиков, а тут ссылки, зачем они тебе нужны? 0_о
     
  3. nMonkn

    nMonkn Member

    Joined:
    4 Jan 2010
    Messages:
    16
    Likes Received:
    5
    Reputations:
    0
    А чем тебя магадан не устраивает как парсер кеев?
     
  4. acdel

    acdel Elder - Старейшина

    Joined:
    7 Jan 2008
    Messages:
    132
    Likes Received:
    57
    Reputations:
    3
    Парсить беки, например собрать базу каталогов "живых" или еще что) Хотя в олсабе это все есть, но как фри софт пойдет.

    ТС, добавь RU и EN Google, +Yahoo+ список юзерагентов в базу, руками их проставлять гемор)
     
    #4 acdel, 26 Feb 2010
    Last edited: 26 Feb 2010
  5. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    ОК. В следующих версиях учту.
     
  6. capslock

    capslock New Member

    Joined:
    25 Sep 2009
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    Молодец! Программка простая, шустрая, небольшой вес! Делает то что надо! +10 :)
     
  7. Ferrari california

    Joined:
    17 Mar 2010
    Messages:
    0
    Likes Received:
    16
    Reputations:
    0
    Я отдаю анадырю предпочтение )
     
  8. regnet

    regnet Active Member

    Joined:
    12 Mar 2009
    Messages:
    27
    Likes Received:
    106
    Reputations:
    -5
    ТС какую строку надо вписать что б парсило с yandex.ru а не с yandex.ua ?
     
  9. mff

    mff Elder - Старейшина

    Joined:
    12 Mar 2008
    Messages:
    2,074
    Likes Received:
    701
    Reputations:
    227
    Тис спс, норм прога, только чо она с UA парсит ? regnet +1 нам с .ru нада :)
     
  10. HIMIKAT

    HIMIKAT Elder - Старейшина

    Joined:
    12 Jan 2007
    Messages:
    2,707
    Likes Received:
    581
    Reputations:
    403
    Разработка очень хорошая. Мне как раз понадобился подобный софт. А есть еще нечто подобное только для других поисковиков?
     
  11. mff

    mff Elder - Старейшина

    Joined:
    12 Mar 2008
    Messages:
    2,074
    Likes Received:
    701
    Reputations:
    227
    Прога отвалилась что ли?
    выдает какой то редирект :)
     
  12. DiplomatQ

    DiplomatQ Elder - Старейшина

    Joined:
    4 Jun 2008
    Messages:
    48
    Likes Received:
    5
    Reputations:
    1
    ТОже самое
     
  13. regnet

    regnet Active Member

    Joined:
    12 Mar 2009
    Messages:
    27
    Likes Received:
    106
    Reputations:
    -5
    Там мне и с .юа и с .ру, и я каталога надо, ТС отзовись плиз.
     
  14. Yetisports

    Yetisports Banned

    Joined:
    11 Jul 2010
    Messages:
    147
    Likes Received:
    12
    Reputations:
    17
    Обнови видимо не будет.
    Потому нужно искать аналоги. ;)
     
  15. sadist_ua

    sadist_ua Banned

    Joined:
    21 Jul 2010
    Messages:
    0
    Likes Received:
    0
    Reputations:
    0
    ТС сделай пожалуйста ещё для гугла
     
  16. napas_hd

    napas_hd Member

    Joined:
    29 Dec 2008
    Messages:
    61
    Likes Received:
    17
    Reputations:
    0
    Сейчас посмотрим чего яшка исправил.

    upd:
    Всё вроде бы работает, только каптча иногда вылазит, ставьте побольше таймаут.

    Есть ещё подозрения на куки, но с этим позже разберусь.

    В программе можно указать откуда парсить.
     
    #16 napas_hd, 10 Aug 2010
    Last edited: 10 Aug 2010
  17. Tesson

    Tesson Banned

    Joined:
    27 Dec 2009
    Messages:
    164
    Likes Received:
    43
    Reputations:
    0
    прикольно спс!
     
  18. HIMIKAT

    HIMIKAT Elder - Старейшина

    Joined:
    12 Jan 2007
    Messages:
    2,707
    Likes Received:
    581
    Reputations:
    403
    Народ, ну что, аналогов никто не подскажет, только для других поисковиков?

    Или может быть ТС что нибудь сообразил бы, если появится свободное время. Думаю многие выразили бы свою благодарность.
     
  19. airship

    airship New Member

    Joined:
    24 Aug 2010
    Messages:
    4
    Likes Received:
    0
    Reputations:
    0
    Какие еще будут пожелания, кроме разных поисковиков (т.е. + гугл)? Будет не под m-версию, а под нормальную (подозреваю, что нормальная от портативной могут отличаться по выдаче). Есть еще мысль разделить по регионам поиска (под разные города). Нужно? Зачем много юзер-агентов? Просто зашью десяток, рандомом каждый раз будет выбирать. Давно мысль комбайн сделать - парсер ссылок будет первой функцией.
     
  20. dilerium2

    dilerium2 New Member

    Joined:
    6 Aug 2010
    Messages:
    42
    Likes Received:
    0
    Reputations:
    0
    posle pervogo parsa proga podoxla