спарсить номера телефонов emarket, может кто поделится опытом?

gangreyw

Привіт!

Статус: Offline
Реєстрація: 08.11.2009
Повідом.: 14

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #1

спарсить номера телефонов emarket, может кто поделится опытом?

Очь надо народ можем даже в материальном плане отблагодарить!
Телефон у них обрабатывается событием JS!

 

BrainStorm

Статус: Offline
Реєстрація: 23.03.2005
Повідом.: 746

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #2

опиши свой use case. По какому критерию (что за объявление...) ты хочешь тягать номера? И чем ты хочешь это делать?

 

gangreyw

Привіт!

Статус: Offline
Реєстрація: 08.11.2009
Повідом.: 14

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #3

объявления недвижимости, там любого объявления номера скрыты
пока что успешно парсили на php
но эффективнее оказалась прога Content Downloader.



может есть какая хитрость заставить показаться номер, я так понимаю js может сработать только на стороне браузера, положение смотрится очь тупиковым, так как простой запрос принимает генерированную страничку сервера, где мы может на распознанном html то распознать и спарсить, но заставить эту страницу отработать js очь проблемная задача, ведь урла для js не надо он срабатывает по событию, в общем тупик просто какойто.

 

Останнє редагування: 11.02.2013

DaftPunk

Статус: Offline
Реєстрація: 24.05.2010
Повідом.: 723

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #4

Для таких сайтов селениум\веб-драйвер в помощь, он не только для тестов годится
Но скорость парсинга, конечно, упадет..

 

A.Sha

Статус: Offline
Реєстрація: 21.03.2011
Повідом.: 2000

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #5

BrainStorm сказав(ла):

опиши свой use case. По какому критерию (что за объявление...) ты хочешь тягать номера? И чем ты хочешь это делать?

Натисніть, щоб розгорнути...

хочет по номеру чужие обьявления отслеживать (если канешь не тырить сюда

⚠ Тільки зареєстровані користувачі бачать весь контент та не бачать рекламу.

)

 

BrainStorm

Статус: Offline
Реєстрація: 23.03.2005
Повідом.: 746

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #6

DaftPunk сказав(ла):

Для таких сайтов селениум\веб-драйвер в помощь, он не только для тестов годится
Но скорость парсинга, конечно, упадет..

Натисніть, щоб розгорнути...

именно это я и собирался посоветовать

 

gangreyw

Привіт!

Статус: Offline
Реєстрація: 08.11.2009
Повідом.: 14

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #7

спасибо буду пробовать это "селениум\веб-драйвер"

 

avbua

Статус: Offline
Реєстрація: 09.10.2006
Повідом.: 9629

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #8

Можно написать програмку, которая будет брать со странички необходимые данные, делать запрос на emarket и получать телефоны

 

DaftPunk

Статус: Offline
Реєстрація: 24.05.2010
Повідом.: 723

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #9

Чет не заметил сразу, что речь о емаркете.. там в классе спана в ссылке json с урлом и данными - с тебя только запрос после загрузки страницы.

 

avbua

Статус: Offline
Реєстрація: 09.10.2006
Повідом.: 9629

• 11.02.2013

• 🟢 23:33 Відбій тривоги в м. Харків та Харківська територіальна громада.Слідкуйте за подальшими повідомленнями.#м_Харків_та_Харківська_територіальна_громада
• #10

ещё после частых запросов там каптча вылазит