|
|
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
Программа парсинг. есть сайт города. Задача - вытащить всю инфу о кафе ,барах и ресторанах.(адрес,мыло,время работы,название,все что будет) 1 Перебирать все странички(по ссылкам или другим способом) с кафе барами и ресторанами 2 Заходить по ссылкам в описание кафе бара ресторана 3 Вытаскивать всю нужную инфу из описания. 4 Сохранять полученные данные в файл csv 5 При запуске программы показывать лог выполнения(что сейчас происходить) Изучением Java занялся месяц назад. Прошу помочь с реализацией. Что нужно для реализации? Что почитать? Примеры(если есть) Спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.08.2012, 18:34:13 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
DuftPunk, Погуглите Java Web Harvesting, Java Web Page Scrapper. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.08.2012, 18:46:13 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
Спасибо,может еще примерчиков кинете более доступных для начинающего понимания,а если с описанием чего и что там происходит...Спасибо большое. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.08.2012, 21:30:10 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
http://oz.by/books/more1015560.html 6 глава, сама книга не то чтобы уж очень хороша, но вашему примеру посвящена целая глава, так что будет полезно имхо ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.08.2012, 22:45:00 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
Спасибо,читаю , но немного не то что мне нужно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.08.2012, 00:17:58 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
Нашел несколько краулеров примеров http://www.ulimatbach.de/java/Crawler.html Подскажите какой из них подходит в моей ситуации,или от какого отталкиваться. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 19.08.2012, 15:01:33 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
Дело по маленьку пошло)) И так , научился доставать нужную информацию(нужный текст) и ссылки. Теперь вопрос такой Имею код Код: java 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. В результате получаю авторСсылки в описание <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/itgril/">Итальянский гриль</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/jaske/">Яскэ</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/yaske/">Яскэ</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/buhara/">Бухара</a> <a href=" http://kharkov.nezabarom.ua/Bouling/maximum/">Боулинг-Центр Максимум</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/gold_ducat/">Золотой Дукат</a> <a href=" http://kharkov.nezabarom.ua/Razvlekatelnye-kompleksy/compas/">Компас</a> <a href=" http://kharkov.nezabarom.ua/Klub/it_cafe/">IT САFE_</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/kokawa/">Книжная кофейня K˚KAWA</a> <a href=" http://kharkov.nezabarom.ua/Kafe-Bar-Restoran/caffissimo/">Caffissimo</a> Ссылки на другие страницы <a class="numb_a" href="/Kafe-Bar-Restoran?pg=&pg=0">1</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=1">2</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=2">3</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=3">4</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=4">5</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=5">6</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=6">7</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=7">8</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=8">9</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=9">10</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=1">→</a> <a class="numb_a" href="/Kafe-Bar-Restoran?pg=&pg=0">1</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=1">2</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=2">3</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=3">4</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=4">5</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=5">6</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=6">7</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=7">8</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=8">9</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=9">10</a> <a class="numb" href="/Kafe-Bar-Restoran?pg=&pg=1">→</a> Ув Форумчане,помогите.Подскажите,каким образом мне переходить по этим ссылкам - По страничкам и в каждой из этих страничек заходит в описание где я и буду вытаскивать нужные мне данные.Как это реализовать?Спасибо. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 20.08.2012, 20:36:06 |
|
||
|
Парсинг
|
|||
|---|---|---|---|
|
#18+
DuftPunk, Так Вы же уже "переходили" по ссылкам. Так же, как и в самом начале - Код: java 1. 2. Пробегайте по массиву ссылок из первой страницы и ищите там необходимую информацию. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 21.08.2012, 08:15:15 |
|
||
|
|

start [/forum/topic.php?fid=59&msg=37921899&tid=2131110]: |
0ms |
get settings: |
16ms |
get forum list: |
20ms |
check forum access: |
5ms |
check topic access: |
5ms |
track hit: |
33ms |
get topic data: |
15ms |
get forum data: |
3ms |
get page messages: |
58ms |
get tp. blocked users: |
2ms |
| others: | 289ms |
| total: | 446ms |

| 0 / 0 |
