ReSQL.ru
     
powered by simpleCommunicator - 2.0.61     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Java [игнор отключен] [закрыт для гостей] / XPath, html- парсер
10 сообщений из 10, страница 1 из 1
XPath, html- парсер
    #37588254
bob1970
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
bob1970
Гость
Вот какой дело. Хочется к html-странице применить XPath-выражения. Перед работой с XPath, прогоняю страницу через JTidy. Если я сохраняю страницу в файл через FireFox, и открываю его в программе, то все работает. Если напрямую получаю страницу из интернета в программу , то где-то срабатывают XPath выражения, где-то нет. Сохранил страницу через wget - тоже толком не работает. Причем, если я открываю сохраненный документ (который не парсится в программе) в FireFox , то в нем через FireBug XPath отрабатывают.
...
Рейтинг: 0 / 0
22.12.2011, 09:10:29
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588269
Фотография Petro123
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Petro123
Участник
bob1970,
html не строгий формат для сабжа.
...
Рейтинг: 0 / 0
22.12.2011, 09:23:40
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588299
bob1970
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
bob1970
Гость
Petro123,

Да это понятно.. Но JTidy вроде должен исправлять это дело. По крайней мере Document он строит. И работает. Может FireFox ему помогает? Не знаю. Можно и регэкспом обойтись. Только XPathом красивее.
...
Рейтинг: 0 / 0
22.12.2011, 09:47:42
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588321
Фотография Petro123
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Petro123
Участник
bob1970Petro123,
Да это понятно.. Но JTidy вроде должен исправлять это дело. По крайней мере Document он строит. И работает. Может FireFox ему помогает? Не знаю. Можно и регэкспом обойтись. Только XPathом красивее.
- обратись VoDA, он искал парсеры НЕ на XPath а чтоб работали
ЗЫ
родные парсеры сделаны так, что даже с синтаксическими ошибками - веб страница открывалась.
...
Рейтинг: 0 / 0
22.12.2011, 10:03:39
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588328
Leonidv
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Leonidv
Участник
bob1970Может FireFox ему помогает? Можно и регэкспом обойтись. Только XPathом красивее.
Firefox (или firebug, не знаю кто точно), 100% отображает DOM дерево не совсем то, как оно задано на странице.
regexp быстрее, надежнее и сильно проще.
...
Рейтинг: 0 / 0
22.12.2011, 10:14:01
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588915
bob1970
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
bob1970
Гость
Вопрос снят. Дело было не парсере , и не в jtidy, и не в XPath, и вообще не в чем... В FireFox. Он оказывается сохраняет по разному. Когда сохраняю "Веб-страница, полностью" , то добавляет теги лично от себя. Когда "Веб-страница, только HTM", только то что получил из инета. В результате XPath выражения для этих страниц нужны разные. Я тренировался с "Веб-страница, полностью"
...
Рейтинг: 0 / 0
22.12.2011, 13:54:09
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588945
Большой Синий Кит
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Большой Синий Кит
Участник
bob1970,

Возможно, есть смысл посмотреть в сторону HtmlUnitDriver. Тогда не придется перегонять все через JTidy:

HtmlUnitDriver.get(url)
HtmlUnitDriver.findElement(By.xpath(xpath))

Если речь идет о поиске того или иного элемента.
...
Рейтинг: 0 / 0
22.12.2011, 14:03:00
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588963
Большой Синий Кит
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Большой Синий Кит
Участник
P.S. Selenium так вообще может работать не с нативным Xpath броузера а с яваскриптовой либой, поддерживающей Xpath 2.0. Определяется пропертю "useNativeXpath" или что-то в это роде.
...
Рейтинг: 0 / 0
22.12.2011, 14:07:31
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37588973
Большой Синий Кит
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Большой Синий Кит
Участник
Кстати говоря, а кто-то смог заставить HtmlUnitDriver не юзать nativeXpath? Я с наскока попробовал - он выругался, что только, мол, натив и все.
...
Рейтинг: 0 / 0
22.12.2011, 14:12:05
| Ответить | Цитировать | Написать  
XPath, html- парсер
    #37589148
bob1970
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
bob1970
Гость
Большой Синий Китbob1970,

Возможно, есть смысл посмотреть в сторону HtmlUnitDriver. Тогда не придется перегонять все через JTidy:

HtmlUnitDriver.get(url)
HtmlUnitDriver.findElement(By.xpath(xpath))

Если речь идет о поиске того или иного элемента.

Спасибо. Почитал. Прикольная штука.
...
Рейтинг: 0 / 0
22.12.2011, 15:22:57
| Ответить | Цитировать | Написать  
10 сообщений из 10, страница 1 из 1
Форумы / Java [игнор отключен] [закрыт для гостей] / XPath, html- парсер
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение   Полит. конфиден.  
NoSQL.ru       Кролег: Проекты, Новости, Чат       РЕД ФОРУМ       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=59&fpage=320&tid=2133011]:
 0ms
get settings:
 13ms
get forum list:
 26ms
check forum access:
 6ms
check topic access:
 6ms
track hit:
 37ms
get topic data:
 17ms
get forum data:
 5ms
get page messages:
 68ms
get tp. blocked users:
 2ms
others: 349ms
total:  529ms
созд. / загр.: 529ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]