Приветствую
подскажите, как "правильно" получить HTML-код страницы после выполнения клиентских JS скриптов на ней (то, что видит пользователь в браузере)?

mr_virtusreset4,
здравствуйте,

а что конкретно интересует? Вы можете из html вызывать JS и используя JS генерить html код.
Есть страница со скриптами. Нужно вытащить из нее HTML для дальнейшего парса.Если напрямую забирать со страницы данные,то получаем в результате текст с неотработанными скриптами. Нужно получить страницу, выполнить скрипты и забрать с нее html.
Если создавать внешний процесс браузера и делать все в нем, то работает. Интересуют варианты без внешних приложений.

mad_nazgulreset4Есть страница со скриптами. Нужно вытащить из нее HTML для дальнейшего парса.Если напрямую забирать со страницы данные,то получаем в результате текст с неотработанными скриптами. Нужно получить страницу, выполнить скрипты и забрать с нее html.
Если создавать внешний процесс браузера и делать все в нем, то работает. Интересуют варианты без внешних приложений.

Гуглить работу с HttpClient
погуглено уже, все клиенты с первой страницы гугла, выдают HTML без отработанных скрптов. Поэтому и пишу сюда :).

alexy_blackя копирую из firefox инспектора. там можно выделить body и скопировать его и его подузлы.
да, про это уже указал, что если юзать внешний процесс, то все работает.

Blazkowiczreset4подскажите, как "правильно" получить HTML-код страницы после выполнения клиентских JS скриптов на ней (то, что видит пользователь в браузере)?
Получить где?
получить в Java приложении в виде String, InputStream или еще чего, что можно было бы распарсить.

Alibek B.А какая связь между Java и JS?
Отвечающие тоже доставляют. ТС ведь указал, что из браузера он получает интересуемое, но ему нужно эмулировать работу браузера, захостить у себя скриптовый движок и получить страницу после отработки скриптов .
А все как один, не включая мозги, советуют забирать страницу из браузера или с сервера.
this

Blazkowiczreset4Если создавать внешний процесс браузера и делать все в нем, то работает. Интересуют варианты без внешних приложений.
webkit - это opensource. Ничего не мешает интегрировать в свой процесс и использовать API. Зачем создавать новые процессы?
Надеюсь, решение не серверное? Потому что запускать какой попало JS на сервере чревато как минимум тормозами.
тоже решил в эту сторону копать. Может есть готовые примеры у кого-нибудь? Для ускорения меня ;)