Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / Java [игнор отключен] [закрыт для гостей] / Как в Java вычитать HTML код страницы с нужным параметром в теге select ? / 4 сообщений из 4, страница 1 из 1
12.04.2018, 18:28
    #39629405
Solenoid
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как в Java вычитать HTML код страницы с нужным параметром в теге select ?
Пример:
Вычитать HTML-код страницы
https://www.globalpetrolprices.com/gasoline_prices/
для цены в EUR

При открытии сайта по умолчанию цена задана в U.S. Dollar и парсится без проблем:
А как быть для цены в EUR? Пробовал вот так:
String siteAddress = " https://www.globalpetrolprices.com/gasoline_prices/?currency=EUR";
, но всё равно вычитываются долларовые значения.

Код: java
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
16.
17.
18.
19.
20.
21.
22.
23.
24.
25.
26.
27.
28.
29.
30.
31.
32.
33.
34.
35.
36.
37.
38.
39.
40.
41.
42.
43.
44.
45.
46.
47.
48.
49.
50.
51.
52.
53.
54.
55.
56.
57.
58.
59.
import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.net.URL;
import java.net.URLConnection;
import java.util.ArrayList;
import java.util.List;

public class FuelPreisService {

    public static void main(String[] args) throws Exception {

        String siteAddress = "https://www.globalpetrolprices.com/gasoline_prices/?literGalon=1&currency=EUR";
        String httpContent = getContentOfHTTPPage(siteAddress);
        List<String> preisFuel = getPreisFuel(httpContent);
        System.out.println(preisFuel);

    }


    private static List<String> getPreisFuel(String httpContent) throws Exception {

        List<String> result = new ArrayList<String>();

        String[] array1 = httpContent.split("data=");
        String st1 = array1[1];

        String[] array2 = st1.split("&titles");
        String prices = array2[0];

        String[] array3 = prices.split(",");
        for (int i = 0; i < array3.length; i++) {
        result.add((array3[i]));
        }

        return result;

    }


    private static String getContentOfHTTPPage(String pageAddress) throws Exception {

        StringBuilder sb = new StringBuilder();
        URL pageURL = new URL(pageAddress);
        URLConnection uc = pageURL.openConnection();
        BufferedReader br = new BufferedReader(new InputStreamReader(uc.getInputStream()));
        try {
            String inputLine;
            while ((inputLine = br.readLine()) != null) {
                sb.append(inputLine);
            }
        } finally {
            br.close();
        }

        return sb.toString();

    }

}
...
Рейтинг: 0 / 0
13.04.2018, 08:26
    #39629594
13-й Пилигрим
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как в Java вычитать HTML код страницы с нужным параметром в теге select ?
Solenoid, откройте для себя POST-запросы.
...
Рейтинг: 0 / 0
13.04.2018, 08:57
    #39629608
Alexander A. Sak
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как в Java вычитать HTML код страницы с нужным параметром в теге select ?
Куки еще надо открыть. Там, похоже, выбор валюты сохраняется в сессии.
...
Рейтинг: 0 / 0
13.04.2018, 17:17
    #39630037
Solenoid
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как в Java вычитать HTML код страницы с нужным параметром в теге select ?
В общем алгоритм действий представляется примерно таким:
1. Открыть соединение HttpURLConnection
2. Записать параметры в соединение после того, как соединение открыто
3. Получить Moved Temporarily на нужную страницу
4. Получить куку из заголовка
5. Отправить запрос с кукой на новую страницу

Это единственно возможный способ или всё таки можно как-то сразу первым же запросом с параметрами получить требуемые данные?
...
Рейтинг: 0 / 0
Форумы / Java [игнор отключен] [закрыт для гостей] / Как в Java вычитать HTML код страницы с нужным параметром в теге select ? / 4 сообщений из 4, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]