Гость
Форумы / HTML, JavaScript, VBScript, CSS [игнор отключен] [закрыт для гостей] / Чем можно парсить динамически обновляемые страницы сайтов? / 6 сообщений из 6, страница 1 из 1
14.01.2022, 17:16
    #40126695
Dadont
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
Например, вот такую:
https://ru.tradingview.com/crypto-screener/
подскажите плиз
...
Рейтинг: 0 / 0
15.01.2022, 09:32
    #40126779
uProger
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
Dadont,


На каком стеке работаете?? а вообщето скрапинг веб страниц по любому работать будет слишком медленно для получения катировок в реальном времяни.

Если реально надо то фиды можно покупать ))) Но я давно с данной темой не работаю, так что не помню уже где и как.
...
Рейтинг: 0 / 0
15.01.2022, 09:58
    #40126780
Dadont
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
uProger
Dadont,


На каком стеке работаете?? а вообщето скрапинг веб страниц по любому работать будет слишком медленно для получения катировок в реальном времяни.

Если реально надо то фиды можно покупать ))) Но я давно с данной темой не работаю, так что не помню уже где и как.


Стек не важен, мне нужен принцип или инструмент, чтобы парсить такие данные. Покупать пока не на что))) API у них нет(((
...
Рейтинг: 0 / 0
15.01.2022, 11:39
    #40126791
fkthat
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
Dadont
API у них нет(((

Если у них страница обновляется динамически, то АПИ должен быть, хотя бы неофициальный - данные для обновлений она ведь откуда-то берет. Открывай страницу в бразере и смотри внимательно запросы. Там, конечно (да и скорее всего) может быть вебсокет, но и для них есть средства чтобы оттрейсить. А так тебе правильно сказали - парсинг страницы в твоем случае это тупиковый путь.
...
Рейтинг: 0 / 0
15.01.2022, 20:34
    #40126932
uProger
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
Dadont,

Ну скажем на PHP, Python или Node.js у каждого свой модули и библиотеки для парсинга.

А вообщем случае получаем код страницы и выбираем от туда что надою скажем все заголовка h1 или содержимое дивов с определённым классом или id
...
Рейтинг: 0 / 0
17.01.2022, 17:24
    #40127255
Dadont
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Чем можно парсить динамически обновляемые страницы сайтов?
Нашел скриптик на ПХП, который выдирает нужные данные
Спасибо всем!
...
Рейтинг: 0 / 0
Форумы / HTML, JavaScript, VBScript, CSS [игнор отключен] [закрыт для гостей] / Чем можно парсить динамически обновляемые страницы сайтов? / 6 сообщений из 6, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]