Этот баннер — требование Роскомнадзора для исполнения 152 ФЗ.
«На сайте осуществляется обработка файлов cookie, необходимых для работы сайта, а также для анализа использования сайта и улучшения предоставляемых сервисов с использованием метрической программы Яндекс.Метрика. Продолжая использовать сайт, вы даёте согласие с использованием данных технологий».
Политика конфиденциальности
|
|
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
Здравствуйте, не могу сообразить, как можно спарсить выпадающие подсказки при вводе слов в поле input type="search". Вот этот сайт упирается) — тыц ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 00:11 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
А чего их парсить то... В сетевой активности видно же запрос к серверу. В параметре q начало слова, в ответе JSON с вариантами приходит. Код: sql 1. {"status":200,"data":{"size":10,"autocompletions":[{"pattern":"фото","probability":0.04377219952924052},{"pattern":"фонтан","probability":0.03804218406276172},{"pattern":"фоновые изображения","probability":0.030847332090727347},{"pattern":"фотоаппарат","probability":0.028736262710856164},{"pattern":"фонарь","probability":0.026409782372879775},{"pattern":"фотограф","probability":0.01809473043303808},{"pattern":"фонтаны","probability":0.01753468293718464},{"pattern":"фонари","probability":0.016457628146658614},{"pattern":"фото обои","probability":0.014044962430220055},{"pattern":"фотографировать","probability":0.013010947840874896}]}} ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 00:38 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
Вы какое слово вводили? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 00:51 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
Всё здорово, только если руками вводить) Как это автоматизировать? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 01:01 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejk, что конкретно автоматизировать? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 08:26 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejkВы какое слово вводили?Буквы "фо" (начало слова "фото"). ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 09:02 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejkВсё здорово, только если руками вводить) Как это автоматизировать? в коде страницы этого нет. так что боюсь что ни как!! Если только в браузер влесть(типо расширения) но тут я не уверен ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 10:25 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
skyANAandrejk, что конкретно автоматизировать? Парсинг этих подсказок для некоторых слов. Запрос-то, виден в dev tool и данные приходят в json, но только с их страницы. Может, как-то напрямую запросы им отправлять? Не знаю как… Уже до Selenium-а добрался. ) ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 10:46 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejk, А чё, не видать куда уходят запросы? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 11:00 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
hVosttandrejk, А чё, не видать куда уходят запросы? Видать, и что мне с этим делать? Я же не могу скрипт запустить, если в адресной строке не их адрес. Или я чего-то не знаю? Как мне в цикле получить данные сразу по нескольким словам, чтоб руками не вводить? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 12:10 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejk, .. curl ? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 12:27 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejkhVosttandrejk, А чё, не видать куда уходят запросы? Видать, и что мне с этим делать? Я же не могу скрипт запустить, если в адресной строке не их адрес. Или я чего-то не знаю? Как мне в цикле получить данные сразу по нескольким словам, чтоб руками не вводить? Какой скрипт? Клиентский сценарий? Дык с сервера опрашивайте. Вы бы задачу толком описали :) А то что такое "Парсинг этих подсказок для некоторых слов" и на фига оно нужно мне до конца не понятно. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 12:49 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejkВидать, и что мне с этим делать? Я же не могу скрипт запустить, если в адресной строке не их адрес. Или я чего-то не знаю?С чего вдруг? Выше постил ссылку. Не открывается в браузере? andrejkКак мне в цикле получить данные сразу по нескольким словам, чтоб руками не вводить?Эммм... Часть слова для подсказки подставить в параметр q (см. тот же пост выше). Ну да, в цикле по всем вашим заранее приготовленным словам. Пока не забанят, конечно. skyANAВы бы задачу толком описали :) А то что такое "Парсинг этих подсказок для некоторых слов" и на фига оно нужно мне до конца не понятно.+100500 ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 19:40 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
carrotikandrejk, .. curl ? Попробовал, вроде получается… ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 22:51 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
skyANAКакой скрипт? Клиентский сценарий? Дык с сервера опрашивайте. Вы бы задачу толком описали :) А то что такое "Парсинг этих подсказок для некоторых слов" и на фига оно нужно мне до конца не понятно. Я имел ввиду, что когда я на их сайте, то на своей стороне не сообразил, как свой скрипт запускать, чтобы он к их сайту обращался. Думал сначала, как свой скрипт на их страницу внедрить, чтобы он в цикле заполнял поле и получал подсказки. Но это прошлое, не туда думал) Даже не парсинг, а просто получение подсказок, т. к. ничего другого не делается, отличного от ручного ввода, просто автоматизируется, разумеется, с адекватными интервалами. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 23:00 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
andrejk, Начинающий дата-майнер ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 23:01 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
автори на фига оно нужно мне до конца не понятно seo? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 23:13 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
hVosttandrejk, Начинающий дата-майнер Кто это такие? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 23:14 |
|
||
|
Как спарсить подсказки
|
|||
|---|---|---|---|
|
#18+
Уже поинтересовался. Да, мне нравится восстанавливать чужие алгоритмы по внешним признакам, но только, если мне это надо. Поэтому, я всегда буду начинающим, т. к. это страсть моего ума, а не профдеятельность. Я просто получаю от этого удовольствие с практической пользой. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.04.2017, 23:19 |
|
||
|
|

start [/forum/topic.php?fid=22&gotonew=1&tid=1444661]: |
0ms |
get settings: |
9ms |
get forum list: |
12ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
93ms |
get topic data: |
9ms |
get first new msg: |
8ms |
get forum data: |
2ms |
get page messages: |
51ms |
get tp. blocked users: |
1ms |
| others: | 11ms |
| total: | 202ms |

| 0 / 0 |
