Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / WinForms, .Net Framework [игнор отключен] [закрыт для гостей] / Как парсить googl-запросы? / 10 сообщений из 10, страница 1 из 1
22.04.2014, 01:01
    #38620976
ayvango
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
Язык программирования C#.
Поискал по интернету, нашёл разные коды, в том числе и этот код http://www.cyberforum.ru/csharp-beginners/thread403899.html

Только вот с обычными страницами они работают, а вот гугл-запросы осилить не могут.
Что мне надо: вводить запросы и автоматически искать определённые статьи. Я не спамер и не плагиатор. И как делать дополнительный (расширенный) поиск?
...
Рейтинг: 0 / 0
22.04.2014, 01:53
    #38620983
bazile
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
ayvango, если я тебя правильно понял, ты хочешь отправить поисковый запрос гуглу и распарсить ответную страницу. Просто так это не получится т.к. google активно использует JS для формирования результата. Можно попробовать отправлять запросы через компонент WebBrowser и вытягивать данные из него. Имей также в виду что гугл не любит автоматизированные запросы к своим поисковым страницам и активно с этим борется.
...
Рейтинг: 0 / 0
22.04.2014, 14:20
    #38621554
ayvango
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
Да, правильно. А можно тогда делать запросы через yahoo или yandex?
...
Рейтинг: 0 / 0
22.04.2014, 15:21
    #38621680
jenya7
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
bazile Имей также в виду что гугл не любит автоматизированные запросы к своим поисковым страницам и активно с этим борется.

а как они распознают автоматизированные запросы? может можно запрос как-то завуалировать?
...
Рейтинг: 0 / 0
22.04.2014, 15:23
    #38621685
bazile
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
ayvango, можно или нет узнавай в лицензии на использование поисковой системы. На вопрос _возможно ли_ делать запросы через ПодставьтеИмяСайта, ответ - да. Конкретно для Яндекса я бы использовал сервис Яндекс.XML
...
Рейтинг: 0 / 0
22.04.2014, 15:25
    #38621690
bazile
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
jenya7а как они распознают автоматизированные запросы?
Используют специально дрессированных голубей .
...
Рейтинг: 0 / 0
22.04.2014, 15:33
    #38621705
jenya7
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
bazilejenya7а как они распознают автоматизированные запросы?
Используют специально дрессированных голубей .

все равно не понимаю, набрал я руками в поисковике или програмно какая разница?
...
Рейтинг: 0 / 0
22.04.2014, 15:56
    #38621760
bazile
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
jenya7, 1) про голубей это была шутка.

2) для поисковиков есть разница поступает ли запрос от человека или от программы (робот). Потому что поисковик предназначен в первую очередь для людей роботы создают нагрузку мешающую посетителям. Эти программы так же нередко используются для черного SEO с целью манипуляции поисковыми результатами.

3) Как именно гугл/яндекс/yahoo/bing/.. отличают роботов от живых людей не раскрывается. Они могут анализировать частоту запросов и их корреляцию, "поведение" посетителя, http заголовки присланные в запросе и т.д. и т.п.
...
Рейтинг: 0 / 0
22.04.2014, 16:07
    #38621786
jenya7
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
bazilejenya7, 1) про голубей это была шутка.

2) для поисковиков есть разница поступает ли запрос от человека или от программы (робот). Потому что поисковик предназначен в первую очередь для людей роботы создают нагрузку мешающую посетителям. Эти программы так же нередко используются для черного SEO с целью манипуляции поисковыми результатами.

3) Как именно гугл/яндекс/yahoo/bing/.. отличают роботов от живых людей не раскрывается. Они могут анализировать частоту запросов и их корреляцию, "поведение" посетителя, http заголовки присланные в запросе и т.д. и т.п.

сперва у меня закралось сомнение про голубей, но потом купился :)
...
Рейтинг: 0 / 0
23.04.2014, 12:09
    #38622769
ЕвгенийВ
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Как парсить googl-запросы?
Есть такая штука .
Либо, как вариант представляться гуглю каким нибудь стареньким браузером, который плохо понимает javascript, тогда он будет возвращать html.
...
Рейтинг: 0 / 0
Форумы / WinForms, .Net Framework [игнор отключен] [закрыт для гостей] / Как парсить googl-запросы? / 10 сообщений из 10, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]