ReSQL.ru
     
powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / WinForms, .Net Framework [игнор отключен] [закрыт для гостей] / Подменить IP отправителя в TCP IP
22 сообщений из 22, страница 1 из 1
Подменить IP отправителя в TCP IP
    #39282373
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
Привет, нужно обойти защиту при скачивании контента скйта.
Решил имитировать ГуглБот-а. Подмена заголовка проблему не решает.
Возможно проверяют по обратному DNS. Отсюда и вопрос.
Вообще интересует данная тема, может есть другие предложения, сторонние решения?

Спасибо.
...
Рейтинг: 0 / 0
29.07.2016, 08:25
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282384
Фотография Cat2
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Cat2
Модератор форума
WitC,

Правилами форума запрещены обсуждения способов взлома

http://www.sql.ru/forum/rules.aspx Запрещается:

публикация серийных ключей, лицензий, способов взлома ПО и других методов, которые можно квалифицировать как преследуемые по закону;
...
Рейтинг: 0 / 0
29.07.2016, 08:41
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282412
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
Cat2,

опа, с сайта я хотел забрать публичные данные для аналитической статистики.
сайт защищается капчей google recaptcha2 после нескольких десятков обращений.

ни каких взломов паролей, ни какой DDOS-атаки.
просто сканировать контент и забирать от туда публично-доступные данные для статистики.

т.е. я руками и глазами данные собирать могу, а программным средством запрещено законом?
и подмена IP адреса в IP-пакетах уголовно наказуемо?

а как же куча программ-роботов? тот же гугл со своими поисковыми/индексирующими роботами?
...
Рейтинг: 0 / 0
29.07.2016, 09:30
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282422
Dima T
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Dima T
Участник
WitCопа, с сайта я хотел забрать публичные данные для аналитической статистики.
сайт защищается капчей google recaptcha2 после нескольких десятков обращений.
Ну так сайт и защитился именно от таких "собирателей". По каким причинам - личное дело сайта. Может чтобы не перегружали запросами, может еще зачем.
По-хорошему к владельцам сайта надо обращаться, если инфа публичная, то возможно там api какое-нибудь есть для роботов.

WitCи подмена IP адреса в IP-пакетах уголовно наказуемо?
Подмена IP адреса технически возможна, только получатель такого пакета ответ отправит на тот IP, а не на твой.

WitCа как же куча программ-роботов? тот же гугл со своими поисковыми/индексирующими роботами?
Роботам поисковиков можно дать понять что не надо на твой сайт заходить. Как это сделать - у них в документации описано.
...
Рейтинг: 0 / 0
29.07.2016, 09:43
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282430
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
WitC, работа поисковых роботов вполне себе легальна ИМХО.
И сайто-строители для них создают специальне подсказки
где стоит индексировать а где нет.

Коробочное решение для автора это использование прокси-сервера
(тысячи их) и работать на уровне TCP для скачиваний нет смысла.
Интерфейс HTTP дает достаточно возможностей.
...
Рейтинг: 0 / 0
29.07.2016, 09:50
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282442
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
Dima T,

с ответом на подменный IP - согласен. вариант отпадает.

сейчас вижу два способа:
1. увеличить время между итерациями обращения к страницам.
2. подключиться по динамическому IP и переключать соединение с провайдером при переадресации на страницу капчи.

это всё можно решить стандартными (сторонними) пауками.

есть ещё варианты с обходом капчи?
...
Рейтинг: 0 / 0
29.07.2016, 10:04
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282452
Dima T
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Dima T
Участник
WitC2. подключиться по динамическому IP и переключать соединение с провайдером при переадресации на страницу капчи.
Не поможет. Будешь получать тот же самый IP что и был. Почитай как DHCP работает.

WitCесть ещё варианты с обходом капчи?
Написать свой капча-распознователь ))
...
Рейтинг: 0 / 0
29.07.2016, 10:10
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282457
Фотография Изопропил
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Изопропил
Участник
WitCсейчас вижу два способа:
обратиться к владельцам сайта - конечно не вариант
...
Рейтинг: 0 / 0
29.07.2016, 10:14
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282466
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
Dima TНаписать свой капча-распознователь ))

))
...
Рейтинг: 0 / 0
29.07.2016, 10:20
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282482
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
Изопропилобратиться к владельцам сайта - конечно не вариант

здаётся мне, что пошлют меня. )
...
Рейтинг: 0 / 0
29.07.2016, 10:29
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282496
Фотография ЕвгенийВ
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ЕвгенийВ
Участник
WitCИзопропилобратиться к владельцам сайта - конечно не вариант

здаётся мне, что пошлют меня. )
То, что нельзя купить за большие деньги, можно купить за очень большие деньги.
...
Рейтинг: 0 / 0
29.07.2016, 10:41
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282505
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
WitC, у тебя что регион зобанен или страна?

Смени своего провайдера. Может проблема решиться сама собой и хачить IP заголовки
не надо будет.
...
Рейтинг: 0 / 0
29.07.2016, 10:51
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282506
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
ЕвгенийВ,

... был бы я владельцем GOOGLE ...
...
Рейтинг: 0 / 0
29.07.2016, 10:52
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282532
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
maytonWitC, у тебя что регион зобанен или страна?

Смени своего провайдера. Может проблема решиться сама собой и хачить IP заголовки
не надо будет.

не банят они.

если за некоторый промежуток времени идёт большое кол-во запросов, перекидывают на страницу капчи.
если капчу не ввёл - значит робот. если робот - бродить лесом на десяток минут.
потом опять несколько десятков запросов ... и так в цикле.

провайдер не при чём.
вот этот десяток минут ждать не хочется, я бы время увеличил между запросами, что бы сайт не нагружать...
но опять же, интервал надо тестировать на практике, что в любой момент могу сбойнуть.
...
Рейтинг: 0 / 0
29.07.2016, 11:08
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282541
Фотография Изопропил
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Изопропил
Участник
WitCпровайдер не при чём.
провайдер - это не владелец сайта
...
Рейтинг: 0 / 0
29.07.2016, 11:13
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282551
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
WitCпровайдер не при чём.
вот этот десяток минут ждать не хочется, я бы время увеличил между запросами, что бы сайт не нагружать...
но опять же, интервал надо тестировать на практике, что в любой момент могу сбойнуть.
Ну смотри. Если у тебя 1 worker и работает с интервалом 1 раз в 10 минут.
Подключаешь себе еще 9 workers, и каждый из них пускаешь через свой proxy.
Списки прокси нагуглишь сам (тысячи их).

И получаешь суммарную пропускную способность 1 запрос 1 минуту для твоей системы.
Ну чтоб не банили возьми с запасом интервал еще +10% времени.
...
Рейтинг: 0 / 0
29.07.2016, 11:21
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282577
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
ИзопропилWitCпровайдер не при чём.
провайдер - это не владелец сайта

я понимаю, читай от "mayton", выше по переписке, я отвечал на предположение коллеги.
хотя ни кто не запрещает быть провайдером и владельцем сайта в одном лице, ещё и хоститься на своих серверах... ))
...
Рейтинг: 0 / 0
29.07.2016, 11:42
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282599
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
WitC,

ну, ок. я понял, что конкретных предложений больше не будет.
спасибо, буду отталкиваться от текущих.

к стати, сегодня не забываем попить пивка с админами!
админам sql.ru - респект и уважуха! :)
...
Рейтинг: 0 / 0
29.07.2016, 11:57
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282644
Dima T
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Dima T
Участник
WitC, то что тебе капчу выдают это еще хорошо, можно жестче поступать - кормить робота кривой инфой, сделать ее похожей на правду, например курсы валют можно подредактировать каким-нибудь ГСЧ и т.д.
Я к тому что способ решения своей проблемы ты далеко не самый удачный выбрал.
...
Рейтинг: 0 / 0
29.07.2016, 12:38
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282677
Фотография mayton
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
mayton
Участник
Если сервис действительно очень ценен то наверное имеет смысл заключить с его
поставщиком договор. В эпоху SOAP/Rest это технически реализуется даже проще
чер ломание капчь и разпарсивание ХТМЛ со скриптами.
...
Рейтинг: 0 / 0
29.07.2016, 12:58
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282955
Фотография Изопропил
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Изопропил
Участник
WitCхотя ни кто не запрещает быть провайдером и владельцем сайта в одном лице, ещё и хоститься на своих серверах... ))
общаться в данном случае нужно с ипостасью "владелец"
...
Рейтинг: 0 / 0
29.07.2016, 16:20
| Ответить | Цитировать | Написать  
Подменить IP отправителя в TCP IP
    #39282995
WitC
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
WitC
Гость
ИзопропилWitCхотя ни кто не запрещает быть провайдером и владельцем сайта в одном лице, ещё и хоститься на своих серверах... ))
общаться в данном случае нужно с ипостасью "владелец"

да, это был бы лучший вариант.
...
Рейтинг: 0 / 0
29.07.2016, 16:44
| Ответить | Цитировать | Написать  
22 сообщений из 22, страница 1 из 1
Форумы / WinForms, .Net Framework [игнор отключен] [закрыт для гостей] / Подменить IP отправителя в TCP IP
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=20&msg=39282505&tid=1400439]:
 0ms
get settings:
 10ms
get forum list:
 15ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 50ms
get topic data:
 12ms
get forum data:
 3ms
get page messages:
 59ms
get tp. blocked users:
 1ms
others: 265ms
total:  423ms
созд. / загр.: 423ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]