Спарсить сайт на японском языке / PHP, Perl, Python

2.0.51

Полная версия Контакт Правила FAQ Помощь

Гость

Нов. | Гор. | Избр.

Действия ...

Доб. в избранное
Игнор. тему
Прикреп. тему
Пометить прочит. / непрочит.
Фильтр:
Сообщения автора темы
Сообщение содержит вложения
Сообщение содержит картинки
Сообщение содержит видеоклипы
Сообщение содержит аудиоклипы
Сообщение содержит картинки или видео 18+

Форумы / PHP, Perl, Python [игнор отключен] [закрыт для гостей] / Спарсить сайт на японском языке / 4 сообщений из 4, страница 1 из 1

26.05.2017, 08:19

#39460102

Fedor32

Гость

Спарсить сайт на японском языке

Необходимо взять информацию с сайта на котором вместо букв японские иероглифы.
Для начала взял исходный текст странички из браузера, сохранил в файл и оттуда уже производил разбор. Все получилось, но когда начал загружать страничку непосредственно по адресу сайта возникли проблемы с кодировкой - вместо иероглифов - кракозябры

кодировка сайта Shift_JIS

Как с этим бороться?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

26.05.2017, 08:29

#39460106

Изопропил

Участник

Сообщения: 33 046
Рейтинг: 0 / 0

Спарсить сайт на японском языке

Fedor32Все получилось, но когда начал загружать страничку непосредственно по адресу сайта
а как её ещё загружать?
с диска?

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

26.05.2017, 08:38

#39460109

Fedor32

Гость

Спарсить сайт на японском языке

Получаю

Код: html

1.
2.
3.

<title>&#65533;S&#65533;&#65533;&#65533;&#780;&#65533;&#65533;z&#65533;&#1868;v - i&#65533;^&#65533;E&#65533;&#65533;&#65533;y&#65533;[&#65533;W</title>
<meta name="description" content="&#65533;&#65533;&#65533;{&#65533;S&#65533;&#65533;&#65533;&#770;&#65533;&#65533;X&#65533;&#65533;{&#65533;&#1858;&#65533;&#65533;T&#65533;&#65533;&#65533;&#65533;u&#65533;&#65533;&#65533;^&#65533;E&#65533;&#65533;&#65533;y&#65533;[&#65533;W&#65533;v&#65533;&#322;&#833;A&#65533;S&#65533;&#65533;&#65533;&#780;&#65533;&#65533;z&#65533;&#1868;v&#65533;&#783;&#65533;&#65533;37668&#65533;&#65533;&#65533;B&#65533;d&#65533;b&#65533;&#1293;&#65533;&#65533;&#834;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;A&#65533;n&#65533;}&#65533;&#8395;&#65533;[&#65533;g&#65533;&#275;&#65533;&#65533;&#1794;&#337;S&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#29466;&#65533;z&#65533;&#1868;v&#65533;&#322;&#65533;&#65533;T&#65533;&#65533;&#65533;&#783;&#65533;&#273026;&#65533;&#65533;&#65533;&#65533;&#578;&#1858;&#130;&#65533;&#65533;&#65533;&#1794;&#65533;&#65533;I" />
<meta name="keywords" content="&#65533;&#65533;&#65533;z&#65533;&#1868;v,&#65533;n&#65533;},&#65533;&#65533;&#65533;X,&#65533;&#65533;&#385;E&#65533;X&#65533;&#1807;&#65533;&#65533;,&#65533;&#65533;&#65533;[&#65533;g&#65533;&#275;&#65533;,&#65533;&#65533;&#65533;&#65533;&#65533;R&#65533;~,&#65533;d&#65533;b&#65533;&#1293;&#65533;,&#65533;Z&#65533;&#65533;,i&#65533;^&#65533;E&#65533;&#65533;&#65533;y&#65533;[&#65533;W,&#65533;W&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;&#65533;" />

Нужно получить с иегорлифами вместо кракозябр

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

26.05.2017, 09:46

#39460159

Fedor32

Гость

Спарсить сайт на японском языке

Решил таким путем

Код: php

$file_data = iconv('Shift-JIS', 'UTF-8', $file_data);

...

Рейтинг:

0 / 0

| Ответить | Цитировать | Написать

Написать

Автор*:

Ввести пароль для входа

Тема*:

Сообщение

Данное сообщение тематическое

Сообщение содержит картинки или видео 18+

Автор:

ВНИМАНИЕ! На данном подфоруме действуют строгие правила. Удостоверьтесь, что ваше сообщение соответствует им!

Форум или тема закрыты для гостей. Необходима авторизация!

Загрузить последнюю сохраненную версию

Вставить как галерею

Максимальный размер вложений: 4,0 МБ, аудио/видео: 8,0 МБ. Картинки большего размера ужимаются, если возможно.

Введите код, изображенный на картинке. Если код нечитаемый, кликните картинку, чтобы загрузить другой вариант.

Отправляя сообщение, я выражаю свое согласие с правилами форума и принимаю пользовательское соглашение.

Читали тему (0):

Читали форум (0):

Пользователи онлайн (0):

start [/forum/search_topic.php?author=%D0%9F%D0%B0%D0%B2%D0%BB%D0%BE%D0%B2+%D0%A1%D0%B5%D1%80%D0%B3%D0%B5%D0%B9&author_mode=last_topics&do_search=1]:	0ms
get settings:	11ms
get forum list:	15ms
get settings:	11ms
get forum list:	13ms
get settings:	9ms
get forum list:	12ms
check forum access:	3ms
check topic access:	3ms
track hit:	38ms
get topic data:	12ms
get forum data:	3ms
get page messages:	47ms
get tp. blocked users:	2ms
others:	2217ms

total:	2396ms