Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440) / Oracle

ReSQL.ru

Мобильная версия Контакт Правила FAQ Помощь

Гость

Войти | Регистрация | Профиль | Очистить

Новые сообщения | Избранное

Форумы | Пользователи | Статистика | Мод. лог | Поиск

Цитировать

Написать

Автор*:

Ввести пароль для входа

Тема*:

Сообщение

Данное сообщение тематическое

Сообщение содержит картинки или видео 18+

Автор:

ВНИМАНИЕ! На данном подфоруме действуют строгие правила. Удостоверьтесь, что ваше сообщение соответствует им!

Форум или тема закрыты для гостей. Необходима авторизация!

Загрузить последнюю сохраненную версию

Вложение:

Вставить как галерею

Максимальный размер вложений: 4,0 МБ, аудио/видео: 8,0 МБ. Картинки большего размера ужимаются, если возможно.

Введите код, изображенный на картинке. Если код нечитаемый, кликните картинку, чтобы загрузить другой вариант.

Отправляя сообщение, я выражаю свое согласие с правилами форума и принимаю пользовательское соглашение.

Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр

Форумы / Oracle [игнор отключен] [закрыт для гостей] / Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

15 сообщений из 15, страница 1 из 1

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38074825

arusnak

Гость

Доброго времени суток.

Необходимо парсить xml содержащий Unicode символы.
В Oracle 10.2.0.5.0 и 11.2.0.1 работает, а в 11.2.0.3 не работает. Возникает ошибка LPX-00217: недопустимый символ.

Вот запрос для примера:
set define off
select xmltype.createxml('<xml>руб</xml>') from dual
/

Подскажите, пожалуйста, это баг? Как можно обойти данную проблему? Может какие-нибудь настройки надо сделать? Или патч установить?

...

Рейтинг:

0 / 0

11.12.2012, 20:03:59

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38074840

arusnak

Гость

Прошу прощения, вот запрос для тестов

Код: plsql

1.
2.
3.

set define off
select xmltype.createxml('<xml>&#x440;&#x443;&#x431;</xml>') from dual
/

...

Рейтинг:

0 / 0

11.12.2012, 20:20:15

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38074843

-2-

Участник

Сообщения: 15 349

Рейтинг: 0 / 0

arusnak,

бд работает в кодировке бд. если кодировка символов отличается, то используй бинарные данные или универсальную национальную кодировку

...

Рейтинг:

0 / 0

11.12.2012, 20:22:51

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38075173

arusnak

Гость

Не понял про кодировку. Кодировка всех 3-х баз CL8MSWIN1251.
Только для версии 11.2.0.3 парсер не может правильно обработать Unicode символы и выдает ошибку.

Вот например здесь http://oraclespot.wordpress.com/2012/01/27/bug11877267/ утверждается, что для версии 11.2.0.2 парсер поменяли и что это может быть баг. Такие же заявления видел еще в нескольких местах.

Даже если это баг, что делать с Uicode символами? Может их как-то можно все найти и преобразовать перед парсингом?

...

Рейтинг:

0 / 0

12.12.2012, 09:28:43

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38076101

arusnak

Гость

Проверил еще на одной базе 11.2.0.3.0 у которой кодировка AL32UTF8. Парсинг с xml с юникодом работает!

Поэтому выход такой: преобразуем clob xml в blob и создаем xmltype следующим образом

Код: plsql

v_xml_type := xmltype(l_blob, nls_charset_id('UTF8'));

т.е всегда кодировка все должна быть 'UTF8'

тема закрыта

...

Рейтинг:

0 / 0

12.12.2012, 16:30:44

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38264920

a.l.e.x.a.n.d.r

Гость

arusnak,

а вот такое не тоже самое?

select XMLType(BFileName(F.File_DIR,f.full_file_name),NLS_CharSet_ID ('UTF8')) into loFile from dual;

...

Рейтинг:

0 / 0

20.05.2013, 17:27:01

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38566562

karlov69

Гость

Та же проблема.
Когда делаю
select XMLType(BFileName('XMLXSD','filename.xsd'),NLS_CharSet_ID('UTF8')) from dual;
получаю ошибку
:
LPX-00217: invalid character 55013(U+D6E5)

символа D6E5 в файле нет.

...

Рейтинг:

0 / 0

19.02.2014, 17:26:47

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38566596

-2-

Участник

Сообщения: 15 349

Рейтинг: 0 / 0

karlov69символа D6E5 в файле нет.Есть - это 'Це' в кодировке 1251. В отличие от однобайтовой кодировки, в utf-8 не все последователности байтов допустимы.

...

Рейтинг:

0 / 0

19.02.2014, 17:48:53

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#38566642

karlov69

Гость

-2-,

А как сделать, чтоб не ругалось?

...

Рейтинг:

0 / 0

19.02.2014, 18:21:08

| Ответить | Цитировать | Написать

Период между сообщениями больше года.

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39012568

Pastic

Участник

Откуда: Москва

Сообщения: 1 834

Рейтинг: 0 / 0

Такая же проблема:
ORA-31011: XML parsing failed
ORA-19202: Error occured in XML processing
In line 1 of stream:
LPX-00217: Invalid character 16 (U+0010)

при выполнении запроса

Код: plsql

1.
2.
3.
4.

create table as
select any_path DBMS_XDB.GETCONTENTXMLTYPE(any_path) xml
from XDB.Resource_view t
where instr(any_path, '/images_201307051406')>0

СУБД Oracle 11.2.0.3 Standart Edition.

Выполнил

Код: plsql

alter system set event=’31156 trace name context forever, level 0x400&#8242; scope=spfile;

, как советовали тут - не помогло.

...

Рейтинг:

0 / 0

21.07.2015, 17:08:10

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39012579

ArtNick

Участник

Сообщения: 1 232

Рейтинг: 0 / 0

Pastic,
вероятно 15592169 , для более точной диагностики надо данные смотреть

...

Рейтинг:

0 / 0

21.07.2015, 17:22:54

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39012593

-2-

Участник

Сообщения: 15 349

Рейтинг: 0 / 0

ArtNickвероятно 15592169 , для более точной диагностики надо данные смотретьсудя по части имени пути к файлу, там не только xml в кодировке бд, а скорее совсем наоборот.

...

Рейтинг:

0 / 0

21.07.2015, 17:40:39

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39013218

Pastic

Участник

Откуда: Москва

Сообщения: 1 834

Рейтинг: 0 / 0

ArtNickPastic,
вероятно 15592169 , для более точной диагностики надо данные смотреть

Как бы их ещё посмотреть?

...

Рейтинг:

0 / 0

22.07.2015, 12:00:15

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39013333

Pastic

Участник

Откуда: Москва

Сообщения: 1 834

Рейтинг: 0 / 0

Вот так сработало без ошибок:

Код: plsql

1.
2.
3.
4.

create table tt_xml as
select any_path, DBMS_XDB.GETCONTENTXMLTYPE(any_path).getclobval() xml
from XDB.Resource_view t
where instr(any_path, '/images_201307051406')>0

...

Рейтинг:

0 / 0

22.07.2015, 13:20:06

| Ответить | Цитировать | Написать

Unicode символы, ошибка при обработке XML LPX-00217: недопустимый символ 1088 (U+0440)

#39262690

kaldorey

Участник

Сообщения: 572

Рейтинг: 0 / 0

Добрый день!
Немного реанимирую топик.
Есть файлы xml

Код: xml

1.
2.
3.
4.
5.

<?xml version="1.0" encoding="windows-1251" ?>
 <elements>
  <elem>...</elem>
  <elem>...</elem>
 </elements>

Есть база в al32utf8.
Каждый день идет загрузка файлов loadclobfromfile -> xmldom, парсинг каждого elem в clob и по определенному условию сохраняется в таблице как xmltype.
И так вполне успешно гигабайты файлов прокручивает день за днем. Но примерно раз в месяц возникает

Код: plsql

1.
2.
3.
4.

ORA-64464: XML event error
ORA-19202: Error occurred in XML processing
In line 171 of orastream:
LPX-00217: invalid character 159 (U+009F)

Символы могут быть разные.
Аналогичный результат получается и в случае, когда проблема локализована и помещена в отдельный файл

Код: xml

1.
2.
3.
4.

<?xml version="1.0" encoding="windows-1251" ?>
 <elements>
  <elem>...</elem>
 </elements>

таким способом

Код: plsql

1.
2.

select xmltype(bfilename(v_dir, v_filename), nls_charset_id('CLMSWIN1251')) asd
from dual

А вот если таким способом грузить исходный xml - то все ок.
Проблема решается быстро, когда в hex редакторе найдешь где проблема и, если это в незначащей области xml, поставишь пробел.
Но если в значащей области, уже сложнее. Сейчас пока решил, если получаю такой exception, в clob, содержащий elem, над которым выполняется xmltype(), добавляю

Код: xml

<?xml version="1.0" encoding="utf-8" ?>

Если добавлять изначально, то проблема возникала примерно с такой же частотой, но у файлов, которые без этого куска обрабатывались.
Это помогает, но кажется, способ тот еще костыль, возможно, теперь раз в год может проблема возникать, может вообще больше не возникнет, но гарантии нет. Есть конечно вариант выкинуть xmldom, clob и сразу работать с xmltype, но переделывать придется очень много, и также гарантии нет, что не свалится.
Помогите добраться до сути.

...

Рейтинг:

0 / 0

27.06.2016, 08:48:20

| Ответить | Цитировать | Написать

15 сообщений из 15, страница 1 из 1

Читали тему (0):

Читали форум (0):

Пользователи онлайн (0):

start [/forum/topic.php?fid=52&msg=39012579&tid=1888009]:	0ms
get settings:	5ms
get forum list:	10ms
check forum access:	2ms
check topic access:	2ms
track hit:	235ms
get topic data:	8ms
get forum data:	2ms
get page messages:	34ms
get tp. blocked users:	1ms
others:	201ms

total:	500ms

	Необходимые cookie
	Cookie для сбора статистики
	Cookie для маркетинга и рекламы