|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Собственно есть spring приложение которое вызывает функцию возвращаю xml в clob'е. Само взаимодействие с базой данных происходит через DAO (java классы генерятся с помощью jooq-codegen). Все работает хорошо ровно до тех пор функция не пытается вернуть clob размером около 50 килобайт. И тогда spring приложение выдает : exception EBUG ReportsDao:130 - jOOQ; bad SQL grammar [begin ? := "WORK"."REPORTS_SERVER"."GETDOCUMENT"("IDNSF" => ?, "TYPEDOCUMENT" => ?); end;]; nested exception is java.sql.SQLException: ORA-06502: PL/SQL: ошибка числа или значения ORA-06512: на line 1 C clob'ами меньшего размерами все работает на ура Собственно вопрос, насколько правильно мое предположение что все дело в размере и как с этим бороться? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:34 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
PS сама функция в sql developer работает на ура и возвращает clob большого размера без проблем ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:35 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Пример кода доступа кидайте. То, что генерятся через какую-то тулзу, ни о чем не говорит сообщение об ошибке говорит о том, что неправильно определились типы данных. Скорее всего CLOB пытаются в PL/SQL VARCHAR2 преобразовать Размер 50 Кб - очень странно. Вроде ограничение на размер PL/SQL VARCHAR2 - 32 Kb. IMHO & AFAIK ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:39 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid Kudryavtsev, Дык функция возвращает clob а не varchar2... ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:40 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975 Код: sql 1.
В этом коде ? - переменные привязки. Тип первой переменной должен быть CLOB, а у Вас похоже VARCHAR2. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:40 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:43 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975Leonid Kudryavtsev, Дык функция возвращает clob а не varchar2... То, что ф-ция возврашает CLOB, это понятно. С этим все хорошо ))) Другое дело, что Вы пытаетесь получить от Oracle. А здесь, похоже, у Вас (или в генераторе) ошибки. Вы пытаетесь получить VARCHAR2. p.s. PL/SQL VARCHAR2 отличается от "чисто" SQL VARCHAR2. В Oracle PL/SQL может быть 32 Kb, а "чисто" SQL максимум 4 K. (возможно цифры не точные, корректное описание ограничений смотрите в документации) ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:46 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid Kudryavtsev, кхм function getDocument(idnsf number, typeDocument varchar2) return clob; ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:46 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Пример JAVA кода вызова данной ф-ции. Там явно ошибки. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:48 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
авторLeonid Kudryavtsev, Код: java 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11.
Этот код генерится плагином, это не мой код. Сам код класса Код: java 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26. 27. 28. 29. 30. 31. 32. 33. 34. 35. 36. 37. 38. 39. 40. 41. 42. 43. 44. 45. 46. 47. 48. 49. 50. 51. 52. 53. 54. 55. 56. 57. 58. 59. 60. 61. 62. 63. 64. 65. 66. 67. 68. 69.
... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 13:52 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Что можно сказать - дебажить. Кодегенератор слова про CLOB воткнул. Т.ч. скорее всего Ваше описание для генератора - правильное. То, что падает ошибка, похоже бага внутри org.jooq.impl.AbstractRoutine<java.lang.String> IMHO ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 14:02 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Или написать в саппорт ))) ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 14:09 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 14:32 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Garrick, у нас тут зоопарк решений на этой технологии... переход на jdbc не решение на данный момент ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 15:24 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975Garrick, у нас тут зоопарк решений на этой технологии... переход на jdbc не решение на данный момент В любом случае, Вы (библиотека) все равно используете JDBC. Проблема только в том, что где-то ошибка. Нужно отладчиком смотреть какие реально вызовы JDBC исполняются и попытаться понять, почему это так. Тут существует два методологически разных способа решения: 1. Совестско-российский, хаккерский - найти ошибку (отладчиком) и ее исправить 2. Зарубежный - найти чесловека который сделал данную ошибки и заставить его ее исправить (обратиться в саппорт) IMHO & AFAIK ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 16:01 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
GarrickOleg_SP1975, В JDBC с этим нет проблем см. Java API for XMLType Вот у автора задача значительно более простая. У него "просто" CLOB А вот с XML Type проблем может быть выше крыши ((( Там в сложных случаях совсем все "не радостно" ((( ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 16:03 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975Garrick, у нас тут зоопарк решений на этой технологии... переход на jdbc не решение на данный момент JDBC драйвер уже используется в вашем приложении. Ничто не мешает вам использовать для вызова этой процедуры именно JDBC без всяких прослоек и это никак не повлияет на работу других частей приложения. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 16:51 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid KudryavtsevGarrickOleg_SP1975, В JDBC с этим нет проблем см. Java API for XMLType Вот у автора задача значительно более простая. У него "просто" CLOB А вот с XML Type проблем может быть выше крыши ((( Там в сложных случаях совсем все "не радостно" ((( У него не просто CLOB, а XML в CLOB'е. По ссылке, приведённой мной выше, такие случаи описываются. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 16:53 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
GarrickУ него не просто CLOB, а XML в CLOB'е. По ссылке, приведённой мной выше, такие случаи описываются. а какая разница что внутри clob? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 17:16 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975а какая разница что внутри clob? Может быть потому, что oracle.sql.CLOB != java.lang.String. Вы же надеюсь не станете использовать int для чтения из базы DECIMAL? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 18:05 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
На что мапируются данные в бизнес слое - глубоко пофиг. А что реально передается в JDBC и Oracle - пока покрыто глубоким мраком. Нужно дебагить. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 18:07 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid KudryavtsevНа что мапируются данные в бизнес слое - глубоко пофиг. А что реально передается в JDBC и Oracle - пока покрыто глубоким мраком. Нужно дебагить. Когда я вижу вот это... у меня возникают сомнения в корректности этого кода Код: java 1.
Хотя никогда не работал с jOOQ и не знаю, что там у неё за Parameter такой и что делает createParameter, но какое-то там по счёту чувство мне подсказывает, что это не правильно. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 18:17 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Garrick Код: java 1.
Хотя никогда не работал с jOOQ и не знаю, что там у неё за Parameter такой и что делает createParameter, но какое-то там по счёту чувство мне подсказывает, что это не правильно. а что тут вызывает Ваше сомнение? SQLDataType.CLOB - лично мне вызывает подозрение, что бага где-то в другом месте ((( ... |
|||
:
Нравится:
Не нравится:
|
|||
24.07.2018, 18:53 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid Kudryavtsev, весь вопрос в каком потому что java падает вот на этой строке Код: java 1.
... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 09:19 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid Kudryavtsevа что тут вызывает Ваше сомнение? SQLDataType.CLOB - лично мне вызывает подозрение, что бага где-то в другом месте ((( То, что CLOB пытаются запихнуть в String. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 10:06 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
GarrickLeonid Kudryavtsevа что тут вызывает Ваше сомнение? SQLDataType.CLOB - лично мне вызывает подозрение, что бага где-то в другом месте ((( То, что CLOB пытаются запихнуть в String. Честно говоря, лично я криминала не вижу. Да и по смыслу, CLOB это как раз очень большая строка (в отличие от BLOB, которые последовательность байт, а не строка) В любом случае, нужно просто пройтись дебагером. IDEA точно в пошаговом режиме в декопилированные классы заходить умеет, с Eclipse'ом не уверен. Да и ошибка, не Java'вская, а Oracle'вая. Т.е. с вероятностью 95% не верно вызывается registerOutParameter IMHO в любом случае, корректный маппинг (что понимать под корректный, конечно вопрос спорный) - задача библиотеки. Маппинг CLOB в String IMHO вполне корректная операция, если не привышены лимиты языка. В данном случае, лимиты java.String не превышены. С этом библиотекой не работал, т.ч. лично мне пофиг. Но пройтись дебагером и найти ошибку, задаача максимум на день. IMHO & AFAIK Код: sql 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14. 15. 16. 17. 18. 19. 20. 21. 22. 23. 24. 25. 26.
... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 13:23 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid KudryavtsevДа и ошибка, не Java'вская, а Oracle'вая. Вы не угадали. Ошибка программиста, который неправильно использует JOOG. Поскольку я сам не пользуюсь JOOG, то затрудняюсь указать её конкретнее. А может, у JOOG есть ограничение. Смотреть документацию по JOOG. авторIMHO в любом случае, корректный маппинг (что понимать под корректный, конечно вопрос спорный) - задача библиотеки. А его настройка - задача программиста. автор Да и по смыслу, CLOB это как раз очень большая строка Это рассуждение прямо подстрекает сделать ошибку в Java коде (а потом ещё можно будет поругать за неё Oracle). авторМаппинг CLOB в String IMHO вполне корректная операция, если не привышены лимиты языка. В данном случае, лимиты java.String не превышены. И это рассуждение тоже. В Oracle автоматическое преобразование из CLOB в строку работает без проблем при размере CLOB до 4K. При большем размере может возникнуть проблема от не читания документации. Но вообще можно загрузить в программу CLOB любого размера. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 15:09 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Скатываемся в offtopic ((( Вы не угадали. Ошибка программиста, который неправильно использует JOOG. Поскольку я сам не пользуюсь JOOG , то затрудняюсь указать её конкретнее. А может, у JOOG есть ограничение. Смотреть документацию по JOOG. So do I. Т.ч. без тестового примера и дебага до проблемной строки, разговор становится безпредметный. Лично у меня дебажит библиотеку, которой я не пользуюсь, желания пока нет ))) Это рассуждение..... ВикипедияСтроковый тип В программировании, строковый тип (англ. string «нить, вереница») — тип данных, значениями которого является произвольная последовательность (строка) символов алфавита. Каждая переменная такого типа (строковая переменная) может быть представлена фиксированным количеством байтов либо иметь произвольную длину. .... Документации Oracle Overview of Character Datatypes The character datatypes store character (alphanumeric) data in strings , with byte values corresponding to the character encoding scheme, generally called a character set or code page. .... This section includes the following topics: CHAR Datatype VARCHAR2 and VARCHAR Datatypes Length Semantics for Character Datatypes NCHAR and NVARCHAR2 Datatypes Use of Unicode Data in Oracle Database LOB Character Datatypes LONG Datatype .... VARCHAR2 and VARCHAR Datatypes The VARCHAR2 datatype stores variable-length character strings...maximum string length (in bytes or characters) between 1 and 4000 bytes for the VARCHAR2 column.... ... LOB Character Datatypes The LOB datatypes for character data are CLOB and NCLOB. They can store up to 8 terabytes of character data (CLOB) or national character set data (NCLOB). ... https://docs.oracle.com/cd/B28359_01/server.111/b28318/datatype.htm#CNCPT213 И это рассуждение тоже. В Oracle автоматическое преобразование из CLOB в строку работает без проблем при размере CLOB до 4K. При большем размере может возникнуть проблема от не читания документации. Но вообще можно загрузить в программу CLOB любого размера. Не правда. Без проблем до размера, которого позволяет тип varchar2. В PL/SQL - 32 Kb, в SQL - 4 Kb. (конкретные точные лимиты смотреть в документации) + разумеется учет кодировки при чем тут "не читание документации" вообще не понятно ... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 15:42 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Короче я решил проблему поблоковым чтением этого клоба (по 32к). ... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 16:35 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Leonid KudryavtsevНе правда. Без проблем до размера, которого позволяет тип varchar2. В PL/SQL - 32 Kb, в SQL - 4 Kb. (конкретные точные лимиты смотреть в документации) + разумеется учет кодировки при чем тут "не читание документации" вообще не понятно Сейчас объясню. Вы стали фантазировать, что CLOB и текстовая строка это почти одно и то же. Но не надо путать фантазии и знание, на что я указал. Поэтому надо читать документацию. CLOB существенно отличается от строки приёмами программирования для работы с ним (которые зависят ещё и от СУБД). Вы привели фрагмент документации. Это хорошо, что вы её читаете. Но приведённый фрагмент не имеет никакого отношения к делу. Конкретно. Беру пример - поле CLOB my_clob в таблице my_table В Oracle SQL Developer делаю запрос SELECT my_clob, DBMS_LOB.GETLENGTH (my_clob) AS my_clob_length FROM my_table вижу результаты (которые Oracle SQL Developer правильно показывает как текст, значит можно преобразовать). Но если я согласно вашему мнению преобразую CLOB в Varchar2 функцией TO_CHAR https://docs.oracle.com/cd/B19306_01/server.102/b14200/functions179.htm#i1006717][функцией TO_CHAR/url] То при длине CLOB больше 4000 возможно возникновение ошибки: сообщение об ошибкеORA-22835: Размер буфера недостаточен для преобразования CLOB в CHAR или BLOB в RAW (фактически: 4652, максимум: 4000) 22835. 00000 - "Buffer too small for CLOB to CHAR or BLOB to RAW conversion (actual: %s, maximum: %s)" *Cause: An attempt was made to convert CLOB to CHAR or BLOB to RAW, where the LOB size was bigger than the buffer limit for CHAR and RAW types. Note that widths are reported in characters if character length semantics are in effect for the column, otherwise widths are reported in bytes. *Action: Do one of the following 1. Make the LOB smaller before performing the conversion, for example, by using SUBSTR on CLOB 2. Use DBMS_LOB.SUBSTR to convert CLOB to CHAR or BLOB to RAW. ================== Видим предел 4000, а не 32K, как вам казалось. Эту проблему можно решить на стороне Oracle, а можно в Java. Про Oracle чейчас писать не буду. А в Java c CLOB надо работать как с CLOB, а не как со String. Пример с использованием JDBC: Код: java 1. 2. 3. 4. 5. 6. 7. 8. 9. 10. 11. 12. 13. 14.
} ... |
|||
:
Нравится:
Не нравится:
|
|||
25.07.2018, 21:25 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Partisan M, +++ Во-во! Сначала они CLOB'ы в строки читают, а потом баланс в Double свести пытаются. А потом из-за таких кто-то будет наезжать на Java, что она какая-то не такая и вообще фу... ... |
|||
:
Нравится:
Не нравится:
|
|||
26.07.2018, 09:22 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Garrick, какие мы плохие PS не кто не кидает в Java какашками если вы не заметили ... |
|||
:
Нравится:
Не нравится:
|
|||
26.07.2018, 09:46 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Oleg_SP1975 не кто не кидает в Java какашками если вы не заметили Я не про тут, я вообще... ... |
|||
:
Нравится:
Не нравится:
|
|||
26.07.2018, 10:13 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Garrick, а вообще любой язык программирования это инструмент которым надо уметь пользоваться и соответственно когда возникают вопросы их надо где то задавать ... |
|||
:
Нравится:
Не нравится:
|
|||
26.07.2018, 10:18 |
|
Выгрузка XML из Oracle c помощью java (spring)
|
|||
---|---|---|---|
#18+
Да, в своём программном примере я напрасно не привёл подробность: после использования Clob надо освобождать: Clob clob = null; clob = resultset.getClob ("my_clob"); //читаем данные из clob if (clob != null) clob.free(); //это помещать в finally {}, чтобы наверняка выполнилось. показанными способами можно прочитать CLOB любого размера. ... |
|||
:
Нравится:
Не нравится:
|
|||
27.07.2018, 09:37 |
|
|
start [/forum/moderation_log.php?user_name=Glum1111]: |
0ms |
get settings: |
14ms |
get forum list: |
15ms |
get settings: |
10ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
101ms |
get topic data: |
10ms |
get forum data: |
2ms |
get page messages: |
63ms |
get tp. blocked users: |
1ms |
others: | 488ms |
total: | 725ms |
0 / 0 |