|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Не могу решить задачку! Задана таблица в БД. Сервер Firebird 2.5 CREATE TABLE BLOB_TBL ( ID UHIR48 DEFAULT 'НЕТ' NOT NULL, SAME_FILE BLOB SUB_TYPE 0 SEGMENT SIZE 80 NOT NULL, NAME_FILE STR_1024 DEFAULT 'НЕТ', EXT_FILE STR_16 DEFAULT 'НЕТ', NOTE_FILE STR_256 DEFAULT 'НЕТ' ); Заполняю таблицу параметрами. В BLOB заноситься файл. Необходимо получить все строки, содержащие подстроку. Может кто-нибудь подсказать решение? ... |
|||
:
Нравится:
Не нравится:
|
|||
23.03.2018, 23:24 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
1. Используй BLOB SUBTYPE 1 - он именно для текста. 2. Вместе с п.1 - предикат CONTAINING. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 00:25 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVМожет кто-нибудь подсказать решение? Убираем из задачи Firebird, таблицу и поле. Остаётся файл, который можно грепать до полного удовлетворения. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 01:18 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Любезный, и что я получу? что в этом Поле есть подстрока или нет. А мне надо найти все строки в этом BLOBe, содержащие подстроку поиска.... ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 13:48 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakov, файл лежит физически на другой сетевой машине и не в общем доступе. Что трепать будем-то, до полного удовлетворения? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 13:51 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV> мне надо найти все строки в этом BLOBe, содержащие подстроку поиска.... Пишите ХП (ну или EB) и парсите. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 13:57 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Любезный, и еще про тип 1... а что искать можно только в типе 1? а в типе 0 уже нельзя? Мне кажется что серверу все равно где искать и что... Если можно искать, то сервер будет искать... ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:06 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVфайл лежит физически на другой сетевой машине и не в общем доступе. Что трепать будем-то, до полного удовлетворения? Сохраняем содержимое блоба в файл на локальной машине. Грепаем до полного удовлетворения. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:21 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Гаджимурадов Рустам, Спасибо, я тоже до этого дошел... Видимо по другому никак, буду разбираться. Нашел старенькую UDF-ку textparser. Правда доков нет... У Вас случаем ничего нет по этой теме? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:26 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV> Нашел старенькую UDF-ку textparser. ... У Вас случаем ничего нет по этой теме? Над текстовым БЛОБом можно выполнять все те же операции, что и над строкой. В 2.5 достаточно встроенных строковых функций для решения поставленной задачи. Правда, с т.з. производительности это может быть не лучшим решением, так что лучше будет писать свою специализированную UDF, которая вернёт необходимый результат. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:30 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakov, а кто Вам сказал, что файл маленький? У нас есть файлы и по 8 гиг и не один. С утра пришел, запустил поиск и можно в отпуск ехать... ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:30 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Гаджимурадов Рустам, Большое спасибо, буду пробовать ... Тему пока не закрываю. ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:33 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVDimitry Sibiryakov, а кто Вам сказал, что файл маленький? У нас есть файлы и по 8 гиг и не один. Внутри в базе? ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:35 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVа кто Вам сказал, что файл маленький? У нас есть файлы и по 8 гиг и не один. С утра пришел, запустил поиск и можно в отпуск ехать... Уверяю тебя, это будет быстрее, чем маяться фигнёй в ХП. PS: Этот геморрой на свою голову вы выдумали сами, нарушив первую нормальную форму. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 14:40 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Ну как... Парсить 8 гиг БЛОБа, в UDF, c утреца... Не знаю чего там у вас и как, но, даже если нет доступа к файлу напрямую - всё равно разумнее парсить файл, не задействуя при этом БД, кроме как посредника/пусковика (UDF это позволяет) и, возможно, хранение результатов, если нужно их сохранять (UDF это тоже позволяет). Хотя это, конечно, кривая архитектура и костыль, следовало бы задуматься, возможно, о каком-то отдельном приложении, которое бы делало всю нужную работу по парсингу и пр. и запускалось по расписанию в удобное время или висело в сервисах. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 15:16 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV, хоть тут практически на все уже ответили, дополню, что в BLOB нет никаких "строк", текстовый он или нет. Сервером блоб рассматривается как единый кусок данных. Соответственно, поиск подстроки в этом блобе прекращается как только найдено первое соответствие. Чтобы искать подстроку в каких-то там строках, надо этот блоб считать на клиента, в набор строк, и дальше искать на подстроку подстрочно. Теоретически и udf можно написать, конечно, которая будет выдавать блоб, содержащий те самые "строки". ... |
|||
:
Нравится:
Не нравится:
|
|||
24.03.2018, 19:56 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakov, а 1НФ у Вас о чем говорит? У меня например о нарушении атомарности. А у Вас? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 14:29 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV, автор запихнул строки, которыми он оперирует, в один столбец. Вот и нарушение атомарности. Это то же самое, как, например, запихнуть ФИО в одну строку, а потом устраивать траходром с выделением Ф, И и О. При проектировании БД одними из этапов являются сохранение данных и извлечение данных. И если с извлечением проблемы, то надо менять сохранение. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 15:17 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
kdvSMV, автор запихнул строки, которыми он оперирует, в один столбец. Вот и нарушение атомарности. Это то же самое, как, например, запихнуть ФИО в одну строку, а потом устраивать траходром с выделением Ф, И и О. При проектировании БД одними из этапов являются сохранение данных и извлечение данных. И если с извлечением проблемы, то надо менять сохранение. Я даже больше скажу. 90% обращений к базе - чтения. Поэтому местами имеет смысл идти на некоторый гемор с сохранением, если это существенно облегчает чтение. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 18:33 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Я вообще не понимаю, зачем пихать в базу текстовые файлы по 8Гб? Какой там с них толк? Если так уж надо с ними работать, то лучше их хранить в отдельных папках в оригинальном виде, а в базе держать ссылки на них, ну и какие-то атрибуты (описания, даты и т.п.) для идентификации. Обрабатывать большие текстовые файлы средствами СУБД какой-то мазохизм... Для этого есть куча обычных программ. ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 19:27 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
d7i, извините, а кто сказал про текстовые файлы? файлы могут быть и AVI и TIFF и Image и т.д. Как-то так... ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 20:16 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
kdv, про автора не понял. Какой автор? Если про меня, то пример вначале темы (5 отдельных столбцов с PK в первом). Так кто и что запихнул в один столбец? ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 20:22 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
А какие строки/подстроки можно искать в AVI и TIFF и пр.? Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 20:27 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV, Тем более, какую подстроку там искать? Я, к примеру, также держу некоторые бинарные и текстовые файлы в БД (конечно, не по 8Гб, максимум 1-2Мб). Всякие там шаблоны, процедуры, звуки и т.д. И подстроку иногда в них ищу (преимущественно в текстовых) через функцию locate. Первое вхождение, мне этого достаточно... ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 20:46 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
d7iконечно, не по 8Гб И в этом ты очень предусмотрителен, поскольку на пороге в четыре гигабайта некоторых оптимистов ждут весьма забавные грабли. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 21:16 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Гаджимурадов Рустам, ну например геопривязки изображений, различные характеристики аппаратной части и т.д. Короче медиа файлы, кроме медиа информации, содержат много чего другого не менее интересного... ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 22:02 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Dimitry Sibiryakov, грабли будут у того кто не знает как на них не наступать... а предел в 4 гига уже давно не предел. Просто надо уметь работать с большими даннми, ну и конечно хорошую аппаратную часть...Кстати хороший эффект дает применение технологии FAILMAPPING-а, даже когда на машинке мало памяти... ... |
|||
:
Нравится:
Не нравится:
|
|||
25.03.2018, 22:11 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVFAILMAPPINGВ точку. По Фрейду. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 01:56 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVпро автора не понял. Какой автор? Если про меня, то пример вначале темы (5 отдельных столбцов с PK в первом). Так кто и что запихнул в один столбец? автор - автор топика, т.е. SMV. Про "запихнул в столбец" у меня вполне ясно написано, прошу перечитать 21284176 . "строки в один столбец" - разумеется в столбец BLOB, ведь вопрос ведь об этом? Определение первой нормальной формы рекомендую освежить в памяти. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 11:35 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
kdv, извините, а кто сказал про текстовые файлы? файлы могут быть и AVI и TIFF и Image и т.д. Как-то так... Ну а если поиск у Вас ассоциируется только со строками, это уже Ваши проблемы. Серверу по барабану, что в BLOBe. Могут быть любые данные. И искать в них можно все, что угодно. И Ваш опус про 1НФ в этой связи не актуален. Перед тем как других учить, прочтите и разберитесь в условиях задачи, а потом уже рассуждайте о том что сделал автор. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 13:26 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV...., а кто сказал про текстовые файлы? .... Ну не знаю как у других а у меня это SMV....Необходимо получить все строки , содержащие подстроку. .... почему-то ассоциируется именно с текстовыми файлами ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 13:32 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVСерверу по барабану, что в BLOBe. Вот именно. Сервер принимает блоб как неделимое целое, хранит как неделимое целое и отдаёт по требованию как неделимое целое. Дробить на какие-то части и искать что-то в этих частях - с неделимым целым не работает по определению. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 13:39 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMVфайлы могут быть и AVI и TIFF и Image и т.д. Как-то так. ну тогда какие там еще "строки"? Кроме того, не бывает таких функций, которые возвращают, например, множество смещений на искомую подстроку. Даже в Дельфи таких нет - Pos() возвращает только одно число, место первого нахождения подстроки. Это надо писать процедуру или execute block, где в цикле будет вызываться position. SMVСерверу по барабану, что в BLOBe. Могут быть любые данные. Спасибо, что просветили! Видимо, ответы вы не читаете 21283277 SMVПеред тем как других учить, прочтите и разберитесь в условиях задачи а вы эту задачу внятно описали, да? неужели? :-) SMVИ Ваш опус про 1НФ в этой связи не актуален. Возможно. Но вы сами написали про "строки". А "строка" - это вполне определенная сущность. p.s. "опус" про 1НФ не мой, он из учебников, и я эти учебники не цитировал. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 13:48 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV, в ХП мультипоиск по BLOB это изврат. Работать будет очень медленно. И никакая UDF вам в этом не поможет, разве что внешняя ХП, но это только в 3.0 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 13:52 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Симонов Денис> И никакая UDF вам в этом не поможет, разве что внешняя ХП, но это только в 3.0 С чего вдруг UDF не поможет? И чем внешняя ХП будет лучше, чем UDF ? Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 14:01 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Спор перешел в теоретическую плоскость... Чтобы развеяться, анекдот от anekdotov.net: Как отбирать сотрудников в ИТ-компанию: нужно взять сложную головоломку, собрать ее наполовину и предлагать кандидатам собрать ее до конца. В зависимости от результата: — кандидат собрал головоломку правильно и до конца — специалист идет в отдел разработки; — кандидат сломал головоломку в процессе сборки — специалист идет в отдел тестирования; — кандидат разобрал головоломку до нуля — специалист идет в отдел анализа; — кандидат сказал, что наполовину собранная головоломка и так выглядит неплохо — специалист идет в отдел внедрения. ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 14:07 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Гаджимурадов Рустам, внешняя UDF может вернуть только скалярный результат. Можно конечно лепить всякие ухищрения в виде перечисления смещений в длинную строку, но потом это всё равно придётся парсить. Я так понял автору нужно найти все позиции подстроки в блобе. Вызов множества POSITION в цикле по BLOB тот ещё ад ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 14:09 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
26.03.2018 14:09, Симонов Денис пишет: > Вызов множества POSITION в цикле по BLOB тот ещё ад и SUSPEND'ить, SUSPEND'ить, SUSPEND'ить... до полного удовлетворения! зы: а сакральный тезис "КГ/АМ" ещё не звучал в топеге? Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 15:12 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
Ну, АМ уже пытались сказать, в разных формах, а в чем суть КГ пока не очень понятно. Я пока услышал, что он собирается искать подстроки с тегами в 8-гиговых медиа-файлах, после чего вчитываться как-то расхотелось. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 15:18 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
kdv, "Но вы сами написали про "строки". А "строка" - это вполне определенная сущность..." и все, на этом Ваши знания окончились? А про строки по дальности и азимуту Вы слышали? Или например про строчную развертку? и там и там строка, но абсолютно разного назначения. Поэтому не надо подводить теорию не понимая сути... ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 15:26 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
а я ещё 10 лет назад сказал касаемо изысканий аффтара: 6494329 Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 15:32 |
|
firebird поиск всех строк в blob по подстроке
|
|||
---|---|---|---|
#18+
SMV> А про строки по дальности и азимуту Вы слышали? ИМХО, топик изжил себя, пора закрывать. Posted via ActualForum NNTP Server 1.5 ... |
|||
:
Нравится:
Не нравится:
|
|||
26.03.2018, 15:33 |
|
|
start [/forum/search_topic.php?author=%D1%85%D0%BE%D1%81%D1%82%D0%B5%D0%BB&author_mode=last_topics&do_search=1]: |
0ms |
get settings: |
11ms |
get forum list: |
14ms |
get settings: |
10ms |
get forum list: |
16ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
47ms |
get topic data: |
10ms |
get forum data: |
2ms |
get page messages: |
67ms |
get tp. blocked users: |
2ms |
others: | 1181ms |
total: | 1368ms |
0 / 0 |