ReSQL.ru
     
powered by simpleCommunicator - 2.0.53     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Поиск и сопоставление по текстовым полям
9 сообщений из 9, страница 1 из 1
Поиск и сопоставление по текстовым полям
    #39934699
Владимир_VS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владимир_VS
Гость
Добрый день!
Существуют таблицы Договоров с полем [номер договора] varchar(50) и Платежей с полем [назначение платежа] varchar(8000). В тексте произвольной формы [назначение платежа] содержится значение [номер договора].
Записей по договорам сотни тысяч, по платежам миллионы.
Рассматривается вариант полнотекстового поиска, но из-за постоянного изменения таблице платежей встал вопрос о его работоспособности. Т.к. необходимо будет обновлять индексы по большому количеству записей. Также назначение платежа может содержать несколько номеров договоров.

Подскажите возможные варианты определения договора по тексту назначения платежа?
И какой из вариантов будет наиболее оптимальным?
...
Рейтинг: 0 / 0
05.03.2020, 15:05
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39934718
invm
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
invm
Участник
Владимир_VS
Подскажите возможные варианты определения договора по тексту назначения платежа?
1. Распарсить [назначение платежа] на слова по разделителям.
2. Искать по полученным словам строки в таблице договоров.
...
Рейтинг: 0 / 0
05.03.2020, 15:21
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39934727
Владимир_VS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владимир_VS
Гость
По сути необходимы подобные действия, которые выполняются при создании полнотекстового индекса. Но без самого полнотекстового индекса.

Может есть подобный функционал?
...
Рейтинг: 0 / 0
05.03.2020, 15:29
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39934745
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Владимир_VS,

разбирайте каждую запись на слова при загрузке, заполняйте связанную таблицу разобранными данными, отбрасывайте заведомо неподходящие значения (SSIS пакет). Затем запросом выбирайте подходящие строки по сравнению с имеющимися номерами.
...
Рейтинг: 0 / 0
05.03.2020, 15:54
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39934776
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
Владимир_VS
По сути необходимы подобные действия, которые выполняются при создании полнотекстового индекса. Но без самого полнотекстового индекса.
А почему "без самого полнотекстового индекса"? Это условие учебной задачи?
Владимир_VS
Подскажите возможные варианты определения договора по тексту назначения платежа?
И какой из вариантов будет наиболее оптимальным?
Варианты - парсить, и получать результат исследования данных с некой степенью достоверности.
Наиболее оптимальный путь - поменять модель данных, сделав правильные структуры для номеров договоров назначения платежа, и для других данных, связанных с договором.
...
Рейтинг: 0 / 0
05.03.2020, 16:28
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39936029
Владимир_VS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владимир_VS
Гость
alexeyvg
А почему "без самого полнотекстового индекса"? Это условие учебной задачи?


Полнотекстовый индекс необходим для данных которые будут постоянно обновляться. Соответственно, его обновление может занимать бОльшую часть времени. А платежи требуется сопоставлять с договорами за конкретно заданные временные рамки.
...
Рейтинг: 0 / 0
10.03.2020, 17:07
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39936032
Владимир_VS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владимир_VS
Гость
Владислав Колосов
Владимир_VS,

разбирайте каждую запись на слова при загрузке, заполняйте связанную таблицу разобранными данными, отбрасывайте заведомо неподходящие значения (SSIS пакет). Затем запросом выбирайте подходящие строки по сравнению с имеющимися номерами.


А можно подробнее о "SSIS пакет" и его практическом применении?
...
Рейтинг: 0 / 0
10.03.2020, 17:12
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39936060
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Владимир_VS,

Обучалка от разработчика SQL https://docs.microsoft.com/ru-ru/sql/integration-services/lesson-1-create-a-project-and-basic-package-with-ssis?view=sql-server-2017

Для анализа текста можно использовать задачу скрипта.
...
Рейтинг: 0 / 0
10.03.2020, 18:26
| Ответить | Цитировать | Написать  
Поиск и сопоставление по текстовым полям
    #39936065
Фотография alexeyvg
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
alexeyvg
Участник
Владимир_VS
alexeyvg
А почему "без самого полнотекстового индекса"? Это условие учебной задачи?

Полнотекстовый индекс необходим для данных которые будут постоянно обновляться. Соответственно, его обновление может занимать бОльшую часть времени. А платежи требуется сопоставлять с договорами за конкретно заданные временные рамки.
Вы имеете в виду, что кроме номеров договоров, в полнотекствоый индекс войдёт и все остальные слова?
Да, это недостаток.
Тогда нужно делать свою полнотекстовую индексацию (выковыривающую только номера договоров).


Владимир_VS
Владислав Колосов
разбирайте каждую запись на слова при загрузке, заполняйте связанную таблицу разобранными данными, отбрасывайте заведомо неподходящие значения (SSIS пакет). Затем запросом выбирайте подходящие строки по сравнению с имеющимися номерами.

А можно подробнее о "SSIS пакет" и его практическом применении?
SSIS пакет - это Владислав Колосов предложил пример реализации.
Можно вместо SSIS пакета написать программу на C++ или Java, и запускать на сервере, или на отдельной Линукс-машине.
Ключевое тут не "SSIS пакет", а "разбирайте каждую запись на слова при загрузке".
...
Рейтинг: 0 / 0
10.03.2020, 18:49
| Ответить | Цитировать | Написать  
9 сообщений из 9, страница 1 из 1
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Поиск и сопоставление по текстовым полям
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=46&tid=1686364]:
 0ms
get settings:
 9ms
get forum list:
 15ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 37ms
get topic data:
 14ms
get forum data:
 3ms
get page messages:
 53ms
get tp. blocked users:
 2ms
others: 313ms
total:  454ms
созд. / загр.: 454ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]