|
Действия ...
|
12.03.2013, 13:30
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
|
Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
12.03.2013, 04:12
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
Проектирую БД что то типа веб-кеша: нужно сохранять html-код веб страницы через некоторые промежутки времени, а отсюда и суть задачи, код веб-страницы скажем за 15 мин может измениться несколькими символами, записывать каждый раз данные которые отличающийся несколькими символами расточительно. Можно конечно записывать diff-и (программно реализуемые), но тогда будут проблемы с поиском по тексту. Подскажите как правильно решить такую задачу? С выбором БД еще не решиться но лучше чтоб не зависело от конкретной БД. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.03.2013, 13:30
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
pH20Проектирую БД что то типа веб-кеша: нужно сохранять html-код веб страницы через некоторые промежутки времени, а отсюда и суть задачи, код веб-страницы скажем за 15 мин может измениться несколькими символами, записывать каждый раз данные которые отличающийся несколькими символами расточительно. Можно конечно записывать diff-и (программно реализуемые), но тогда будут проблемы с поиском по тексту. Подскажите как правильно решить такую задачу? С выбором БД еще не решиться но лучше чтоб не зависело от конкретной БД. путь номер раз: разбить html код на части - благо он структурированный. И хранить их в отдельно . Соответсвенно при изменении (для отслеживания изменений можно юзать хэши) вставлять только новый изменившийся кусок, а не всю страницу. Для удобства можно прикрутить вьюху (матвтюху) собирающую из последних версий всех кусков целую страницу. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.03.2013, 14:18
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
Я понял что нужно копать в сторону хранимых процедур, но нигде не могу найти пример функции c использованием diff-ов, я пишу на python в нем есть прекрасная библиотека для таких целей difflib ( http://docs.python.org/2/library/difflib.html) также я узнал что в PostgreSQL есть возможность писать хранимые процедуре на Python - PL/Python ( http://www.postgresql.org/docs/9.0/static/plpython.html) но пролистал мануал я так и не понял можно ли подключить библиотеку. Так что вопрос трансформировался в такой: кто знает как реализовать diff-алгоритм ка встроенную процедуру или функцию? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.03.2013, 15:57
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
pH20, Почему-бы не сделать дополнительный слой логики на Python'e и инкапсулировать всю diff-логику там, а в базе хранить только результаты вычислений этих diff-ов? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.03.2013, 16:31
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
Такая идея былла с самого начала. Но вопрос в том что в перспективе должен быть полнотекстовый поиск, хотел сразу воспользоватся встроенными возможностями по поиску в БД. А если логику diff-ов организовывать программно, значит и логику полнотекстового поиска также нужно писать заново что чревато усложнением кода. Сейчас разберусь не можно ли подключить python-код как UDF в Firebird - читал там можно на каком угодно языке реализовать. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.03.2013, 17:09
|
|||
|---|---|---|---|
|
|||
Как сделать версионность (diff-и) текста |
|||
|
#18+
pH20, работа через хранимые процедуры Вам очень вряд ли поможет в плане натравливания на Diff-ы встроенных в БД средств полнотекстового поиска. UDF-ы - теоретически могут помочь, но 1. сомневаюсь, что UDF-ы Вам дадут делать на внешнем языке 2. производительность этого будет, думаю, хуже чем если хранить тексты целиком, безо всяких диффов. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=32&mobile=1&tid=1541343]: |
0ms |
get settings: |
6ms |
get forum list: |
16ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
153ms |
get topic data: |
12ms |
get forum data: |
3ms |
get page messages: |
58ms |
get tp. blocked users: |
2ms |
| others: | 220ms |
| total: | 476ms |
| 0 / 0 |
