|
|
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
Добрый день, друзья. Сталкнулся с такой проблемой, при парсинге контентом DLE проекта иногда в базу попадают идентичные новости. Скажите, как их найти и удалить? Я думаю это можно сделать через SQL запрос, но к сожалению сам написать его не смогу =( Вид таблицы http://take.ms/JpovQ думаю можно сделать поиск через поле title. Буду благодарен за помощь! ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 01:33:40 |
|
||
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 05:37:15 |
|
||
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
tanglir, Я посмотрел примеры, и вроде как, это не самая сложная задача, но к моему сожалению, сам я не справлюсь. =( ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 10:11:38 |
|
||
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
Yankovichдумаю можно сделать поиск через поле title. У подлежащих отсеиванию дубликатов в этом поле ПОЛНОЕ совпадение? или нет? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 11:18:58 |
|
||
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
Akina, да полное. Мне посоветовали: авторALTER IGNORE TABLE dle_post ADD UNIQUE INDEX titleindex (title) ; ALTER TABLE dle_post DROP INDEX titleindex; Но пока не было возможности проверить. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 14:05:01 |
|
||
|
Автоматическое удаление дубликатов новостей через SQL запрос
|
|||
|---|---|---|---|
|
#18+
Правильно посоветовали - я собственно именно к тому и вёл. Но - если добавление в таблицу выполняется с помощью INSERT IGNORE (или иным образом сервис готов к тому, что запись обломится), то можно индекс и не удалять, в таблице всегда будет один экземпляр. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 18.11.2013, 14:07:20 |
|
||
|
|
start [/forum/topic.php?fid=47&tid=1835701]: |
0ms |
get settings: |
8ms |
get forum list: |
17ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
32ms |
get topic data: |
10ms |
get forum data: |
2ms |
get page messages: |
36ms |
get tp. blocked users: |
1ms |
| others: | 199ms |
| total: | 311ms |
| 0 / 0 |
