ReSQL.ru
     
powered by simpleCommunicator - 2.0.60     © 2026 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Удаление строк с повторяющимися значениями.
17 сообщений из 17, страница 1 из 1
Удаление строк с повторяющимися значениями.
    #39726422
lopster
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
lopster
Гость
Всем доброго дня.
Есть вот такой запрос:
Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
DECLARE 
@str VARCHAR (400)='MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MNCRR|Electric|Constellation|1-ELVHNH|'

;WITH cte
AS(
SELECT value AS val, ROW_NUMBER() OVER (ORDER BY(SELECT 0)) AS rn
FROM  STRING_SPLIT(@str,'|'))
SELECT cte.val,rn
INTO #t
FROM cte



результатом которого выводится вот такой список:
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
8.
9.
 
MTA: All Agency Utility Portfolio	1
MTA: All Agency Utility Portfolio	2
MTA: All Agency Utility Portfolio	3
MNCRR                                      4
Electric	                                5
Constellation	                        6
1-ELVHNH	                                7
	                                        8


Суть дальнейших действий состоит в том, чтобы убрать повторяющиеся строки, но при использование,, предположим, Distinct или Group By, сервер по умолчанию применяет сортировку по алфавиту, а это, в данном случае, совершенно не нужно.

Нужно получить что-то типа:
Код: plaintext
1.
2.
3.
4.
5.
6.
MTA: All Agency Utility Portfolio	1
MNCRR	                                2
Electric	                                3
Constellation	                        4
1-ELVHNH                                 5                                        
                                                6


Подскажите, пожалуйста, как это можно реализовать?
Заранее спасибо.
...
Рейтинг: 0 / 0
01.11.2018, 11:47
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726426
Фотография Akina
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Akina
Участник
Какая разница, сортировать по алфавиту или по рандому?
...
Рейтинг: 0 / 0
01.11.2018, 11:50
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726436
lopster
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
lopster
Гость
Akina, Разница заключается в том, что это уровни иерархии, и чтобы их дальше вывести в столбцы, их порядок по отношению к уровню не должен быть нарушен.
...
Рейтинг: 0 / 0
01.11.2018, 12:00
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726456
iap
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
iap
Участник
lopsterAkina, Разница заключается в том, что это уровни иерархии, и чтобы их дальше вывести в столбцы, их порядок по отношению к уровню не должен быть нарушен.Чтобы был определённый порядок, должно быть поле, задающее этот порядок. Оно у вас есть?

Дополните OVER() предложением PARTITION BY [value] и оставьте в результате строки с rn=1
...
Рейтинг: 0 / 0
01.11.2018, 12:18
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726496
lopster
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
lopster
Гость
iap,

так порядок и задается rn.
Я пробовал это сделать точно так, как вы написали. Не работает.

Запрос из поста можно запустить в любой студии с версией сервера от 2016 и проверить.
...
Рейтинг: 0 / 0
01.11.2018, 12:56
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726502
Lissaro
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Lissaro
Гость
Может так:
Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
DECLARE 
@str VARCHAR (400)='MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MNCRR|Electric|Constellation|1-ELVHNH|'

;WITH cte
AS(
SELECT value AS val, ROW_NUMBER() OVER (ORDER BY(SELECT 0)) AS rn
FROM  STRING_SPLIT(@str,'|'))
SELECT cte.val,rn,MIN(rn) OVER (PARTITION BY val) AS ff
INTO #t
FROM cte

 SELECT DISTINCT  val, ff
 FROM   #t
 ORDER BY ff
...
Рейтинг: 0 / 0
01.11.2018, 13:04
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726595
iap
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
iap
Участник
lopsteriap,

так порядок и задается rn.
Я пробовал это сделать точно так, как вы написали. Не работает.

Запрос из поста можно запустить в любой студии с версией сервера от 2016 и проверить.Порядок у вас никак не задаётся! И rn здесь совершенно не при чём.
Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
DECLARE 
@str VARCHAR (400)='MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MNCRR|Electric|Constellation|1-ELVHNH|';

WITH cte AS
(
 SELECT
  val=value
, rn=ROW_NUMBER() OVER (ORDER BY 1/0)
, n=ROW_NUMBER() OVER (PARTITION BY [value] ORDER BY 1/0)
FROM  STRING_SPLIT(@str,'|')
)
SELECT val,rn
FROM cte
WHERE n=1
ORDER BY rn;
...
Рейтинг: 0 / 0
01.11.2018, 14:30
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726611
uaggster
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
uaggster
Гость
Не пользуйтесь для этой задачи STRING_SPLIT.
Напишите функцию разделения, где будет явно указана позиция item в строке.
Через xml например, или clr-ку напишите.
...
Рейтинг: 0 / 0
01.11.2018, 14:39
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726615
lopster
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
lopster
Гость
iap,
Это решение получается только для частного случая.
Если я, допустим, меняю строку:
Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
15.
DECLARE 
@str VARCHAR (400)='bdhg|bdhg|bdhg|aert|kiop|bnmk|1-ELVHNH|';

WITH cte AS
(
 SELECT
  val=value
, rn=ROW_NUMBER() OVER (ORDER BY 1/0)
, n=ROW_NUMBER() OVER (PARTITION BY [value] ORDER BY 1/0)
FROM  STRING_SPLIT(@str,'|')
)
SELECT val,rn
FROM cte
WHERE n=1
ORDER BY rn;


, то результат будет один фиг по алфавиту.
Код: plaintext
1.
2.
3.
4.
5.
6.
7.
         val	             rn
	                      1
1-ELVHNH	              2
aert	                      3
bdhg                	      4
bnmk	              7
kiop	                      8
...
Рейтинг: 0 / 0
01.11.2018, 14:45
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726661
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
lopster,

значит требуется промежуточное сохранения нумерованного списка.
...
Рейтинг: 0 / 0
01.11.2018, 15:33
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726665
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
Или табличную CLR допилите для устранения дублей, которая делает split. В инете можно код найти.
...
Рейтинг: 0 / 0
01.11.2018, 15:35
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726666
invm
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
invm
Участник
lopster,

Код: sql
1.
2.
3.
4.
5.
6.
7.
8.
9.
10.
11.
12.
13.
14.
DECLARE 
@str VARCHAR (400)='MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MTA: All Agency Utility Portfolio|MNCRR|Electric|Constellation|1-ELVHNH|';

with a as
(
 select top (cast(0x7fffffff as int))
  value,
  row_number() over (order by (select 1)) as rn
 from
  STRING_SPLIT(@str,'|')
 order by
  row_number() over (order by (select 1))
)
select value, row_number() over (order by min(rn)) from a group by value;
...
Рейтинг: 0 / 0
01.11.2018, 15:35
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726716
invm
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
invm
Участник
Еще вариант
Код: sql
1.
2.
3.
4.
5.
6.
7.
select
 value,
 row_number() over (order by charindex('|' + value + '|', '|' + @str + '|'))
from
 STRING_SPLIT(@str,'|')
group by
 value;
...
Рейтинг: 0 / 0
01.11.2018, 16:22
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726731
iap
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
iap
Участник
uaggsterНе пользуйтесь для этой задачи STRING_SPLIT.
Напишите функцию разделения, где будет явно указана позиция item в строке.
Через xml например, или clr-ку напишите.Всё давно написано:
Функция, которая делит строку на слова
...
Рейтинг: 0 / 0
01.11.2018, 16:46
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39726854
PizzaPizza
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
PizzaPizza
Участник
Владислав Колосовзначит требуется промежуточное сохранения нумерованного списка.

Правильно ли я понял, что это особенность запросов с подзапросами, что нумерация ROW_NUMBER может примениться не внутри подзапроса/сте, а позже, при окончательной выборке, как происходит у ТС?
...
Рейтинг: 0 / 0
01.11.2018, 21:29
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39727072
Владислав Колосов
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Владислав Колосов
Участник
PizzaPizza,

Сервер не рассматривает CTE как отдельно выполняющиеся запросы, а строит общий план выполнения. Поэтому и возникают проблемы с сортировками казалось бы верного выражения.
...
Рейтинг: 0 / 0
02.11.2018, 11:09
| Ответить | Цитировать | Написать  
Удаление строк с повторяющимися значениями.
    #39727413
PizzaPizza
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
PizzaPizza
Участник
Владислав КолосовPizzaPizza,

Сервер не рассматривает CTE как отдельно выполняющиеся запросы, а строит общий план выполнения. Поэтому и возникают проблемы с сортировками казалось бы верного выражения.

Ага. То есть в данном случае сервер решил, что ему удобнее и проще так выполнить запрос. А есть ли хинты, помимо выноса в табличную переменную или временную таблицу, что бы форсить выполнение row_number внутри подзапроса в случае ТС?
...
Рейтинг: 0 / 0
02.11.2018, 20:02
| Ответить | Цитировать | Написать  
17 сообщений из 17, страница 1 из 1
Форумы / Microsoft SQL Server [игнор отключен] [закрыт для гостей] / Удаление строк с повторяющимися значениями.
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]