dartvaiderЕсть документ Excel в нем очень большая куча записей - примерно 50 000 строк!
Записи отсортированы в алфавитном порядке и совпадений очень много!
Как можно сравнивать все строки в БД и удалять те, которые совпали, или удалять ту, которая уже повторилась и остовлять ту, с которой повторилась?

Пример таков?
Иванов Иван Иванович пр.Ивинова 10,кв 16
Иванов Иван Иванович пр.Ивинова 10,кв 16
Петров Петр Петорович пр.Петрова 10,кв 16
Петров Петр Петорович пр.Петрова 10,кв 16
Петров Петр Петорович пр.Петрова 10,кв 16
...............................................................

можно ли как нибуть удалить тех, кто повторился?
чтобы получился такой вид:
Иванов Иван Иванович пр.Ивинова 10,кв 16
Петров Петр Петорович пр.Петрова 10,кв 16


пробывал через функцию совпадения, но не сравнивать же 50 000 в ручную :(

=СОВПАД(A1;A2)

Можно ли как либо сравнить глабально?

***

авторWhen you are working with a large data table, it is not uncommon for the table to contain what is essentially duplicate information. To process the information in the table, you may want to remove any of the rows you consider duplicate, thereby paring down the amount of information you need to process.

For instance, let's say that the first cell of each row contains a part number. What if you want to delete any rows that have duplicate part numbers in the first cell? If you need this solution, the following macro is for you:

авторThe macro works on a selection you make before calling it. Thus, if you need to remove duplicate rows from the range D7:G85, simply select that range and then run the macro. It removes the duplicates from the range D7:D85, and then removes all rows in D7:G85 (four columns per row) for which the cell in column D is blank.
Савэт отсюда