Удаление дублирующихся строк в нескольких файлах.
 

Всем привет. Ситуация следующая, есть несколько файлов (старые выгрузки из дб). В которых по несколько тысяч наименований товаров. Все они аккуратные и одно наименование с доп. информацией располагается на 1 строге, другое наименование на другой и.т.д. + в 2-х из трёх файлов информация дублируется.Каким образом можно составить sh-скрипт, чтобы он прибежал по 3-4 файлам и составил из них один без дубликатов?Заранее благодарен.