Скрипт удаления дубликатов строк

Сергей16 лет в сервисе
Данные заказчика будут вам доступны после подачи заявки
13.06.2016

Нужен скрипт на PHP, удаляющий дубликаты строк. Но не просто дубликаты, как Excel, а чуть сложнее.

На входе: файл CSV или строки (до 30 тыс.) в виде текста

Параметры (галочками):

V считать дубликтами строки с любым порядком слов (т.е. "москва реферат" = "реферат москва")

V считать дубликатами слова в любом регистре (т.е. "москва мгимо" = "Москва МГИМО")

На выходе:  файл CSV и строки в виде текста

Скрипт должен сохранять 1 (первое найденное) из дубдирующихся значений.

Аналог такого скрипта, но с меньшим функционалом: ppchelp.ru/del_duplicate

Заявки фрилансеров