[Resolvido] Deletar registros duplicados em arquivo .csv

Olá pessoal bom dia,

Ontem postei um tópico a respeito deste problema que estou tendo e ele foi apagado, não sei se violei alguma norma do forum se violei quero pedir desculpas.

Acontece que tenho um script php que pega o arquivo csv e inclui cada registro em uma tabela mysql.

No meu arquivo csv podem existir registros com um registro igual o outro, exemplo: ordemcompra.

Eu quero limpar os registros duplicados antes de enviar ao mysql. Alguém sabe como fazer isso?.

Ou antes do envio ou após o INSERT ?.

Obrigado