Discussion :

[mouss4rs]

Bonjour,
J'aimerai faire un script en bash qui me permettent de supprimer toutes les adresses emails en doubles.
j'aimerai avoir une piste pour commencer ou alors si quelqu'un l'a deja fait fait pourquoi pas .
merci d'avance pour vos reponses

[fransoo]

Une piste :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

PROMPT> man uniq

[gangsoleil]

Bonjour,

Une seconde piste pour la route :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sort -u

[fransoo]

Prendre d'abord la deuxième piste et ensuite la première
Le pipe est ton ami.

[mouss4rs]

en faites mon fichier d'emails ressemble a ceci:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
 
email1@domaine1.fr, email2@domaine2.com, email3@domaine3.fr,
email4@domaine4.fr, 
email2@domaine2.com, email5@domaine5.fr, email7@domaine7.fr, email8@domaine8.com, 
email1@domaine1.fr

Avec le uniq, Les lignes identiques doivent être adjacentes pour être supprimées.
cad
aaaa
aaaa
bbbb
bbbb
donne
aaaa
bbbb
J'aimerai qu le resultat de mon exemple de fichier ressemble a ceci

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
 
email1@domaine1.fr, email2@domaine2.com, email3@domaine3.fr,
email4@domaine4.fr, 
email5@domaine5.fr, email7@domaine7.fr, email8@domaine8.com,

petite pércision: mon fichier est composé d'un email suivi d'une virgule puis espace un autre emails.
il peut y avoir plusieurs emails suivants les lignes
ex:
la 1ere ligne contiendra 3 emails tandis que la 24 lignes contiendra 1 email

[fransoo]

Avec le uniq, Les lignes identiques doivent être adjacentes pour être supprimées.

C'est pourquoi il faut fair un sort (tri) avant
Maintenant, s'il y en a plusieurs par ligne il faudrait remplacer les virgules par des retours à la ligne

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

tr | ',' '\n'

Faut-il vraiment conserver la mise ne page de sortie avec plusieurs mails par ligne ? Cela nécessiterait un script plus complexe.

[mouss4rs]

Non, on peut le formatter du genre
un email suivi d'une virgule puis à la ligne pour un autre email suivi d'une virgule

[fransoo]

Voilà ce que ça donne chez moi avec

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cat input.txt | sed -e 's/, /\n/g' | sort | uniq

Sortie

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
email1@domaine1.fr
email2@domaine2.com
email3@domaine3.fr,
email4@domaine4.fr,
email5@domaine5.fr
email7@domaine7.fr
email8@domaine8.com,

J'étudie le meilleur moyen de supprimer les virgules de fin
Voilà

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cat input.txt | sed -e 's/, /\n/g' -e 's/,*$//' | sort | uniq

[mouss4rs]

Non, justement j'aimerai les gardés

[fransoo]

Non, justement j'aimerai les gardés

Oui mais des fois il y en a et des fois pas

[gangsoleil]

Bonjour,

Si tu souhaites garder les virgules a la fin, il suffit de ne pas les remplacer :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

cat input.txt | sed -e 's/, /,\n/g' -e 's/,*$//' | sort | uniq

Soucis : les chaines de caracteres suivantes seront considerees comme differentes :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
email1@domaine1.fr
email1@domaine1.fr,

Solution : ne comparer que les caracteres avant la virgule. Mais je doute fort que tu trouves une maniere simple de faire cela...

[huit_six]

Il suffit de supprimer les virgules puis de les remettre, non ?

[fransoo]

Il suffit de supprimer les virgules puis de les remettre, non ?

Sauf s'il ne les veut pas partout

[huit_six]

Non, on peut le formatter du genre
un email suivi d'une virgule puis à la ligne pour un autre email suivi d'une virgule

Apparemment il les veux partout (enfin c'est ce que je comprends)