Discussion :

[israellita]

Salut tout le monde

J'ai deux fichiers que je nomme A et B. A contient plus de 750 000 lignes et B plus 450 000 lignes. Je souhaite mettre dans un fichier C, uniquement toutes les lignes du fichier A qui ne sont pas dans le fichier B. J'ai au préalable utiliser les commandes "sort" et "uniq" pour trier et m'assurer de l'unicité des lignes
J'ai pensé à la commande join, mais je ne sais pas trop comment m'y prendre. Quelqu'un pourrais m'aider?

[zipe31]

Salut,

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sort A B | uniq -u > C

devrait le faire non ?

[N_BaH]

Bonjour,

plutôt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep --invert-match --file=B A > C

les sort et uniq préalables ne sont peut-être pas nécessaires
...
?

[israellita]

Salut zipe31

Je n'obtient pas ce que je veux avec cette commande. Par exemple

A
60000124
60000141
60121224
60235894
60235987

B
60000124
60000141
60333333
60654789
Quand je tape ta commande j'obtient ce fichier

C
60121224
60235894
60235987
60333333
60654789

Or je veux uniquement les lignes de A qui ne sont pas dans B (celles de B qui ne sont pas dans A ne m'interessent pas)

[zipe31]

Oups je n'avais pas tenu compte du fait que B pouvait avoir aussi des lignes uniques

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ sort  A B | uniq -u > C
$ sort  A C | uniq -d
60121224
60235894
60235987
$

C'est mieux ?

[zipe31]

Bonjour,

plutôt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep --invert-match --file=B A > C

les sort et uniq préalables ne sont peut-être pas nécessaires
...
?

Salut,

Pas mieux

Effectivement, pourquoi faire compliqué quand on peut faire simple

[israellita]

Salut N_Bah

Le fichier C que j'obtiens est vide . J'utilise pour tester, ces deux petit fichier A et B pour vérifier le résultat avant de l'appliquer sur mes gros fichiers.

A
60000124
60000141
60121224
60235894
60235987

B
60000124
60000141
60333333
60654789

[israellita]

Merci zipe31 ça marche bien! je vais essayer sur mes vrais fichiers.

[zipe31]

Pourtant...

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
$ ls
A  B

$ cat A
60000124
60000141
60121224
60235894
60235987

$ cat B
60000124
60000141
60333333
60654789

$ grep --invert-match --file=B A > C

$ ls
A  B  C

$ cat C
60121224
60235894
60235987

$

[zipe31]

Merci zipe31 ça marche bien! je vais essayer sur mes vrais fichiers.

Pourtant la solution de N_BaH est bien plus simple et adaptée

[israellita]

J'utilise la distribution Suse, est ce une raisonpour que la commande de N_Bah ne marche pas?

[lennelei]

Probablement pas ! Tu as quelle version de grep ?

[israellita]

Probablement pas ! Tu as quelle version de grep ?

GNU grep 2.5.2

[lennelei]

Ouais, c'est super récent

A tout hasard, essaye ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -v -fB A

Mais je pense plutôt que c'est tes fichiers de tests qui ont un problème !

[israellita]

Ouais, c'est super récent

A tout hasard, essaye ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -v -fB A

Mais je pense plutôt que c'est tes fichiers de tests qui ont un problème !

Ok, j'ai testé sur les vrais fichiers et j'ai l'erreur suivant
grep: Memory exhausted
Je suppose que la mémoire de grep n'est pas suffisante pour traiter mes fichiers!

[lennelei]

sans doute

[israellita]

Je crois que je vais utiliser la commande de zipe31. Merci à tous pour votre aide!