afficher les lignes d'un fichier qui ne sont pas dans lun autre fichier [Résolu]

israellita · 10/03/2011, 11h45

Salut tout le monde

J'ai deux fichiers que je nomme A et B. A contient plus de 750 000 lignes et B plus 450 000 lignes. Je souhaite mettre dans un fichier C, uniquement toutes les lignes du fichier A qui ne sont pas dans le fichier B. J'ai au préalable utiliser les commandes "sort" et "uniq" pour trier et m'assurer de l'unicité des lignes
J'ai pensé à la commande join, mais je ne sais pas trop comment m'y prendre. Quelqu'un pourrais m'aider?

zipe31 · 10/03/2011, 12h15

Salut,

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

sort A B | uniq -u > C

devrait le faire non ?

N_BaH · 10/03/2011, 12h41

Bonjour,

plutôt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep --invert-match --file=B A > C

les sort et uniq préalables ne sont peut-être pas nécessaires
...
?

israellita · 10/03/2011, 12h47

Salut zipe31

Je n'obtient pas ce que je veux avec cette commande. Par exemple

A
60000124
60000141
60121224
60235894
60235987

B
60000124
60000141
60333333
60654789
Quand je tape ta commande j'obtient ce fichier

C
60121224
60235894
60235987
60333333
60654789

Or je veux uniquement les lignes de A qui ne sont pas dans B (celles de B qui ne sont pas dans A ne m'interessent pas)

zipe31 · 10/03/2011, 12h53

Oups je n'avais pas tenu compte du fait que B pouvait avoir aussi des lignes uniques

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
$ sort  A B | uniq -u > C
$ sort  A C | uniq -d
60121224
60235894
60235987
$

C'est mieux ?

zipe31 · 10/03/2011, 13h12

Citation:

Envoyé par N_BaH

Bonjour,

plutôt :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep --invert-match --file=B A > C

les sort et uniq préalables ne sont peut-être pas nécessaires
...
?

Salut,

Pas mieux

Effectivement, pourquoi faire compliqué quand on peut faire simple

israellita · 10/03/2011, 13h21

Salut N_Bah

Le fichier C que j'obtiens est vide . J'utilise pour tester, ces deux petit fichier A et B pour vérifier le résultat avant de l'appliquer sur mes gros fichiers.

A
60000124
60000141
60121224
60235894
60235987

B
60000124
60000141
60333333
60654789

israellita · 10/03/2011, 13h27

Merci zipe31 ça marche bien! je vais essayer sur mes vrais fichiers.

zipe31 · 10/03/2011, 13h30

Pourtant...

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
$ ls
A  B

$ cat A
60000124
60000141
60121224
60235894
60235987

$ cat B
60000124
60000141
60333333
60654789

$ grep --invert-match --file=B A > C

$ ls
A  B  C

$ cat C
60121224
60235894
60235987

$

zipe31 · 10/03/2011, 13h32

Citation:

Envoyé par israellita

Merci zipe31 ça marche bien! je vais essayer sur mes vrais fichiers.

Pourtant la solution de N_BaH est bien plus simple et adaptée

israellita · 10/03/2011, 13h49

J'utilise la distribution Suse, est ce une raisonpour que la commande de N_Bah ne marche pas?

Alek-C · 10/03/2011, 13h56

Probablement pas ! Tu as quelle version de grep ?

israellita · 10/03/2011, 14h08

Citation:

Envoyé par Alek-C

Probablement pas ! Tu as quelle version de grep ?

GNU grep 2.5.2

Alek-C · 10/03/2011, 15h06

Ouais, c'est super récent

A tout hasard, essaye ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -v -fB A

Mais je pense plutôt que c'est tes fichiers de tests qui ont un problème !

israellita · 11/03/2011, 11h16

Citation:

Envoyé par Alek-C

Ouais, c'est super récent

A tout hasard, essaye ça :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

grep -v -fB A

Mais je pense plutôt que c'est tes fichiers de tests qui ont un problème !

Ok, j'ai testé sur les vrais fichiers et j'ai l'erreur suivant
grep: Memory exhausted
Je suppose que la mémoire de grep n'est pas suffisante pour traiter mes fichiers!

Alek-C · 11/03/2011, 11h28

sans doute

israellita · 11/03/2011, 11h39

Je crois que je vais utiliser la commande de zipe31. Merci à tous pour votre aide!

10/03/2011, 11h45	#1
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	afficher les lignes d'un fichier qui ne sont pas dans lun autre fichier Salut tout le monde J'ai deux fichiers que je nomme A et B. A contient plus de 750 000 lignes et B plus 450 000 lignes. Je souhaite mettre dans un fichier C, uniquement toutes les lignes du fichier A qui ne sont pas dans le fichier B. J'ai au préalable utiliser les commandes "sort" et "uniq" pour trier et m'assurer de l'unicité des lignes J'ai pensé à la commande join, mais je ne sais pas trop comment m'y prendre. Quelqu'un pourrais m'aider?
	10

10/03/2011, 12h15	#2
zipe31 Expert Confirmé Inscription : janvier 2011 Messages : 970 Détails du profil Informations personnelles : Localisation : France, Haute Garonne (Midi Pyrénées) Informations forums : Inscription : janvier 2011 Messages : 970 Points : 2 871 Points : 2 871	Salut, Code : Sélectionner tout - Visualiser dans une fenêtre à part sort A B \| uniq -u > C devrait le faire non ? __________________ $ man woman Il n'y a pas de page de manuel pour woman.
	20

10/03/2011, 12h41	#3
N_BaH Expert Confirmé Sénior Inscription : février 2008 Messages : 2 070 Détails du profil Informations forums : Inscription : février 2008 Messages : 2 070 Points : 4 153 Points : 4 153	Bonjour, plutôt : Code : Sélectionner tout - Visualiser dans une fenêtre à part grep --invert-match --file=B A > C les sort et uniq préalables ne sont peut-être pas nécessaires ... ? __________________ Algorithmique et Programmation pour non-matheux Introduction à la Programmation en BASH
	30

10/03/2011, 15h06	#14
Alek-C Membre Expert Alexis Intégrateur d'Exploitation Inscription : février 2003 Messages : 876 Détails du profil Informations personnelles : Nom : Alexis Âge : 32 Localisation : France Informations professionnelles : Activité : Intégrateur d'Exploitation Secteur : Biens de consommation Informations forums : Inscription : février 2003 Messages : 876 Points : 1 619 Points : 1 619	Ouais, c'est super récent A tout hasard, essaye ça : Code : Sélectionner tout - Visualiser dans une fenêtre à part grep -v -fB A Mais je pense plutôt que c'est tes fichiers de tests qui ont un problème !
	11

10/03/2011, 12h47	#4
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	Salut zipe31 Je n'obtient pas ce que je veux avec cette commande. Par exemple A 60000124 60000141 60121224 60235894 60235987 B 60000124 60000141 60333333 60654789 Quand je tape ta commande j'obtient ce fichier C 60121224 60235894 60235987 60333333 60654789 Or je veux uniquement les lignes de A qui ne sont pas dans B (celles de B qui ne sont pas dans A ne m'interessent pas)
	10

10/03/2011, 13h21	#7
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	Salut N_Bah Le fichier C que j'obtiens est vide . J'utilise pour tester, ces deux petit fichier A et B pour vérifier le résultat avant de l'appliquer sur mes gros fichiers. A 60000124 60000141 60121224 60235894 60235987 B 60000124 60000141 60333333 60654789
	11

10/03/2011, 13h27	#8
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	Merci zipe31 ça marche bien! je vais essayer sur mes vrais fichiers.
	10

10/03/2011, 13h49	#11
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	J'utilise la distribution Suse, est ce une raisonpour que la commande de N_Bah ne marche pas?
	11

10/03/2011, 13h56	#12
Alek-C Membre Expert Alexis Intégrateur d'Exploitation Inscription : février 2003 Messages : 876 Détails du profil Informations personnelles : Nom : Alexis Âge : 32 Localisation : France Informations professionnelles : Activité : Intégrateur d'Exploitation Secteur : Biens de consommation Informations forums : Inscription : février 2003 Messages : 876 Points : 1 619 Points : 1 619	Probablement pas ! Tu as quelle version de grep ?
	02

11/03/2011, 11h28	#16
Alek-C Membre Expert Alexis Intégrateur d'Exploitation Inscription : février 2003 Messages : 876 Détails du profil Informations personnelles : Nom : Alexis Âge : 32 Localisation : France Informations professionnelles : Activité : Intégrateur d'Exploitation Secteur : Biens de consommation Informations forums : Inscription : février 2003 Messages : 876 Points : 1 619 Points : 1 619	sans doute
	11

11/03/2011, 11h39	#17
israellita Futur Membre du Club Leonie Ahoo Inscription : mars 2011 Messages : 8 Détails du profil Informations personnelles : Nom : Leonie Ahoo Localisation : Côte d'Ivoire Informations forums : Inscription : mars 2011 Messages : 8 Points : 19 Points : 19	Je crois que je vais utiliser la commande de zipe31. Merci à tous pour votre aide!
	10

Outils de la discussion
Afficher une version imprimable Envoyer un lien vers cette page par email