Filtre de fichiers

Bonjour,
je possede des fichiers de la formes:

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18

algorithm NN algorithm and CC and a DT a decryption NN decryption algorithm NN algorithm . SENT . But CC but 6 CD 6 00:00:21,069 CD @card@ --> NN --> 00:00:26,005 CD @card@ in IN in fact NN fact , , , a DT a cypher NN cypher is VBZ be

---

et mon but est de les filter, c'est à dire garder que la derniere colonne (excepté le caractere "@card@").
J'ai fais ceci

Code:

---

1 2	#!/bin/sh s/.*?[A-Z]\t/ /

---

et j'obtiens l'erreur suivante

Code:

---

1 2 3 4

$ test2.tag.txt filtre.sh 1: not found 00:00:00,000: not found ./test2.tag.txt: 3: Syntax error: newline unexpected

---

sachant que filtre.sh est mon script et test2.tag.txt est le fichier contenant le text

est ce que vous pouvez m'aider à corriger mon script
Merci

Bonjour,

Citation:

---

Code:

---

s/.*?[A-Z]\t/ /

---

---

ceci ne constitue pas un script, et n'est pas une commande shell.
C'est une substitution sed, perl, ou ...

@card@ n'est pas un caractère, mais un mot.

A la fin, tu dois avoir :

Code:

---

1 2 3

algorithm decryption algorithm

---

?

$ test2.tag.txt filtre.sh test2... n'est pas une commande, ou un fichier exécutable; ça devrait être l'argument du script.

Voilà, voilà ! Tu as de la lecture à venir : regarde le lien concernant le shell dans ma signature.
Tu liras avec profit :
le Bash Programming Intro Howto
l'ABS
...GIYF

Citation:

---

Envoyé par MMDM12

mon but est de les filter, c'est à dire garder que la derniere colonne (excepté le caractere "@card@").

---

Quelque chose comme ça:

Code:

---

1 2 3 4 5

$ cat filtre.sh #!/bin/sh awk '{print $3}'   $ filtre.sh < test2.tag.txt

---

merci à vous deux,
@ N_BaH, vous avez parfaitement tout resumé,
ouff, je suis passé completement à cote de la plaque.
@ jack-ft, ç'est l'idée principale, mais je pense qu'il preferable de le faire en shell , parce que le script prend en argument un fichier (ou un repertoire de fichier) et le resultat est stocké aussi dans un fichier, a moins que AWK soit plus efficace et en plus j'utilise Cygwin sous windows.

Merci

si le dernier champ n'est pas @card@, imprimer le dernier champ :

Code:

---

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16

awk '$NF != "@card@"{print $NF}' ton_fichier algorithm and a decryption algorithm . but 6 --> in fact , a cypher be

---

parce que le fichier comporte 3 colonnes sur toutes les lignes.
si ça te va, tant mieux; sinon il faut définir un critère supplémentaire pour obtenir ce que tu veux.
d'où vient ce fichier ?

C'est parfait @N_BaH,
Je veux filter tout ce qui n'est pas un mot "correcte" comme la ponctuation, les caractere du type ], -->, etc.
Ma question est de savoir est ce qu'il y a un moyen de faire comme avec les REGEX, quelque chose du genre tout ce qui ressemble à [a-z] pour eviter de lister les mots et caracteres à filter parce que je ne connait pas la liste exhaustive (car j'ai plusieurs fichiers)

Merci

Citation:

---

Envoyé par MMDM12

C'est parfait @N_BaH,
Je veux filter tout ce qui n'est pas un mot "correcte" comme la ponctuation, les caractere du type ], -->, etc.
Ma question est de savoir est ce qu'il y a un moyen de faire comme avec les REGEX, quelque chose du genre tout ce qui ressemble à [a-z] pour eviter de lister les mots et caracteres à filter parce que je ne connait pas la liste exhaustive (car j'ai plusieurs fichiers)

Merci

---

Ben oui, tu peux utiliser une regexp soit en positif soit en négatif. Quelque chose comme:

Code:

---

1 2 3

$ grep -i -x '[a-z \t]*' | awk '{print $3}' # filtre "positif" $ grep -v '[@,-[]]' | awk '{print $3}' # filtre "négatif"

---

Il n'y a que toi qui puisses définir ce que tu appelles "un mot correct"!

Citation:

---

Envoyé par jack-ft

Il n'y a que toi qui puisses définir ce que tu appelles "un mot correct"!

---

rigth !!!

Merci beaucoup

Citation:

---

Envoyé par jack-ft

Code:

---

1 2 3

$ grep -i -x '[a-z \t]*' | awk '{print $3}' # filtre "positif" $ grep -v '[@,-[]]' | awk '{print $3}' # filtre "négatif"

---

---

Pourquoi utiliser grep alors que awk connait les regex? C'est ok pour de petits fichiers mais gourmand pour les gros.

Code:

---

awk '$3~/^[A-Za-z0-9]+$/{print $3}'

---

Citation:

---

Envoyé par ripat

Pourquoi utiliser grep alors que awk connait les regex? C'est ok pour de petits fichiers mais gourmand pour les gros.

Code:

---

awk '$3~/^[A-Za-z0-9]+$/{print $3}'

---

---

Right !!! (comme dirait l'autre...)

Quand je pense que je viens d'écrire un petit programme de 100 lignes de awk... :oops:

Citation:

---

Envoyé par MMDM12

Merci a vous tous.

je fais ceci

Code:

---

awk '$3~/^[A-Za-z0-9]+$/{print $3}' < test.txt

---

aucun resultat, rien ne s'affiche, est ce que c'est la façon dont j'ai mis l'argument?

---

Oui. Tu dois simplement faire:

Code:

---

awk '$3~/^[A-Za-z0-9]+$/{print $3}' test.txt

---

:ccool: ripat

Merci, le probleme est reglé !!!
Ma derniere question est la suivante:

j'ai un repertoire : dir qui contient plusieurs fichiers sur les quels je souhaiterais appliquer cette commande et les sorties enregistrées dans des ficfiers de meme noms ( de preference).

exemple de nom de ficfier :2 - 2 - Regular Expressions in Practical NLP (6_04).srt
fichier de sorti Regular Expressions in Practical NLP