Compter le nombre de lignes differentes

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : Compter le nombre de lignes differentes

guepe

J'ai du noir sur la truffe ?

Bonjour, je m'adresse a vos lumieres car j'ai un enorme fichier (1.5MB) texte qui contient pleeeein de lignes identiques... qui se suivent.
VOila comment ca se presente :

Code :

unelignequiditunpermiertruc
unelignequiditunpermiertruc
unelignequiditunpermiertruc
unelignequiditunpermiertruc
unelignequiditunpermiertruc
unelignequiditunpermiertruc
unelignequiditunAUTRETRUC
unelignequiditunAUTRETRUC
unelignequiditunAUTRETRUC
unelignequiditunAUTRETRUC
...

Le nombre d'occurence de chaque "type" de ligne est tres variable, tout ce que je veut savoir c'est le nombre de lignes qui different (dans l'exemple, ce serait deux). Je me fiche pas mal de ce qui est ecrit, je le sais deja :-)

J'ai un peu la flemme d'ecrire un bout de code en c et de le compiler, en bash y'aurait pas moyen de faire ca vite fait ? J'ai aucune idee de quels outils utiliser... (oui je suis nul en script bash...)

Merci !

---------------
Un blog qu'il est bien

Publicité

Le_Tolier

Hello IT ?

Citation :

cat file |sort |uniq |wc -l

Message cité 2 fois

---------------
Never f**k with your systems administrator. Why? Because they know what you do with all that free time! |?? | SAVE Jericho !

guepe

J'ai du noir sur la truffe ?

Le_Tolier a écrit :

Citation :

cat file |sort |uniq |wc -l

ahhh je ne connaissais pas uniq... alors la c'est super cool ! Merci, merci beaucoup ! [:al_bundy]

Message cité 1 fois
Message édité par guepe le 26-09-2008 à 00:20:47

---------------
Un blog qu'il est bien

l4nkou

Dr House Fan

cat file | sort -u | wc -l

---------------
Les avis, c'est comme les anus, tout le monde en a un.

Le_Tolier

Hello IT ?

guepe a écrit :

ahhh je ne connaissais pas uniq... alors la c'est super cool ! Merci, merci beaucoup ! [:al_bundy]

de rien

---------------
Never f**k with your systems administrator. Why? Because they know what you do with all that free time! |?? | SAVE Jericho !

black_lord

Modérateur
Truth speaks from peacefulness

Le_Tolier a écrit :

Citation :

cat file |sort |uniq |wc -l

uniq -c < file

edit :

Message édité par black_lord le 26-09-2008 à 11:08:16

---------------
uptime is for lousy system administrators what Viagra is for impotent people - mes unixeries - github me

Le_Tolier

Hello IT ?

---------------
Never f**k with your systems administrator. Why? Because they know what you do with all that free time! |?? | SAVE Jericho !

matafan

uniq -c seul ne convient pas forcément, puisque le fichier d'entré doit déja être trié.

Message cité 1 fois

guepe

J'ai du noir sur la truffe ?

matafan a écrit :

uniq -c seul ne convient pas forcément, puisque le fichier d'entré doit déja être trié.

Bah c'est mon cas, mais c'est sur que la premiere solution est plus generique... en tout cas bravo

---------------
Un blog qu'il est bien

e_esprit

Oh un truc utile :love:

Message cité 1 fois

---------------
Ce n'est point ma façon de penser qui a fait mon malheur, c'est celle des autres.

Publicité

black_lord

Modérateur
Truth speaks from peacefulness

e_esprit a écrit :

Oh un truc utile :love:

de ? compter des lignes ? [:pingouino]

---------------
uptime is for lousy system administrators what Viagra is for impotent people - mes unixeries - github me

e_esprit

De virer les doublons en shell

---------------
Ce n'est point ma façon de penser qui a fait mon malheur, c'est celle des autres.

FORUM HardWare.fr

Linux et OS Alternatifs

Codes et scripts

Compter le nombre de lignes differentes

Sujets relatifs
Nombre fichiers maximum dans un dossier sous Linux debian ?	afficher un fichier mais que sur un certain nombre de caractères
Extraire des lignes avec des conditions (ligne par ligne)	[iptables] Contrer une attaque DDos
Linux sait plus compter ?	probleme de LBA et nombre de secteurs sur un disque
Supprimer des lignes entre deux balises sous linux	Nombre de bit/CPU sous Linux
Recuperer un nombre de fichier dans un repertoire	problème d'envoi de mails en nombre + Postfix
Plus de sujets relatifs à : Compter le nombre de lignes differentes

Page générée en 0.062 secondes