Discussion :

[Sylphide666]

Bonjour,

Je souhaiterais écrire un code capable de comparer deux grandes images disque dd (par exemple 150Go), et générer un rapport txt sur les différences trouvées : de telle adresse à telle adresse les valeurs hexas sont différentes.

L'idéal serait de le faire avec une interface graphique qui montre l'avancement du style gtk. Est-ce faisable ? Je peux aussi envisager un script bash ou python ?

J'ai vu qu'en C il faudrait ouvrir les fichiers avec fopen en mode rb, mais est-ce que ca marche aussi avec des gros fichiers de 150GB ? Il y a pas de manière d'utiliser des stream et avancer gentiment dans le fichier ?

Merci.

[Obsidian]

Bonjour,

Oui, c'est faisable facilement, mais tu peux déjà commencer par

Code Shell :

Sélectionner tout - Visualiser dans une fenêtre à part

$ cmp -bl image1 image2 | tee differences.log

… si tu veux gagner du temps.

[Sylphide666]

Merci pour la réponse.

En fait j'ai deux semaines devant moi pour faire un truc propre avec barre de progression. Je ne pense pas pouvoir récupérer l'avancement de la tâche depuis cette commande par exemple chaque 3-4 sec, avec en plus un formatage du txt bien précis. Du coup je me lance avec fopen, fseek etc, c'est la bonne approche "facile" ?

[Obsidian]

j'ai deux semaines devant moi pour faire un truc propre avec barre de progression. Je ne pense pas pouvoir récupérer l'avancement de la tâche depuis cette commande par exemple chaque 3-4 sec, avec en plus un formatage du txt bien précis. Du coup je me lance avec fopen, fseek etc, c'est la bonne approche "facile" ?

Si, si. C'est tout-à-fait possible sans trop de difficultés mais, effectivement, c'est encore plus simple de faire un programme qui lit le tout directement. fopen() a le mérite de fonctionner partout mais si tu veux faire des comparaisons de gros fichiers sous UNIX, j'utiliserais plutôt mmap().

Sache enfin que faire un programme de comparaison octet à octet est assez facile, mais faire un outil tel que diff est plus subtil : si des octets ont été insérés ou supprimés dans l'une ou l'autre de tes images, alors c'est tout le reste de l'image qui sera marquée comme invalide.

[Sylphide666]

Voilà j'ai un peu attaqué avec fopen finalement. Il y a juste un petit truc que j'ai pas très bien compris.

Quand on fait un fread avec sizeof(char) et un buffer de 1, il chope bien un caractère dans le fichier binaire ? Parce qu'un caractère dans le binaire correspond à un hexa sur 4 bits... donc il faudrait que le buffer soit de 2 pour avoir un byte ?

Je mets à disposition mon début de code pour ceux que ca intéresse : http://paste.org/pastebin/view/35716

[jeroman]

Parce qu'un caractère dans le binaire correspond à un hexa sur 4 bits... donc il faudrait que le buffer soit de 2 pour avoir un byte ?

Comment ça ?

Concernant ton code, il y a plusieurs choses qui ne vont pas :

* La fonction feof indique simplement, lorsqu'une fonction de lecture a échoué, si cet échec a eu lieu à cause du fait que la fin du fichier a été atteinte. Tu ne dois donc pas utiliser cette fonction dans ta boucle pour tester la fin de fichier : tu dois utiliser la valeur retour des fonctions de lecture, qui sont faites (notamment) pour cela.

* strcmp est une fonction permettant de comparer des chaines de caractères. Ce n'est pas le cas ici. Ca ne marchera donc pas. De plus, tu utilises cette fonction pour comparer deux buffers de... 1 octet chacun.

* Il faut utiliser la valeur retour de fread pour connaitre le nombre d'octets qui ont été lus. En effet, il se peut qu'une erreur ou une fin de fichier se produise au cours de la lecture. Notamment, si la fonction renvoie 0, cela veut dire qu'un problème a eu lieu : soit une fin de fichier soit une autre erreur.

[Sylphide666]

Salut jeroman,

Merci pour tes remarques, voilà quelques corrections. Je ferai des conditions plus complètes pour les erreurs.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
 
while (1) {
		read1 = fread(buffer1, sizeof(char), BUFFERSIZE, f1);
		read2 = fread(buffer2, sizeof(char), BUFFERSIZE, f2);
		if (read1==0) {
			break;
		}
		pos += BUFFERSIZE;
		//comparer les buffers
		if (memcmp(buffer1, buffer2, BUFFERSIZE)) {

Mon but est effectivement de comparer octet par octet, on est d'accord que ca correspond à 2 valeurs hexa (puisque 1 byte = BUFFERSIZE = 8 bits = 2 x 4 bits =? 1 char en c).

En fait je me base par rapport à la commande hexdump -C d'une image qui me sort une série de valeurs hexa. L'objectif est donc de comparer 2 hexa voisins à la fois. Le problème c'est qu'on tombe souvent sur des "00" qui font qu'il y a plein d'intervalles trouvés...

[diogene]

Mon but est effectivement de comparer octet par octet, on est d'accord que ca correspond à 2 valeurs hexa (puisque 1 byte = BUFFERSIZE = 8 bits = 2 x 4 bits =? 1 char en c).

Un char en C est toujours et par définition d'une taille de 1 byte. Le fait d'utiliser 2 caractères pour afficher sa valeur ne change rien à la chose.
Ici, tu lis les données en binaire, chacune fait un byte et tu compares directement 2 bytes. Il n'y a pas à considérer "2 hexa voisins" .

[Sylphide666]

En prenant 1 byte (char) à fois et en le convertissant en notation hexa par la fonction sprintf() et "%X" en paramètre, j'obtiens bien les 2 hexa voisins de 4 bits chacun que je veux comparer. Problème résolu, merci à tous