Redirection printf vers un buffer glissant de taille limitée

Version imprimable

02/02/2015, 13h34
Invité

Redirection printf vers un buffer glissant de taille limitée

Bonjour,

Dans une application embarquée, je cherche à envoyer des informations dans un fichier à des fins de log.
Je ne dois écrire le fichier qu'une fois à l'extinction de l'appareil, afin d'éviter les accès à ma flash. Les informations doivent donc être stockées dans un buffer temporaire, qui sera écrit dans un fichier au moment voulu.
Bien évidemment, la taille de ce buffer doit être limitée, et les nouvelles informations doivent éjecter les nouvelles lorsque la taille limite est atteinte (à la façon d'un terminal, dont l'historique le plus ancien est perdu).

Je cherche le moyen le plus simple et efficace d'envoyer ces informations vers un buffer.
Je pense rediriger la sortie standard vers un flux. Mais peut-on assigner un flux à un buffer de type FIFO qui se viderait automatiquement lorsqu'elle atteint une certaine taille?

Merci à vous pour vos idées!
02/02/2015, 14h01
ternel

Tu peux regarder ce que fait log4cpp, qui permet de limiter la taille du fichier de sortie.

Une solution souple (simple à utiliser) mais pas forcément simple à écrire pourrait être d'écrire une classe servant de buffer à ostream.
doc de basic_streambuf

ostream possède un constructeur acceptant un basic_streambuf comme argument. (et le transmettant à basic_ios)
02/02/2015, 14h13
Invité

Merci pour cette réponse rapide.

Je cherche à faire quelque chose de beaucoup moins évolué que log4cpp, mais je suppose que c'était juste pour regarder comment est implémentée la limite de taille.

La deuxième solution semble la plus adaptée mais elle ne réponds pas encore totalement à mon problème.
J'aurais pu utiliser snprintf pour écrire dans un buffer circulaire, mais je voulais éviter l'écriture du code gérant ce buffer.

J'espérais qu'en C++ il existe un conteneur de la STL qui soit capable du comportement cité précédemment: conteneur de capacité limité donc les vieilles données sont jetées lors du dépassement de capacité à l'ajout d'une nouvelle données.
Est-ce que ce genre de conteneur existe?
02/02/2015, 15h13
ternel

Non, pas que je sache. Par contre il y en a un dans boost (circular_buffer.

La grosse question, c'est comment gérer la granularité de suppression (ligne à ligne, j'imagine) par rapport à celle de la taille (en nombre d'octets).

A priori, j'utiliserai endl/flush pour déclencher l'épuration des plus vieilles lignes.
il doit y avoir un algorithme qui va bien (probablement find avec '\n')

Salut,

Citation:

Envoyé par simontlr

J'espérais qu'en C++ il existe un conteneur de la STL qui soit capable du comportement cité précédemment: conteneur de capacité limité donc les vieilles données sont jetées lors du dépassement de capacité à l'ajout d'une nouvelle données.
Est-ce que ce genre de conteneur existe?

Il n'y a rien de la sorte de manière standard, mais il reste assez facile de limiter la taille de n'importe quel conteneur à l'aide d'un simple test qui prendrait la forme de

Code:

1
2
3
if(leConteneur.size() > tailleMax){
    retirer l’excédent pour ne plus dépasser la limite
}

A la limite, une simple string pourrait parfaitement faire l'affaire sous une forme proche de

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
std::string logCache;
logCache += "Entree a rajouter dans le log";
if (logcache.size() > maxTaille){
    logCache = logCache.substr(logCache.size() - maxTaille);
    //veille à supprimer toute la ligne (on supprime jusqu'au premier retour à la ligne)
    size_t found = logCache.find("\n");
    if (foudn != std::string::npos){
        logCache = logCache.substr(found);
    }
}
// et quand il s'agit d'enregistrer le log
std::ofstream ofs("leLog.log");
if(ofs)
    ofs<<logCache;

Tu peux, bien sur, parfaitement envisager de créer un classe qui agira de la sorte, sous une forme proche de

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
class MaxSizeLog{
    public:
        MaxSizeLog(std::string const & filename, size_t maxSize):filename_(filenam),maxSize_(maxSize){
        }
        ~MaxSizeLog(){
            // on considère que l'instance de cette classe est créée dans la fonction main, avant toute autre chose) 
            // et qu'elle sera donc détruite juste avant le "return" final... Nous sommes peut etre face à l'un des cas
            // particulier dans lequel une variable globale peut s'avérer intéressante vu que l'instance 
            // de la classe doit être réellement accessible "depuis partout" ;)
            // 
            // on doit enregistrer le log lorsque l'instance de la classe est détruite
            std::ofstream ofs(filename);
            if (ofs){
                ofs<< str_;
            }
        }
        MaxSizeLog & operator +=(std::string const & toadd){
            str_+= toadd;
            logCache = logCache.substr(logCache.size() - maxSize_);
            //veille à supprimer toute la ligne (on supprime jusqu'au premier retour à la ligne)
            size_t found = logCache.find("\n");
            if (foudn != std::string::npos){
                logCache = logCache.substr(found);
            }
        }
    private:
        std::string str_; // ce qui sera écrit dans le log
        std::string filename_; // le nom du fichier log à utiliser
        size_t maxSize_; // la taille du fichier à ne pas dépasser
};

NOTA: C'est du code très vite écrit et absolument pas testé, mais l'idée générale est bel et bien là ;)

02/02/2015, 15h41
ternel

J'avais pas eu le courage de l'écrire :D
02/02/2015, 16h32
Invité

C'est effectivement l'option que j'avais choisie en attendant de trouver quelque chose de plus élégant.
(concaténation dans un std::string puis réduction de sa taille)

Je pensais pouvoir éviter d'exécuter "tout ce code" à chaque fois que je rajoute une ligne dans le log, mais apparemment je vais devoir passer par là.

Merci pour votre aide.
02/02/2015, 16h57
Invité

Petite précision par rapport à ton code koala01, même si: ;)

Citation:

Envoyé par koala01

NOTA: C'est du code très vite écrit et absolument pas testé, mais l'idée générale est bel et bien là ;)

Il faudra veiller à rendre les méthodes atomiques dans le cas d'un programme multi-thread, au risque de voir les tests de taille s'exécuter pendant l'ajout de d'autres données.
02/02/2015, 18h29
koala01

Citation:

Envoyé par simontlr

Il faudra veiller à rendre les méthodes atomiques dans le cas d'un programme multi-thread, au risque de voir les tests de taille s'exécuter pendant l'ajout de d'autres données.

L'avantage, c'est que je l'ai bien précisé : ce code n'est qu'un exemple qui permet de comprendre l'idée générale ;).

Déjà, l'opérateur += en fait en réalité beaucoup trop et ne respecte absolument pas le SRP (il ne devrait rien faire d'autre que d'ajouter la ligne de log ;) ).

Par contre, l'opération peut parfaitement ne pas être atomique! il "suffit" que les chaines à rajouter soient placées dans une "event queue" avant l'opération finale de concaténation, et le problème se résout "tout seul" ;)
03/02/2015, 19h37
bacelar

Citation:

C'est effectivement l'option que j'avais choisie en attendant de trouver quelque chose de plus élégant.

Le code de koala1 est facilement encapsulable dans une classe de stream.