IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

C++ Discussion :

lecture d'un fichier gigantesque en temps réel


Sujet :

C++

  1. #1
    Membre confirmé
    Inscrit en
    Mars 2007
    Messages
    101
    Détails du profil
    Informations forums :
    Inscription : Mars 2007
    Messages : 101
    Par défaut lecture d'un fichier gigantesque en temps réel
    bonjour,
    Voila mon problème

    J'ai un appareil de mesure qui enregistre des données en temps réel via tcp/ip sur mon disque dur ( vitesse 5mo/s) et ceci pendant plusieurs jours
    j'ai donc un seul fichier qui peut avoir plusieurs centaines de Go ( 3To)
    Je dois le traiter en temps réel. Pour ça je fais un open , j'ai la longueur du fichier N1 et je le traite
    pendant que je traite jusqu’au pointeur N1 , celui ci augmente jusqu'à une valeur N2 .
    je dois donc alors traiter les données entre N1 et N2
    Ce je fais actuellement , c'est de fermer le fichier , de l'ouvrir de nouveau et j'ai alors la nouvelle longueur N2 , d'aller à N1 et de traiter jusqu'à N2
    Le problème est que ceci est très long ( close , open, seek ) à chaque fois surtout lorsque j'ai un fichier de 1 To .
    donc ce que je voudrais , c'est avoir la vrai longueur en temps réel du fichier et de pouvoir lorsque je suis à N1 de continuer en temps réel jusqu'à N2.

    merci si vous avez une réponse

  2. #2
    Membre éclairé Avatar de Diablo_22
    Homme Profil pro
    Étudiant
    Inscrit en
    Février 2005
    Messages
    498
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 36
    Localisation : France, Maine et Loire (Pays de la Loire)

    Informations professionnelles :
    Activité : Étudiant
    Secteur : Aéronautique - Marine - Espace - Armement

    Informations forums :
    Inscription : Février 2005
    Messages : 498
    Par défaut
    Bonjour,

    La Classe : FileSystemWatcher peut t'aider à le faire:

    FileSystemWatcher Class (MSDN)

  3. #3
    Expert éminent

    Femme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Juin 2007
    Messages
    5 202
    Détails du profil
    Informations personnelles :
    Sexe : Femme
    Localisation : France, Essonne (Île de France)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels

    Informations forums :
    Inscription : Juin 2007
    Messages : 5 202
    Par défaut
    Sinon, coté linux, la commande tail -f qui permet d'afficher en temps réel les dernières lignes d'un fichier.

    Tu peux donc regarder comment c'est fait.

    Par ailleurs, lire un fichier à la volée, ca ressemble beaucoup à un pipe, nommé (mkpipe sous linux) ou non ( commande 1 | commande 2).

    Avec un pipe, la lecture du flux (ou fichier) n'arrive au EOF qu'à la fin de la premiere commande.
    Quand on arrive à une fin concrète du fichier, commande 2 est mise en attente jusqu'à ce que commande 1 s'arrete ou qu'elle écrive à nouveau.

    La différence entre un pipe nommé et non nommé, c'est que l'écriture se fera dans un fichier (pipe nommé) ou dans le flux standard (non nommé)

  4. #4
    Membre chevronné Avatar de fenkys
    Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Octobre 2007
    Messages
    376
    Détails du profil
    Informations personnelles :
    Âge : 58
    Localisation : France

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : High Tech - Produits et services télécom et Internet

    Informations forums :
    Inscription : Octobre 2007
    Messages : 376
    Par défaut
    Citation Envoyé par leternel Voir le message
    Sinon, coté linux, la commande head -f qui permet d'afficher en temps réel les dernières lignes d'un fichier.
    C'est presque ça, la commande est en fait tail -f.

  5. #5
    Expert éminent

    Femme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Juin 2007
    Messages
    5 202
    Détails du profil
    Informations personnelles :
    Sexe : Femme
    Localisation : France, Essonne (Île de France)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels

    Informations forums :
    Inscription : Juin 2007
    Messages : 5 202
    Par défaut
    oups... c'est corrigé.
    Le pire, c'est que j'y ai pensé, et je me suis dit "non, pas head, tail"...

  6. #6
    Membre confirmé
    Inscrit en
    Mars 2007
    Messages
    101
    Détails du profil
    Informations forums :
    Inscription : Mars 2007
    Messages : 101
    Par défaut
    Merci , je vais voir ca
    Est ce que vous savez si ca existe aussi sous visual net ?

  7. #7
    Expert éminent

    Femme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Juin 2007
    Messages
    5 202
    Détails du profil
    Informations personnelles :
    Sexe : Femme
    Localisation : France, Essonne (Île de France)

    Informations professionnelles :
    Activité : Ingénieur développement logiciels

    Informations forums :
    Inscription : Juin 2007
    Messages : 5 202
    Par défaut
    Pour le code source de tail:
    Visual net est un EDI, complètement indépendant du code source. C'est une manière de le voir.

    Par contre, c'est un EDI pour Windows uniquement.
    Regarde du coté du code source du tail de buzybox ou dans celui de cygwin.
    Par contre, c'est affreux à lire.

    Pour les pipes
    Sous windows, les pipes non nommés fonctionnent exactement pareils.
    Pour les pipes nommés, je ne sais pas, mais je chercherais windows named pipe. Tu devrais trouver les infos sur MSDN.

Discussions similaires

  1. lecture temp-réel d'un fichier contenant un signal
    Par vince2121 dans le forum Simulink
    Réponses: 0
    Dernier message: 08/09/2015, 15h32
  2. Traitement d'un fichier son en temps réel
    Par strattist dans le forum MATLAB
    Réponses: 0
    Dernier message: 08/11/2011, 19h07
  3. Fichier texte et Temps Réel, comment faire ?
    Par prog_ dans le forum Langage
    Réponses: 14
    Dernier message: 30/03/2010, 00h29
  4. C# : Taille d'un fichier en temps réel ?
    Par petard14 dans le forum Général Dotnet
    Réponses: 2
    Dernier message: 11/03/2008, 17h06
  5. Lecture de deux fichiers en même temps
    Par salut93 dans le forum C++
    Réponses: 3
    Dernier message: 26/06/2007, 15h29

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo