IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Java Discussion :

Importer des gros fichiers


Sujet :

Java

Vue hybride

Message précédent Message précédent   Message suivant Message suivant
  1. #1
    Membre chevronné
    Profil pro
    Inscrit en
    Janvier 2006
    Messages
    511
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Janvier 2006
    Messages : 511
    Par défaut Importer des gros fichiers
    Bonjour,

    Je ne savais pas trop ou mettre ma question...

    Comment gérer vous l'Import de gros fichiers (disons un fichier csv de 20 mo par exemple).
    Vous importez tout en mémoire et ensuite effectuez les opérations (parsing, sauvegarde en base ....).
    J'ai l'impression que faire cela peut saturer très vite la mémoire. D'autant plus que j'utilise hibernate et que je transforme chaque ligne en objet pour ensuite effectuer un save dessus.
    Bref je me demande quelle est la meilleur voie face à de gros import.

    Merci

    Shivan

  2. #2
    Expert éminent
    Avatar de tchize_
    Homme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Avril 2007
    Messages
    25 482
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 46
    Localisation : Belgique

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Avril 2007
    Messages : 25 482
    Par défaut
    ben si tout ce que t'as a faire c'est

    lire une ligne
    créer l'objet en fonction
    save
    ligne suivante


    je vois pas pourquoi tu voudrais tout garder en mémoire

Discussions similaires

  1. [XML][ENCRYPTION] encoder des gros fichiers avec AES_128
    Par marcsaker dans le forum Format d'échange (XML, JSON...)
    Réponses: 3
    Dernier message: 29/09/2006, 09h18
  2. [FOP 0.92 beta] support des gros fichiers ?
    Par massambius dans le forum XML/XSL et SOAP
    Réponses: 8
    Dernier message: 07/08/2006, 15h43
  3. Upload par FTP avec des gros fichiers
    Par __fabrice dans le forum EDI, CMS, Outils, Scripts et API
    Réponses: 8
    Dernier message: 07/06/2006, 12h08
  4. Transférer des gros fichiers, choix technologique?
    Par RB Greg dans le forum Développement
    Réponses: 8
    Dernier message: 25/04/2006, 10h25
  5. Peut-on lire des gros fichiers(100k) avec "TClientSocke
    Par Fred LEM dans le forum C++Builder
    Réponses: 3
    Dernier message: 20/12/2004, 14h41

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo