IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Hibernate Java Discussion :

Comment éviter des milliers d'Insert


Sujet :

Hibernate Java

Vue hybride

Message précédent Message précédent   Message suivant Message suivant
  1. #1
    Membre très actif
    Profil pro
    Inscrit en
    Février 2006
    Messages
    188
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Février 2006
    Messages : 188
    Par défaut Comment éviter des milliers d'Insert
    Bonjour


    Pour un projet j'ai construit une liste d'objets java qui contient elle même une liste enfants d'objets formant un arbre père/fils.

    Au total j'ai plusieurs dizaines de milliers d'objets oren sauvegardant j'ai remarqué que pour chaque objet j'avais un insert dans la base de données du coup cette opération peut me prendre presque une heure.

    N'y aurait-il pas un moyen de faire les insert par blocs :

    en gros passer de

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    INSERT INTO ... VALUES (...)
    INSERT INTO ... VALUES (...)
    INSERT INTO ... VALUES (...)
    INSERT INTO ... VALUES (...)
    à

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    INSERT INTO ... VALUES (...),(...),(...),(...)

    Et ainsi n'avoir qu'une seule requête

  2. #2
    Membre Expert Avatar de Nico02
    Homme Profil pro
    Developpeur Java/JEE
    Inscrit en
    Février 2011
    Messages
    728
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Hérault (Languedoc Roussillon)

    Informations professionnelles :
    Activité : Developpeur Java/JEE
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Février 2011
    Messages : 728
    Par défaut
    Salut,

    Tu peux utiliser les insertions par lot.

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
     
    PreparedStatement ps = con.prepareStatement("INSERT INTO MA_TABLE VALUES (?, ?) ");
     
    for( ... )// ici tu boucles sur ta liste
    {
      ps.setString( 1, list.getParam1() );
      ps.setInt( 2, list.getParam2() ;
      ps.addBatch();
    }
     
    ps.executeBatch();
    Après si vraiment tu as beaucoup de lignes tu peux faire un batch toute les 1000 lignes par exemple

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
     
    PreparedStatement ps = con.prepareStatement("INSERT INTO MA_TABLE VALUES (?, ?) ");
     
    int cpt = 0;
    final int maxLignes = 1000;
     
    for( ... )// ici tu boucles sur ta liste
    {
      ps.setString( 1, list.getParam1() );
      ps.setInt( 2, list.getParam2() ;
      ps.addBatch();
     
      if( ( ++cpt % maxLignes ) == 0 )
       ps.executeBatch();
    }
     
    ps.executeBatch();
    Comme ça tu insères 1000 lignes par 1000 lignes et le reste à la fin.

    Cdt.

  3. #3
    Expert éminent
    Avatar de tchize_
    Homme Profil pro
    Ingénieur développement logiciels
    Inscrit en
    Avril 2007
    Messages
    25 482
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 46
    Localisation : Belgique

    Informations professionnelles :
    Activité : Ingénieur développement logiciels
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Avril 2007
    Messages : 25 482
    Par défaut
    avec la propriété hibernate.jdbc.batch_size > 0, hibernate est supposé regrouper les insert en batches de taille n
    avec la propriété hibernate.jdbc.batch_versioned_data=true il batches aussi les update
    avec hibernate.order_inserts=true il réordonne les insertion pour regrouper ce qui concerne la même table
    avec hibernate.order_updates=trueil réordonne les update

Discussions similaires

  1. Comment éviter des milliers d'Insert
    Par amira dans le forum Hibernate
    Réponses: 5
    Dernier message: 14/10/2016, 22h54
  2. Réponses: 13
    Dernier message: 08/06/2009, 09h26
  3. Comment éviter des requêtes dans une boucle
    Par dam28800 dans le forum Langage
    Réponses: 43
    Dernier message: 04/12/2008, 16h53
  4. [MySQL] Comment éviter des doublons dans une liste déroulante ?!
    Par L'anonyme_connu dans le forum PHP & Base de données
    Réponses: 3
    Dernier message: 12/03/2008, 11h14

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo