Requête avec blob très lente.

Version imprimable

Bonjour, je dispose d'un script contenant le backup de ma base et je souhate l'exécuter. J'ai donc codé ceci :
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 Session session = HibernateSessionFactory.getSession(); Transaction transaction; InputStream ips = new FileInputStream(backupScript); BufferedInputStream bis= new BufferedInputStream(ips); InputStreamReader ipsr = new InputStreamReader(bis); BufferedReader br = new BufferedReader(ipsr); String ligne; String sqlQuery = ""; while ((ligne = br.readLine()) != null) { if (ligne.startsWith("--")) { continue; } sqlQuery += ligne; if (ligne.endsWith(";")) { transaction = session.beginTransaction(); session.createSQLQuery(sqlQuery).executeUpdate(); transaction.commit(); sqlQuery = ""; } } br.close(); session.close();
Cela fonctionne, mais c'est très très lent et me bloque Eclipse durant l'exécution. L'exécution de ce script ne prend que quelques secondes avec Mysql Administrator (5-6sec). Le problème se situe au niveau des insertions contenant des blobs. Sauriez vous où se situe le problème et comment le résoudre ?

1. Voici une petite optimisation rapide à tester ( pas de gestion d'erreur, pas de rollback de transaction je te laisse compléter.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
Session session = HibernateSessionFactory.getSession();
Transaction transaction;
InputStream ips = new FileInputStream(backupScript); 	
BufferedInputStream bis= new BufferedInputStream(ips);
InputStreamReader ipsr = new InputStreamReader(bis);
BufferedReader br = new BufferedReader(ipsr);
String ligne;
String sqlQuery = "";
transaction = session.beginTransaction(); // démarre la transaction en début de boucle
int i = 0; // un petit compteur de ligne;
while ((ligne = br.readLine()) != null) {
        if (ligne.startsWith("--")) {
	    	continue;
        }
        sqlQuery += ligne;
	if (ligne.endsWith(";")) {
                 i++; // insertion d'une nvlle ligne
	    session.createSQLQuery(sqlQuery).executeUpdate();												
	    sqlQuery = "";
	}
	if (i  % LA_VALEUR_QUI_VA_BIEN == 0) { // la valeur qui va bien dépend de ton ficher de config hibernate ( prend la même valeur que hibernate.jdbc.batch_size
	      session.flush();
	      session.clear();
	}
 
}
br.close();
transaction.commit(); // termine la transaction en fin de boucle
 
session.close();

2. si ça ne suffit pas tu peux aussi ouvrir une transaction hibernate "stateless"

Code:

1
2
3
 
StatelessSession session = sessionFactory.openStatelessSession();
Transaction tx = session.beginTransaction();

http://www.dil.univ-mrs.fr/~massat/d...tml/batch.html

14/08/2008, 11h32
Alphonse87

Merci, j'ai en fait trouvé l'origine du problème ... l'option <property name="hibernate.show_sql"> était à true, et cela causait apparement des problèmes à Eclipse lors de la requête particulièrement longue ... Une fois passé à false, cela fonctionne correctement ...

Cela dit, merci pour ces conseils, je ne m'étais pas spécialement attardé sur les détails de gestion des erreurs et de l'endroit où placer les commit etc ... J'y vais donc de ce pas :)

Problème résolu donc ... Merci !