Discussion :

[Claythest]

Bonjour tout le monde,

Ne trouvant de réponse nulle part, j'en appelle à vous...

J'aimerai charger une grosse base de données (quelques centaines de milliers de lignes) afin de la rendre disponible pour mon appli. Ces données, je les ai au format csv, ce qui normalement est le plus performant pour charger une BD.

J'ai donc pensé utiliser la base de données fournie SQLite (classe SQLiteOpenHelper).

Mais voila, quelle est la commande SQL (ou code Java ?) qui me permettrait d'importer ce csv sans devoir lire moi même le fichier et surtout insérer ligne par ligne dans ma table ?

J'ai testé la manière bateau, ouvrir le fichier, le lire ligne par ligne, et insérer ces lignes dans la BD, mais j'en ai pour 20 minutes de calcul ! Il me faut à tout prix optimiser ça !

Avez-vous une idée ?

Merci d'avance pour toute aide ou toute piste !

[Feanorin]

Bonjour,

Je ne m'y connais pas beaucoup sur le sujet, mais il existe une commande sous sqllite pour importer des fichiers csv.

http://www.sqlite.org/cvstrac/wiki?p=ImportingFiles

[MisterS]

Bonjour ,

Je suis actuellement sur le même genre de recherche (import CSV / Txt / .db).

Pour le CSV il semblerais que des bibliothèques existe pour simplifier la tache , mais je n'ai pas encore réussi a mettre en place ...

SuperCSV est sur lequel j'ai essayer de faire des essayes ce matin mais ... sans trop de succès (les tutoriaux sont mince et peu clair mais si tu peu trouver a solutionné )

http://sourceforge.net/projects/supercsv/

http://www.xinotes.org/notes/note/1379/


C'est bien dommage que ce genre de "demande" ne soit pas pris en compte dans les livres tels que "Developpement Android" , et les Formation Video2brain (qui est au passage un passage sur les chapitre du livre ... )

Cordialement ,

[Claythest]

J'ai finalement opté pour une autre stratégie, à savoir changer de SGBD.
Car le SQLite embarqué dans android, en plus de rendre impossible l'importation CSV, il ne peut pas posséder de tables avec plus de 10 000 lignes... Or dans mon application, j'en ai besoin de 4 fois plus...

Je suis passé sous H2, l'import CSV fonctionne et est relativement plus rapide, et me permet en plus de gérer une BD de la taille qui me convient.

[Feanorin]

Bonjour,

il ne peut pas posséder de tables avec plus de 10 000 lignes.

Juste par curiosité d'où tires tu cette informations ?
Personnellement il me semblait que la limite était celle imposé par sqlite soit 9223372036854775807.

[Claythest]

Je n'ai pas trouvé de source "fiable", mais j'ai trouvé plusieurs site où certains utilisateurs faisaient référence à cela.

Par exemple :

http://forums.oracle.com/forums/thre...203&tstart=135

http://stackoverflow.com/questions/5...its-in-android

[MisterS]

H2 est compatible Android ?

Pour les 10.000lignes il me semble que c'est plus effectivement (je suis sur 38.000enregistrement moi). Après peut être que pour une optimisation de temps il faille mieux en mettre 10.000 c'est possible.

Tu peux nous faire un petit briefing sur H2 au passage, je ne connais pas du tout , mais peu être intéressant.

Cordialement ,