IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

EDI, CMS, Outils, Scripts et API PHP Discussion :

Bug lors de l'import de gros CSV. [phpMyAdmin]


Sujet :

EDI, CMS, Outils, Scripts et API PHP

  1. #1
    Membre à l'essai
    Profil pro
    Inscrit en
    Octobre 2009
    Messages
    15
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2009
    Messages : 15
    Points : 12
    Points
    12
    Par défaut Bug lors de l'import de gros CSV.
    Bonjour à tous,

    J'utilise phpmyadmin pour gérer toutes mes bases de données.
    J'ai un grand nombre de données à intégrer (plusieurs dizaines de bases de plusieurs milliers d'enregistrements avec plusieurs centaines de colonnes).

    J'ai fais un test pour l'import de CSV via phpmyadmin en utilisant juste des "head" (d'une centaine de lignes) de mes fichiers csv, et tout marche sans pb.
    Il me créé bien une table "table1", avec ses colonnes en prenant la première ligne comme titre (comme je lui demande) et en adaptant le type de colonne et leur taille au type de données insérées.

    Problème: Quand je veux importer tout mon fichier (15Mo), j'ai une page blanche (sans messages d'erreur, sans rien), et aucune table ne se créée.

    Infos:
    - J'ai bien passé mes directives upload_max_filesize = 20M et post_max_size = 20M, phpmyadmin m'indique bien 20Mo en taille de fichiers max.
    - J'ai tenté une feinte: Importer le "head" du fichier pour créer les colonnes puis importer la totalité du fichier via le CLI mysql mais c'est une fausse bonne idée car il ne prend en compte que ces premières lignes pour estimer la taille des champs.
    - Mysqlimport ne semble pas gérer la création de table "à la volée" avec la création de colonnes automatiques, etc. Je me trompe?

    D'où vient cette page blanche phpmyadmin? Comment la contourner et réussir à créer automatiquement mes longues tables depuis un CSV?

    Merci d'avance!
    Images attachées Images attachées  

  2. #2
    Membre éprouvé
    Profil pro
    Développeur .NET
    Inscrit en
    Février 2005
    Messages
    363
    Détails du profil
    Informations personnelles :
    Localisation : Belgique

    Informations professionnelles :
    Activité : Développeur .NET
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Février 2005
    Messages : 363
    Points : 1 036
    Points
    1 036
    Par défaut
    Salut,

    Faut regarder dans les log du serveur web et afficher la console de dev de ton browser pour avoir des pistes.

    Ou alors, madame irama ?

  3. #3
    Modérateur
    Avatar de grunk
    Homme Profil pro
    Lead dév - Architecte
    Inscrit en
    Août 2003
    Messages
    6 691
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 39
    Localisation : France, Côte d'Or (Bourgogne)

    Informations professionnelles :
    Activité : Lead dév - Architecte
    Secteur : Industrie

    Informations forums :
    Inscription : Août 2003
    Messages : 6 691
    Points : 20 222
    Points
    20 222
    Par défaut
    La comme ça je vois trois possibilités :

    Temps d exécution depassé
    Mémoire alloué trop faible.
    Csv mal formé

    Affiche les erreurs ou consulte les dans le logs défini dans le PHP.ini pour plus d infos
    Pry Framework php5 | N'oubliez pas de consulter les FAQ Java et les cours et tutoriels Java

  4. #4
    Membre à l'essai
    Profil pro
    Inscrit en
    Octobre 2009
    Messages
    15
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2009
    Messages : 15
    Points : 12
    Points
    12
    Par défaut
    Problème réglé:

    Le serveur montait en charge (peut être à cause d'une malformation du .csv, pourtant juste un export de calc).

    Il lui fallait quasiment 3Go de ram pour traiter cet import.
    J'ai donc passé le memory_limit du fichier de config php à 3072

    Ensuite c'est mysql qui m'envoyait valser:
    #1153 - Got a packet bigger than 'max_allowed_packet' bytes

    J'ai donc modifié mon my.cnf pour lui changer la directive max_allowed_packet et la passer de 16 à 128.

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Inversion mois/jour lors d'une importation d'un CSV
    Par mamax29 dans le forum Macros et VBA Excel
    Réponses: 3
    Dernier message: 11/06/2010, 14h43
  2. [AC-2000] PB lors de l'import d'un csv dans une base
    Par zandeparis dans le forum VBA Access
    Réponses: 2
    Dernier message: 11/11/2009, 21h02
  3. [AC-2000] gestion des erreurs lors de l'importation d'un CSV dans une table formaté
    Par zandeparis dans le forum VBA Access
    Réponses: 1
    Dernier message: 02/11/2009, 23h45
  4. Bugs lors de l'importation du méta-data
    Par rdmontreal dans le forum W4 Express
    Réponses: 2
    Dernier message: 24/07/2009, 15h59
  5. [PHP 5.2] Bug lors de l'importation vers excel
    Par beegees dans le forum Langage
    Réponses: 2
    Dernier message: 08/02/2009, 13h47

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo