IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

XQUERY/SGBD XML Discussion :

[BdD] Gros fichier XML (500mo) => BDD : Quelle technique ?


Sujet :

XQUERY/SGBD XML

  1. #1
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut [BdD] Gros fichier XML (500mo) => BDD : Quelle technique ?
    Bonjour,

    Je souhaite parser un gros fichier XML de 500mo et stocker les données dans une base mysql.
    Je veux récupèrer seulement le contenu de certaines balises du fichier XML.
    Je veux le parser rapidement car je souhaite mettre à jour toutes les 24h.

    J'aurais 2 questions :

    Selon vous quelle est la méthode la plus efficace ? simplexml convient ? SAX ? ...

    Je dispose d'une dédibox, je sais que ce sont pas les meilleurs serveurs mais j'ai pas un gros budget. Est ce que ca suffit pour réaliser ceci ?

    Merci de votre aide.

  2. #2
    Membre éprouvé Avatar de alain.couthures
    Profil pro
    Gérant
    Inscrit en
    Avril 2007
    Messages
    902
    Détails du profil
    Informations personnelles :
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Gérant

    Informations forums :
    Inscription : Avril 2007
    Messages : 902
    Points : 1 247
    Points
    1 247
    Par défaut
    SAX est effectivement fait pour lire "à la volée" un gros document XML sans le charger en mémoire : il faut chercher dans cette direction à mon avis.
    Formulaires XForms sur tous navigateurs sans extension à installer (architecture XRX) : http://www.agencexml.com/xsltforms/

  3. #3
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut
    et que pensez-vous de XMLReader ?

  4. #4
    Membre éprouvé Avatar de alain.couthures
    Profil pro
    Gérant
    Inscrit en
    Avril 2007
    Messages
    902
    Détails du profil
    Informations personnelles :
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Gérant

    Informations forums :
    Inscription : Avril 2007
    Messages : 902
    Points : 1 247
    Points
    1 247
    Par défaut
    XMLReader est un terme employé dans différents contextes (.Net, Java, PHP) mais toujours pour la même approche : lire dans l'ordre un document XML sans le charger en mémoire. C'est le principe de SAX donc pour moi c'est la même chose et c'est ce qu'il vous faut essayer !
    Formulaires XForms sur tous navigateurs sans extension à installer (architecture XRX) : http://www.agencexml.com/xsltforms/

  5. #5
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut
    D'accord,
    Tout d'abord merci pour vos réponses.

    SimpleXML a quelles différences (avantages ou inconvénients) par rapport à XMLReader et SAX ?

  6. #6
    Membre éprouvé Avatar de alain.couthures
    Profil pro
    Gérant
    Inscrit en
    Avril 2007
    Messages
    902
    Détails du profil
    Informations personnelles :
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Gérant

    Informations forums :
    Inscription : Avril 2007
    Messages : 902
    Points : 1 247
    Points
    1 247
    Par défaut
    SimpleXML n'est qu'une interface plus simple pour un traitement avec chargement en mémoire... ce n'est donc pas ce qu'il vous faut.
    Formulaires XForms sur tous navigateurs sans extension à installer (architecture XRX) : http://www.agencexml.com/xsltforms/

  7. #7
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut
    D'accord, merci beaucoup pour votre aide

    Tout celà se réalise entièrement en PHP ? Parcque j'entends beaucoup parler du java et j'aimerais savoir quels languages il faut utiliser.

    Merci

    PS :Si vous connaissez une bonne adresse ou apprendre tout ceci, je l'accepterais avec plaisir.

  8. #8
    Membre éprouvé Avatar de alain.couthures
    Profil pro
    Gérant
    Inscrit en
    Avril 2007
    Messages
    902
    Détails du profil
    Informations personnelles :
    Localisation : France, Gironde (Aquitaine)

    Informations professionnelles :
    Activité : Gérant

    Informations forums :
    Inscription : Avril 2007
    Messages : 902
    Points : 1 247
    Points
    1 247
    Par défaut
    Entièrement en PHP 5, oui c'est possible.

    Par contre en PHP 4, il faut la bonne extension...

    Sinon, Java et C# n'ont bien sûr aucun problème avec les flux XML !!!

    Le mieux est de trouver des exemples sur Internet (je n'en ai pas sous le coude...)
    Formulaires XForms sur tous navigateurs sans extension à installer (architecture XRX) : http://www.agencexml.com/xsltforms/

  9. #9
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut
    Mettons que j'utilise PHP5
    Une telle opération prendrait combien de temps à peu près ?
    Je n'en ai aucune idée pour l'instant.
    Une fourchette me suffirait.

    Merci

    EDIT : j'ai trouvé un lien assez interessant http://tecfa.unige.ch/perso/staf/gen...XMLdePHP5.html
    (Si jamais d'autres passent sur ce topic et sont interessés)

  10. #10
    Expert éminent
    Avatar de GrandFather
    Inscrit en
    Mai 2004
    Messages
    4 587
    Détails du profil
    Informations personnelles :
    Âge : 54

    Informations forums :
    Inscription : Mai 2004
    Messages : 4 587
    Points : 7 103
    Points
    7 103
    Par défaut
    Bonjour,

    Citation Envoyé par Masterlud
    Mettons que j'utilise PHP5
    Une telle opération prendrait combien de temps à peu près ?
    Je n'en ai aucune idée pour l'instant.
    Une fourchette me suffirait.
    Cela dépend de trop de facteurs pour te donner une fourchette, même très approximative. La seule certitude, c'est ce qui t'a déjà été dit : SAX obligatoire, DOM (et SimpleXML) à proscrire.
    FAQ XML
    ------------
    « Le moyen le plus sûr de cacher aux autres les limites de son savoir est de ne jamais les dépasser »
    Giacomo Leopardi

  11. #11
    Membre à l'essai
    Profil pro
    Inscrit en
    Avril 2007
    Messages
    24
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Avril 2007
    Messages : 24
    Points : 12
    Points
    12
    Par défaut
    Ok,
    Merci en tous cas, vos informations m'auront été bien utiles.
    Maintenant, il ne reste plus qu'à créer le parseur

+ Répondre à la discussion
Cette discussion est résolue.

Discussions similaires

  1. Réponses: 0
    Dernier message: 06/11/2014, 16h10
  2. Sql Server 2005 : conversion d'une BDD en fichier XML
    Par informaticienne_2009 dans le forum Accès aux données
    Réponses: 1
    Dernier message: 23/07/2009, 11h42
  3. Génération automatique de fichier xml d'une BDD depuis code java ?
    Par zuzuu dans le forum Persistance des données
    Réponses: 0
    Dernier message: 11/03/2009, 09h09
  4. Fichier XML VS Données BDD
    Par Linio dans le forum XQUERY/SGBD
    Réponses: 4
    Dernier message: 19/03/2008, 17h29
  5. BDD ou fichier XML
    Par Seth77 dans le forum Général Dotnet
    Réponses: 2
    Dernier message: 21/05/2007, 08h29

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo