Discussion :

[mister3957]

Bonjour à tous,

J'ai un fichier xml qui décrit une base de donnée.

On y trouve ce genre de chose :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
<nom_table>
<nom_attribut value1="valeur"/>
<nom_attribut value2="valeur"/>
</nom_table>

Le fichier xml fait 19 Go, et après import dans la base, ça fait 75Go.. Pourtant dans un fichier xml, y'a beaucoup de place prises de manière déclarative, qui ne concernent pas les données..

Alors après avoir lu un article, j'ai fait un dump de ma base comme ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

dump mabase > monfichier

et "monfichier" a une taille de 22Go, composé j'imagine que de requêtes SQL, ni compressé ni rien, car par défaut l'option est "PLAIN" non ?

Je l'ai réimporté comme ceci :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

psql < monfichier

Et le résultat pèse à nouveau 75Go..

Le script qui crée le schéma de la base est ici

Voyez-vous quelque chose de bizarre ?

Car au final le schéma n'est pas gros, alors en plus des données, je me demande ce qui peu prendre autant de place..

Merci à vous,

A bientôt

P.S.: Je n'ai pas encore tenté le VACCUM FULL mais ma base étant "neuve", je ne sais pas si ça en vaut la peine

[SQLpro]

Un document XML intègre à la foi la description des données méta données) pour chaque données et les données elle mêmes. Plus vous aurez de données, plus le poids des méta données sera important par rapport aux données réellement utiles. C'est pourquoi le type de données XML doit être réservé pour de l'EDI et non pas comme stockage en bases de données.

A +

[estofilo]

Le script qui crée le schéma de la base est ici

Voyez-vous quelque chose de bizarre ?

Ce script créé 33 index, qui prennent forcément une certaine place.

Il est possible de voir ça avec une requête de ce style:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
 
 
SELECT
c.relname AS nom,
c.reltuples::bigint AS tuples,
pg_total_relation_size(c.relname) AS volume_total,
pg_relation_size(c.relname) AS volume_donnees,
pg_total_relation_size(c.relname)-pg_relation_size(c.relname) AS volume_index
FROM pg_catalog.pg_class c
JOIN pg_catalog.pg_roles r ON r.oid = c.relowner
LEFT JOIN pg_catalog.pg_namespace n ON n.oid = c.relnamespace
WHERE c.relkind = 'r'
AND n.nspname NOT IN ('pg_catalog', 'pg_toast')
AND pg_catalog.pg_table_is_visible(c.oid)
ORDER BY 1,2;

P.S.: Je n'ai pas encore tenté le VACCUM FULL mais ma base étant "neuve", je ne sais pas si ça en vaut la peine

Non ça ne sert à rien effectivement.