Discussion :

[Eric_03]

Bonjour,

Je dispose de deux fichiers:

• un fichier de données au format texte (100 Go environ)
• Un fichier xml qui me permet de découper en colonne le fichier txt

Fichier xml:

Code XML :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
<?xml version="1.0" encoding="utf-8" standalone="no" ?>
<!DOCTYPE DataSet SYSTEM "GDPDU-01-09-2004.DTD">
<DataSet>
<Version>3.0.0001</Version>
<DataSupplier>
<Name>Données de production</Name>
<Location>XXXXXXXXXX</Location>
</DataSupplier>
<Media>
<Name>DISC1</Name>
<Table>
<URL>20201102073047_EP1_CdC_PNS_FI_GL.TXT</URL>
<Name>CdC_PNS_FI_GL</Name>
<Description>Accounting Document Header</Description>
<UTF8/>
<DecimalSymbol>.</DecimalSymbol>
<DigitGroupingSymbol>,</DigitGroupingSymbol>
<FixedLength>
<RecordDelimiter>
</RecordDelimiter>
<FixedColumn>
<Name>BKPF-BUKRS</Name>
<Description>Company Code</Description>
<AlphaNumeric/>
<FixedRange>
<From>1</From>
<To>4</To>
</FixedRange>
</FixedColumn>
<FixedColumn>
<Name>BKPF-BELNR</Name>
<Description>Accounting Document Number</Description>
<AlphaNumeric/>
<FixedRange>
<From>5</From>
<To>14</To>
</FixedRange>
</FixedColumn>
<FixedColumn>
<Name>BKPF-GJAHR</Name>
<Description>Fiscal Year</Description>
<Numeric>
</Numeric>
<FixedRange>
<From>15</From>
<To>18</To>
</FixedRange>
</FixedColumn>
<FixedColumn>
<Name>BKPF-BLART</Name>
<Description>Document Type</Description>
<AlphaNumeric/>
<FixedRange>
<From>19</From>
<To>20</To>
</FixedRange>
</FixedColumn>
<FixedColumn>
<Name>BKPF-BLDAT</Name>
<Description>Document Date in Document</Description>
<Date>
<Format>YYYYMMDD</Format>
</Date>
<FixedRange>
<From>21</From>
<To>28</To>
</FixedRange>
</FixedColumn>

J'importe le fichier texte dans Power Query en une seule colonne et dois le fractionner par nombre de caractère selon le fichier xml. Ce fichier peut évoluer.

Peut on créer de manière automatique dans Power Query à partir du fichier xml cette requête ou automatiser l'importation dans l'éditeur?



Merci
Eric

[Pierre Fauconnier]

Salut.

Ton fichier xml n'est pas complet, et nous de disposons pas d'un extrait significatif de ton fichier texte (On n'a pas besoin des 100Go) mais de quelques lignes.

Dès lors, il est forcément malaisé de répondre

[Eric_03]

Bonjour et merci,

Le fichier texte peut être alimenté de plusieurs millions de lignes

Eric

[Pierre Fauconnier]

Perso, ce que je ne comprends pas bien, c'est que ton fichier txt puisse changer de format d'extraction en extraction et qu'il faille modifier Power Query sur base d'un fichier xml pour en définir la structure à la volée.

[Eric_03]

Dans le cas présent le nom de fichier est modifié à chaque extraction de SAP (1 extraction par semaine)

Code XML :

Sélectionner tout - Visualiser dans une fenêtre à part

<URL>20201102073047_EP1_CdC_PNS_FI_GL.TXT</URL>

Je voulais savoir s'il était possible de générer des structures à la volée avec un fichier xml et comment le faire, car je peux recevoir d'autres fichiers avec des structures différentes.

Eric

[Pierre Fauconnier]

Pour les structures différentes, j'ai l'impression que c'est réinventer Power Query. Ce que tu expliques ne me permet pas de comprendre pourquoi la structure est modifiée d'un fichier à l'autre.

Pour ce qui est du nom de fichier qui change, mais de fichiers qui, de fois en fois, garderaient la même structure, tu peux récupérer avec Power Query tous les fichiers d'un dossier. Dès lors, si le fichier est seul dans le dossier, tu récupères un seul fichier, quel que soit son nom, que tu traites selon une structure connue au départ.

On peut aussi récupérer x fichiers d'un dossier et les traiter différemment selon une clé (souvent identifiée par une partie du nom du fichier), mais changer le traitement des fichiers "à la volée" en fonction de la structure des fichiers ne me semble pas une approche réaliste.

[Eric_03]

Bonjour,

N'ayant pas réussi sous Excel, je me suis tourné vers python qui m'a permis de transformer un fichier xml en csv à la volée.

https://www.developpez.net/forums/d2...ation-xml-csv/

Merci
Eric

[Pierre Fauconnier]

Je pense que Power Query n'est pas prévu pour cela.

Donc, il faut se tourner vers de la programmation, en Python comme tu l'as fait, en VBA ou autre, en pouvant analyser un xml pour déduire le format d'un txt lié à cette structure xml.