Parser string vers un tableau HTML

Version imprimable

29/04/2022, 12h37
F1TRN

Parser string vers un tableau HTML

Bonjour,

Soit un string:

Code:

dataList[2180] = {id:"xxxxxx", room_id:"xxxxxx", call_sign:"F1TRN", city:"Sainte Cecile", state:"Centre", country:"France"};

En PHP je souhaite récupérer les valeurs de champs et de les placer dans un tableau à entête (id, room_id ...).

Comment faire ?

Merci de votre aide.
29/04/2022, 13h27
Séb.

Ce que tu montres n'existe pas en PHP.

Il y a une espèce d'objet qui ressemble à du JSON, mais qui n'en est pas.

Quelles données as-tu exactement ?
29/04/2022, 13h35
F1TRN

Les données sont celles que j'expose, elles proviennent d'un

Code:

$source_code = file('https://site.php');

Ensuite je fait un foreach de $source_code et recherche sur chaque ligne la présence d'un mot (ici mon indicatif radio F1TRN).

ce qui me donne donc:

Code:

dataList[2180] = {id:"34931", room_id:"44931", call_sign:"F1TRN", city:"Sainte Cecile", state:"Centre", country:"France"};

J'ai répondu à la question

Citation:

Quelles données as-tu exactement ?

Mon pb est donc bien celui-ci un JSON sans en être, je cherche donc à parser afin de récupérer les data et les mettre sous un tableau HTML.
29/04/2022, 14h47
laurentSc

Bonjour,
le tableau que tu souhaites obtenir ne serait-il pas plutôt un tableau PHP avec ce contenu :

Citation:

array=[
"id" =>"34931;
"room_id" =>"44931";
"call_sign"=>"F1TRN;
"city" => "Sainte Cecile";
"state" => "Centre";
"country" => "France"
]
29/04/2022, 15h56
F1TRN

Citation:

Envoyé par laurentSc

Bonjour,
le tableau que tu souhaites obtenir ne serait-il pas plutôt un tableau PHP avec ce contenu :

Oui mais comment l'obtenir ?
29/04/2022, 20h48
Séb.

Je ne sais toujours pas quelles données tu récupères et dans quel format.

Encore une fois ceci ne PEUT PAS exister en PHP :

Code:

dataList[2180] = {id:"34931", room_id:"44931", call_sign:"F1TRN", city:"Sainte Cecile", state:"Centre", country:"France"};

Est-ce un littéral ? Ou du pseudo-code ?

Donne-nous le retour BRUT du site.
29/04/2022, 23h08
laurentSc

Bonsoir,
j'ai très peu de dispo jusqu'à dimanche soir. Cela étant, F1TRN, peux-tu donner tes données en PHP (contenues dans une variable PHP) ? Le peu que je connaisse me laisse penser qu'une regex fera l'affaire...

Voici donc le code qui me permets de récupérer ces lignes:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
<html>
  <title>WIRES-X ID</title>
  <body>
  <p>Recherche des informations WIRES-X depuis un indicatif (Europe uniquement).</p>
  <form method="post" action="<?php echo $_SERVER['PHP_SELF'];?>">
    Indicatif: <input type="text" name="indicatif">
    <input type="submit">
  </form>
  <?php
  if ($_SERVER["REQUEST_METHOD"] == "POST") {
    $call = $_POST['indicatif'];
    if (empty($call)) {
      echo "Merci de renseigner le champ Indicatif !";
    } else {
      echo "Resultat de la recherche pour ".$call." :";
      echo "<br><br>";
      $source_code = file('https://www.yaesu.com/jp/en/wires-x/id/id_eu.php');
      foreach ($source_code as $line_number => $last_line) {
        $data = nl2br(htmlspecialchars($last_line) . "\n");
        if(preg_match("/{$call}/i", $data)) {
                echo $data;
        }
      }
    }
  }
  ?>
  </body>
</html>

OK, il s'agit donc d'un littéral d'une portion de code JavaScript d'une page web.

Code:

1
2
3
4
5
6
7
<script type="text/javascript">
var dataList = new Array();
dataList[0] = {id:"17002", room_id:"27002", call_sign:"IR0UCA", city:"Scandriglia(RI)", state:"Lazio", country:"Italy"};
dataList[1] = {id:"17003", room_id:"27003", call_sign:"IZ2EVE", city:"Cassolnovo", state:"Lombardy", country:"Italy"};
dataList[2] = {id:"17004", room_id:"27004", call_sign:"IU2CSY", city:"Azzio", state:"Lombardy", country:"Italy"};
dataList[3] = {id:"17006", room_id:"27006", call_sign:"I3ZNI", city:"Cassola", state:"Veneto", country:"Italy"};
...

Le plus simple est sûrement d'utiliser une regexp pour constituer un tableau associatif PHP que tu seras libre de manipuler comme tu le souhaites avec array_map() puis array_filter().

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
<?php
 
$url = 'https://www.yaesu.com/jp/en/wires-x/id/id_eu.php';
 
$contents = file_get_contents($url);
 
preg_match_all(
    <<<REGEXP
    /
        dataList\[\d+]\ =\ {
            id:"(?P<id>\d+)",
            \ room_id:"(?P<room_id>\d+)",
            \ call_sign:"(?P<call_sign>\w+)",
            \ city:"(?P<city>[^"]+)",
            \ state:"(?P<state>[^"]+)",
            \ country:"(?P<country>[^"]+)"
        };
    /x
    REGEXP,
    $contents,
    $matches,
    PREG_SET_ORDER
);
 
// Nettoyage et création du tableau associatif
$data = array_map(fn ($m) => [
    'id' => $m['id'],
    'room_id' => $m['room_id'],
    'call_sign' => $m['call_sign'],
    'city' => $m['city'],
    'state' => $m['state'],
    'country' => $m['country'],
], $matches);
 
// Filtrage
$keep = ['F1TRN', 'F5SHD']; // Tableau de call_signs à conserver
$filter = fn ($e) => in_array($e['call_sign'], $keep); // Closure de filtrage
$data = array_filter($data, $filter); // Filtrage
 
print_r($data); // Résultat final

Donne :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
Array (
    [2091] => Array (
        [id] => 34931
        [room_id] => 44931
        [call_sign] => F1TRN
        [city] => Sainte Cecile
        [state] => Centre
        [country] => France
    )
    [2104] => Array (
        [id] => 34950
        [room_id] => 44950
        [call_sign] => F5SHD
        [city] => LOURDES
        [state] => Midi-Pyrenees
        [country] => France
    )
)

30/04/2022, 13h49
F1TRN

Citation:

Envoyé par Séb.

Le plus simple est sûrement d'utiliser une regexp pour constituer un tableau associatif PHP que tu seras libre de manipuler comme tu le souhaites avec array_map() puis array_filter().

Merci beaucoup Séb. Je vais fortement regarder l'utilisation de REGEXP que je ne connais pas. Ne me reste donc plus qu'à constituer mon tableau.
30/04/2022, 14h08
Séb.

Dans mon script REGEXP est juste le délimiteur de la chaîne de caractères, syntaxe Heredoc ( https://www.php.net/manual/fr/langua...syntax.heredoc )
On aurait aussi bien pu délimiter la chaîne de l'expression rationnelle avec BUFFER ou STR ;)
Ce qui compte est preg_match_all() et le traitement effectué ensuite.

Voilà comment je ferais les choses:
Code:

1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 libxml_use_internal_errors(true); $dom = new DOMDocument; $dom->loadHTMLFile('https://www.yaesu.com/jp/en/wires-x/id/id_eu.php'); $scriptNodeList = $dom->getElementsByTagName('script'); $scriptContent = $scriptNodeList->item(3)->textContent; $lines = array_filter( explode("\n", $scriptContent), fn($line) => str_contains($line, '"F1TRN"') ); $results = []; foreach ($lines as $line) { $results[] = json_decode( preg_replace('~^[][\w=\s]+|(\w+)(?=:("))|[\s;]+$~', '$2$1$2', $line), true ); } print_r($results);
Je pars du principe qu'il n'est pas nécessaire de tester la structure de la ligne et que la seule présence de la chaîne "F1TRN" suffit à la valider.^*
Le remplacement effectué par preg_replace consiste simplement à ajouter des doubles quotes autour des clefs et à éliminer la variable et son affectation pour ne garder que l'objet littéral javascript.

C'est en PHP 8, mais ça peut être transformer en PHP 7 à peu de frais (en utilisant strpos à la place de str_contains, voire en remplaçant l'arrow function fn($line) => par une fonction anonyme function($line) { ... return ... })

^* Il est clair que dans le cas contraire une analyse bien plus poussée de la syntaxe de l'objet Javascript serait nécessaire.

La pattern:
1^ère branche: ^[][\w=\s]+ se charge d'enlever la variable, le signe = et les espaces au début de la ligne. Si cette branche réussit les groupes de capture 1 et 2 sont vides (pas définis du tout en fait) et le remplacement sera alors une chaîne vide.
2^e branche: (\w+)(?=:(")) capture la clef, une sous-chaîne de word characters ( a-z A-Z 0-9 _ ), qui est suivit par le caractère : (deux points) et un double quote ". La clef et le double quote sont capturés dans les groupes 1 et 2 utilisés dans le motif de remplacement.
3^e branche: [\s;]+$ permet d'enlever le point virgule et les éventuels caractères blancs en fin de ligne.

La partie DOMDocument pour extraire le contenu de la balise script est peut-être un peu too much vue la tête de ton document, tu peux aussi voir ce que cela donne en passant directement le résultat de ta commande file(...) à la place de explode("\n", $scriptContent).

30/04/2022, 17h04
laurentSc

Salut F1TRN ,

2 vrais experts t'ont répondu (posts #9 et #12) (Moi, c'est une supercherie de m'appeler "expert confirmé"). Et tous les 2 te proposent une solution basée sur les expressions singulières (souvent appelées regex ou REGEXP ;) ). C'est ce que j'avais intuité hier soir (post #7). Bonne continuation.

Citation:

Envoyé par F1TRN

Merci beaucoup Séb. Je vais fortement regarder l'utilisation de REGEXP que je ne connais pas. Ne me reste donc plus qu'à constituer mon tableau.

Oui ça fonctionne, mais pas à 100% car certains call_sign peuvent comporter un suffixe (exemple: F5CES/P) et donc dans ce cas là la ligne comportant le suffixe ne ressort pas.
Code:

1 2 3 4 5 6 7 Resultat de la recherche pour F5CES : dataList[597] = {id:"17919", room_id:"27919", call_sign:"F5CES", city:"Quantilly", state:"Centre", country:"France"}; dataList[2053] = {id:"34754", room_id:"44754", call_sign:"F5CES/P", city:"QUANTILLY", state:"Centre", country:"France"}; dataList[2982] = {id:"37996", room_id:"47996", call_sign:"F5CES", city:"QUANTILLY", state:"Centre", country:"France"};

CosmoKnacki,

Merci de ton aide, mais je ne parviens pas à mes fins. J'essaye donc toujours de transformer ces lignes:
Code:

1 2 3 4 5 dataList[597] = {id:"17919", room_id:"27919", call_sign:"F5CES", city:"Quantilly", state:"Centre", country:"France"}; dataList[2053] = {id:"34754", room_id:"44754", call_sign:"F5CES/P", city:"QUANTILLY", state:"Centre", country:"France"}; dataList[2982] = {id:"37996", room_id:"47996", call_sign:"F5CES", city:"QUANTILLY", state:"Centre", country:"France"};
en un objet que je pourrait manipuler comme:
Code:

1 2 echo $data['room_id']; echo $data['call_sign'];
Désolé, mais mes connaissances de codage ne me permettent pas de réaliser ce besoin d’où mon appel à l'aide.

Ma maîtrise est à des années-lumière de celle de Séb. ou de Cosmo, par contre, j'ai trouvé pour compléter le script de Cosmo et obtenir ce que tu souhaites :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
<?php
 
libxml_use_internal_errors(true);
 
$dom = new DOMDocument;
$dom->loadHTMLFile('https://www.yaesu.com/jp/en/wires-x/id/id_eu.php');
 
$scriptNodeList = $dom->getElementsByTagName('script');
$scriptContent = $scriptNodeList->item(3)->textContent;
 
$lines = array_filter(
    explode("\n", $scriptContent),
    fn($line) => str_contains($line, '"F1TRN"')
);
 
$results = [];
foreach ($lines as $line) {
    $results[] = json_decode(
        preg_replace('~^[][\w=\s]+|(\w+)(?=:("))|[\s;]+$~', '$2$1$2', $line),
        true
    );
}
 
$data = [];
foreach($results[0] as $key => $one_res) {
    $data[$key] = $one_res;
}
echo "room_id: ".$data['room_id']."<br/>";
echo "call_sign: ".$data['call_sign'];

Citation:
Envoyé par F1TRN
Oui ça fonctionne, mais pas à 100% car certains call_sign peuvent comporter un suffixe (exemple: F5CES/P) et donc dans ce cas là la ligne comportant le suffixe ne ressort pas.
Code:

1 2 3 4 Resultat de la recherche pour F5CES : dataList[597] = {id:"17919", room_id:"27919", call_sign:"F5CES", city:"Quantilly", state:"Centre", country:"France"}; dataList[2053] = {id:"34754", room_id:"44754", call_sign:"F5CES/P", city:"QUANTILLY", state:"Centre", country:"France"}; dataList[2982] = {id:"37996", room_id:"47996", call_sign:"F5CES", city:"QUANTILLY", state:"Centre", country:"France"};
Sur le call_sign avec \w tu matches seulement les caractères alphanumériques et _

Il faut donc adapter la regexp pour accepter le / (et peut-être d'autres caractères) en passant de call_sign:"(?P<call_sign>\w+)" à call_sign:"(?P<call_sign>[\w\/]+)" :
Code:

1 2 3 4 5 6 7 8 9 10 11 <<<REGEXP / dataList\[\d+]\ =\ { id:"(?P<id>\d+)", \ room_id:"(?P<room_id>\d+)", \ call_sign:"(?P<call_sign>[\w\/]+)", \ city:"(?P<city>[^"]+)", \ state:"(?P<state>[^"]+)", \ country:"(?P<country>[^"]+)" }; /x
Et bien sûr adapter $filter en conséquence.

02/05/2022, 13h50
CosmoKnacki
Citation:

Envoyé par laurentSc

j'ai trouvé pour compléter le script de Cosmo et obtenir ce que tu souhaites :

Alors oui $results est un tableau de tableaux ou chaque item (de 0 à n, suivant le nombre de lignes retenues) est un résultat. Il suffit de parcourir ce tableau:
Code:

1 2 3 4 foreach($results as $data) { echo $data['room_id'], ' ', $data['call_dign'], ' '; }
ou bien de choisir un item particulier:
Code:

1 2 3 $data = $results[0]; echo $data['room_id'], ' ', $data['call_dign'], ' ';
Mais ça c'est de la connaissance de base des tableaux qu'il faut absolument acquérir, de même que l'utilisation de var_dump et print_r pour voir à quoi ressemble le contenu d'une variable et sa structure.

Citation:

Envoyé par CosmoKnacki

de même que l'utilisation de var_dump et print_r pour voir à quoi ressemble le contenu d'une variable et sa structure.

Pour le var_dump, je m'étais fait une méthode pratique :
Code:

1 2 3 4 5 6 7 8 9 10 static public function debug($location, $var) { //exemple d'appel : UtilFct::debug("Record.php 162 data deb de analyze_ticket ",self::$data); echo " ".(is_string($location))?$location:'';//la variable $location sert à indiquer le nom // du fichier et le numéro de la ligne où on a appelé la fonction car quand on en a plus besoin, on sait plus où // on l'a placé ! echo " <pre>"; var_dump($var); echo "</pre> "; }
Par contre, je préférais utiliser xdebug...sauf que j'arrive plus à le remettre, ayant changé récemment de configuration.

Citation:

Envoyé par laurentSc

Ma maîtrise est à des années-lumière de celle de Séb. ou de Cosmo, par contre, j'ai trouvé pour compléter le script de Cosmo et obtenir ce que tu souhaites :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
<?php
 
libxml_use_internal_errors(true);
 
$dom = new DOMDocument;
$dom->loadHTMLFile('https://www.yaesu.com/jp/en/wires-x/id/id_eu.php');
 
$scriptNodeList = $dom->getElementsByTagName('script');
$scriptContent = $scriptNodeList->item(3)->textContent;
 
$lines = array_filter(
    explode("\n", $scriptContent),
    fn($line) => str_contains($line, '"F1TRN"')
);
 
$results = [];
foreach ($lines as $line) {
    $results[] = json_decode(
        preg_replace('~^[][\w=\s]+|(\w+)(?=:("))|[\s;]+$~', '$2$1$2', $line),
        true
    );
}
 
$data = [];
foreach($results[0] as $key => $one_res) {
    $data[$key] = $one_res;
}
echo "room_id: ".$data['room_id']."<br/>";
echo "call_sign: ".$data['call_sign'];

Oui merci mais lors de l'utilisation de suffixe (F5CES/P), cette solution ne fonctionne pas.

02/05/2022, 15h19
F1TRN

Bon en attendant de comprendre REGEX je me suis trouvé une solution pas super jolie mais fonctionnelle dans tous les cas et donc principalement avec les suffixe qui sont multiple.
Dans tous les cas à tous.
02/05/2022, 15h37
CosmoKnacki

Citation:

Envoyé par F1TRN

Oui merci mais lors de l'utilisation de suffixe (F5CES/P), cette solution ne fonctionne pas.

Première nouvelle! Je ne sais pas ce que tu as bouiné pour dire ça mais chez moi ça marche parfaitement. Il suffit d'écrire: fn($line) => str_contains($line, '"F5CES') comme critère de filtrage des lignes ou si tu veux être plus précis: fn($line) => preg_match('~"F5CES\b~', $line) ou fn($line) => preg_match('~"F5CES[/"]~', $line).
02/05/2022, 15h51
F1TRN

Citation:

Envoyé par CosmoKnacki

Première nouvelle! Je ne sais pas ce que tu as bouiné pour dire ça mais chez moi ça marche parfaitement. Il suffit d'écrire: fn($line) => str_contains($line, '"F5CES') comme critère de filtrage des lignes ou si tu veux être plus précis: fn($line) => preg_match('~"F5CES\b~', $line) ou fn($line) => preg_match('~"F5CES[/"]~', $line).

Je vais regarder; merci.
02/05/2022, 17h29
ProgElecT

Salut

Moi je prendrais la suggestion de CosmoKnacki, fn($line) => str_contains($line, '"F5CES') (que l'indicatif) car il y a risque d'indicatifs spéciaux autre que /P ou /M (les plus communs).
Par contre je supprimerai tout se qui suit l'indicatif de base entrée par l'utilisateur soit tous caractères autre que lettres ou chiffres si le caractère précédant n'est pas justement un caractère ou un chiffre.
Dans le temps le risque de bug sera limité.

73 F1TRN ===> mon indicatif F1NHS;)