Graphes avec stats dans Artichow

[M@XflY]

bonjour à tous

j'aurai aimé savoir comment je peut faire des graphes avec des stats dans Artichow

en effet j'ai ce script PHP (qui se trouve dans les exemples fournis avec Artichow)

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
<?php
require_once "../../LinePlot.class.php";
 
$graph = new Graph(400, 400);
$graph->setAntiAliasing(FALSE);
 
$values = array(1, 4, 5, -2.5, 3);
$plot = new LinePlot($values);
$plot->setBackgroundGradient(
	new LinearGradient(
		new Color(210, 210, 210),
		new Color(250, 250, 250),
		0
	)
);
$plot->yAxis->setLabelPrecision(1);
$plot->setSpace(5, 5, NULL, NULL);
 
$graph->add($plot);
$graph->draw();
?>

et donc la ligne de code qui permet de modifier les points et celle ci :

Code :

$values = array(1, 4, 5, -2.5, 3);

j'ai donc voulus l'adapter pour permettre au script de récupérer des données depuis un fichier CSV afin qu'il puisse tracé son graphe

j'ai donc chopé ce script sur le net :

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
$fichier = "graphes.CSV";
$fic = fopen($fichier, 'rb');
 
echo "<table border='1'>\n";
for ($ligne = fgetcsv($fic, 1024); !feof($fic); $ligne = fgetcsv($fic, 1024)) {
  echo "<tr>";
  $j = sizeof($ligne);
  for ($i = 0; $i < $j; $i++) {
    echo "<td>$ligne[$i]</td>";
    }
  echo "</tr>";
  }
echo "</table>\n";

malheuresement je vois mal comment lui indiqué un champ précis dans le CSV pour qu'il aille puissé ses données et pondre le graphe


d'ailleurs j'ai un autre soucis qui est que la librairie GD2 ne se lance plus sur EasyPHP donc pas moyen d'afficher les graphes
j'ai d'ailleurs posté ici pour ceux que ça intéresse :
http://www.developpez.net/forums/sho...58#post1599658


en fait mon projet est simple:

récupérer des données au format CSV (il peuvent etre aussi au format .txt c'est au choix) les traiter pour pondre des graphes avec Artichow.

[Mr N.]

Comment est structuré ton csv ?

[M@XflY]

Code :

1
2
3
Period end;Duration;Sample;Corner;Line;Nb de Create PDP Roaming In;Nb de Create PDP Roaming In Fail;Ratio Create PDP Roaming In Fail;Nb de Crea PDP Roaming IN GTP V0;Nb T-PDU Roaming In;Nb T-PDU Roaming In UL;Nb T-PDU Roaming In DL;Ratio T-PDU Roaming In UL/DL;Length Roaming In T-PDU;Length T-PDU Roaming In UL;Length T-PDU Roaming In DL;Nb Creat PDP Imsi Non Identifiés;Nb de T-PDU Imsi Non Identifiés;Length T-PDU Imsi Non Identifiés;DR Status;DR Status Nok;Ratio DR Status Nok;DR Status CP;DR Status CP Nok;Ratio DR Status CP Nok
13/11/2006 00:00;900;1;-;all;684;224;32,74;44;202141;91734;110407;83,08;76013478;16343861;59669617;137;890419;287195441;1093381;347;0,03;821;347;42,26
13/11/2006 00:00;900;1;-;Bez3GgsnNok01;0;0;0;0;0;0;0;0;0;0;0;13;168946;47574160;168959;13;0;13;13;100

comme ça
j'ai préféré te poster un extrait plus tôt que de t'expliquer car ça évite les contre sens

en gros pour tout te dire

j'ai plusieurs colonnes
je dois trier celle qui s'appelle : Line
et trier que par nom identique (en gros ici Bez3GgsnNok01 par exemple)

ensuite rajouter une colonne heure (de 00h00 à 00h00, tout les 1/4 d'h, soit un quart d'h par ligne)

et faire le graphes entre la colonne heure et la colonne Nb de Create PDP , pour le premier graphes
et pour le second graphes entre la colonne Nb T-PDU Roaming In et celle de l'heure
....
faut toutes les faire

soit l'heure en abscisse et le reste en ordonné

ainsi de suite

un petit tableau pour comprendre :

Line | Nb de Create PDP | Nb T-PDU Roaming In | Heures |
All | 684 | 45 | 00h00 |
All | 455 | 85 | 00h15 |

(j'espere que mon tableau est claire, car y a un décalage quand je poste)

donc en gros
je supose que le poste traitetement cad trier la colonne Line et rajouter la colonne heure (qui n'est pas d'origine) je peut pas le faire en php (ah moins que y ait moyen ?) se serait plus du VB.

par contre je supose que y a moyen dans le script php d'Artichow de lui indiquer les colonnes qu'il doit prendre pour lui donner les points à mettre en abscisse et en ordonné ??

merci d'avance pour votre aide.

[Mr N.]

VB ? Pas d'insultes s'il te plait.
Php est tout à fait capable de répondre à ton besoin

[M@XflY]

ok merci tu me rassure

car je suis en train de migrer entierement sur Linux donc VB m'enchante pas trop

par contre je vois pas trop comment faire tout ça aurait tu des tuto ou des conseils?

[Mr N.]

Code :

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
<?php
function parse_csv_file($file, $columnheadings = false, $delimiter = ',', $enclosure = "\"") {
 
       $row = 1;
       $rows = array();
       $handle = fopen($file, 'r');
 
       while (($data = fgetcsv($handle, 1000, $delimiter, $enclosure )) !== FALSE) {
 
           if (!($columnheadings == "false") && ($row == 1)) {
               $headingTexts = $data;
           } elseif (!($columnheadings == "false")) {
               foreach ($data as $key => $value) {
                   unset($data[$key]);
                   $data[$headingTexts[$key]] = $value;
               }
               $rows[] = $data;
           } else {
               $rows[] = $data;
           }
           $row++;
       }
 
       fclose($handle);
       return $rows;
   }
 
var_dump(parse_csv_file('/tmp/fichier.csv', true, ';'));
?>

A partir de là ton fichier csv est stocké dans un tableau, une ligne pour une ligne avec la première qui stocke les entetes.
Ensuite tu peux travailler dessus comme tout tableau qui se respecte et extraire les informations nécessaire à tes graphes...

[M@XflY]

ok merci beaucoup

je vais taffer sur ce script pour comprendre comment il fonctionne

donc en gros je stocke toutes mes variables dans un tableau et à partir de là je peut faire des tries et prendre que ce qui m'intéresse ?

par contre l'autre question que je me pose c'est de savoir si ce genre de traitement de données ainsi que Artichow sont capable de supporter la création de plusieurs 1000 de graphes (tous fait meme en temps vers minuit) ?

car avec VB j'avais ce soucis, il m'ouvrait plusieurs centaine de fois Excel à chaque fois que j'avais des données à traiter et ça planter tres vite

[Mr N.]

plusieurs 1000

ça veut dire quoi ?
est ce que c'est plusieurs 1000 requêtes vers ton script
ou est ce que c'est ton script qui va construire les plusieurs 1000 de graphes ?


PS: par contre je te déconseille de modifier la fonction parse_csv_file que je t'ai fournie (tirée d'ailleurs de http://php.net/fgetcsv ) puisqu'elle marche. Je sais pas pourquoi mais je te sentais parti pour la modifier... L'idée est qu'elle te fournie le contenu de ton csv sous forme de tableau, à toi de travailler avec après...

[M@XflY]

plusieurs milliers de graphes

je me suis mal exprimé

mais je pense que Artichow devrait suporter la charge c'est du script léger en php pas du boulet en VB

merci pour la correction du script j'avais meme pas fait gaffe (fin de semaine )

par contre j'aurai une dernière question technique concernant ce projet :

j'ai une arborescence assez complexe à gérer de navigation (celle qui me permettra de me diriger sur le site et d'allé à la peche au graphes, c'est le cas de le dire vus le nombre) et en fait mon soucis c'est que cette arborescence peut etre amené à évoluer.

Cad en gros que je peut etre amené à y rajouter des dossier voire sous dossier, voire sous sous dossier ...

le gros soucis c'est que j'avais chopé un script en php sur le net qui me permettait de créer une arborescence type arbre (à la windows) mais le soucis c'est qu'il fallait ce tapper le comptage des noeuds un par un pour savoir comment placer les sous dossier ,

par exemple :
pour localiser la place d'un sous dossier il fallait rentrer en php les valeurs du numéro du noeud du dossier parents ... difficile à faire quand une arborescence n'est jamais finis

donc voilà en gros comment réussir à créer une arborescence qui pourrait se générer toute seule, je m'explique :

en gros tu as des serveurs et des sous serveurs (tout ça te donnant l'arborescence) et un beau jour un serveur ce rajoute, je voudrai alors que le script en php le rajoute automatiquement dans l'arbre, sans tout me retapper la création de l'arbre à la main !!

j'espere que je me suis bien exprimé

[Mr N.]

Tes dossiers/serverus sont stockés sous forme de dossiers sur la système de fichiers ? ou sont stockés dans une base ?

[M@XflY]

ben justement en fait la question que je me pose c'est de savoir si j'aurai pas besoin d'une base de données pour gérer cette arborescence

par contre quand je parle des dossier ce sont les noms des différentes classes de l'arborescence, bon pour faire plus simple voilà un exemple de ce à quoi l'arborescence ressemble :

DATA
|GlobalSFR
||All
|||gn
||||GGSN
|||||All
||||||Bez3GgsnNok01
||||||Bez3GgsnNok02
|||gi ...............
...............................

et apres ici par exemple dans Bez3GgsnNok02 tu retrouve les fameux graphes :
Nb PDP Request
Nb PDP UnSuccess
Ratio PDP Fail
Service option temp out of order

en fonction de l'heure à chaque fois


et comme ça tu en as plein, tu en as d'autre apres GloblaSFR ...

en fait j'ai sur une page web qui correspond ici par exemple à Bez3GgsnNok02 sur lequel j'ai deux graphes à avoir : l'un qui représente ce que je t'ai dit plus haut (l'heure en fonction des trucs) et un deuxieme graphe qui devra l'heure en fonction de la somme du Nb PDP Request sur une semaine par exemple (là je vais devoir stocké cette somme comme une variable dans un tableau donc surement la gestion d'une autre base de donnée derrière)

voilà je voudrai vérifier si mon raisonnement est bon ou si je part pas en vrille
car j'avoue que ce projet est assez costaux dans son ensemble mais faisable je pense.

[Mr N.]

De toutes façons tes graphes une fois construits devront bien être stockés sur ton filesystem. (Tu peux les stocker en bd, mais c'est pas trop recomander)
Donc soit tu gère ton arborescence dans ton fs et tu ranges les graphes dans les bons dossiers, soit tu gère ton arborescence dans une bd et il faudra alors trouver un système pour stocké tes "plusieurs 1000" graphes...
Dans un seul répertoires ce n'est pas pensable pour des raisons de perfs, il te faut éclater en plusieurs répertoires et répartir les fichiers de façon uniforme...

Code :

1
2
3
4
5
 
+- aj
|  `- Les fichiers dont la première lettre est entre a-j
+- kz
   `- Les fichiers dont la première lettre est entre k-z

ou alors

Code :

1
2
3
4
5
6
7
8
9
10
11
 
+- 0
+- 1
+- 2
+- 3
+- 4
+- 5
+- 6
+- 7
+- 8
+- 9

Et tu tires un nombre aleatoire entre 0 et 1 pour savoir ou placer ton fichier.


Tu peux pas choisir une solution come ça en faisant plouf-plouf. Il faut que ça réponde à tes besoins et que le choix d'une architecture ne soit pas pénalisante par la suite. Le plus simple est d'utiliser le filesystem, mais si par exemple un jour un de tes serveur/dossier doit être déplacé d'un parent vers un autre parent, alors c'est tout de suite moins marrant.
Car avec une arborescence réelle tu devras soit copier récursivement les fichier, soit appeler une commande shell pour faire un mv...
Alors qu'avec une bd, il te suffit de modifier le lien entre parent et enfant et c'est fini, le filesystem n'ayant pas besoin d'être touché... Bref à toi de bien évaluer chacune des solution avant de faire un choix et de ne pas le regretter (comme partout d'ailleurs)

[M@XflY]

en fait les CSV du départ cad les données brutes

elle sont produites tous les soir à minuit par un pc spécifique et donc à partir de là je fias mes graphes

mais en fait les graphes ne seront jamais stocké car sur 24h ils seront écraser donc je peut créer une arborescence sur windows qui ressemblera à celle du site web le seul soucis étant que cette arborescence windows devra évolué dés qu'un nouveau serveur apparaitra et donc qu'un script ¨PHP modifie l'arborescence du site web en conséquence (un genre d'effet mirroir si tu vois ce que je veut dire)

en fait en réfléchissant faudrait que je créer un script (en quoi je me demande bien, en C peut etre) qui lirai les données brutes cherchant un nouveau serveur éventuelles (en comparant par rapport à sa base existante, une boucle en C devrait faire l'affaire) et qui créerai alors le dossier windows en conséquence (du nom du nouveau serveur ) où sera stocké temporairement le tableau en PHP (issue du trie dont on parlai tout à l'heure) et donc pouvoir permettre la création du graphes comme prévus

et d'un autre côté un autre script (purée on dirait de la POO) qui lui scannerai tout l'arborescence windows à la recherche de nouveau serveur à inclure dans l'arborescence web

et enfin le script dont on parle en ce moment qui lui ne fait que produire les graphes (il faudrai que j'inclue dedans la ligne permettant de faire la somme à chaque journée, pour la création du graphe à la semaine) un par un, par contre là il va falloir lui demandé de scanné tout les dossier de l'arborescence windows pour créer les graphes en conséquences.

purée je vais fumé trois joint et je reviens j'ai la tete en compote (j'aurai du m'orienté dans le ping pong moins prise de tete )

ma logique est elle bonne où je me tire une balle tellement ça parre en vrille de partout ce truc

[Mr N.]

Arrête la drogue, c'est mal

Question à tout hasard : le csv ne contiendrait-il pas déjà les nouveaux serveurs ?

[M@XflY]

le CSV contient déjà une partie des serveurs mais rien n'empeche que d'autre soit rajouté apres

en fait pour tout t'expliquer j'ai des CSV qui sont scheduler (cad exporter auto tout les soirs à un temps précis ) et ils contiennent des données global (comme celle que je t'ai posté en extrait) et là dedans j'ai le nom des différents serveurs, donc comme avec le pc qui sert à scheduler ces CSV ont peu faire plein de CSV différents (ils ont tous la meme base mais des noms peuvent se rajouter dans la colonne Line) je dois prévoir le coup et permettre une gestion automatique

en fait je suis obligé de me tapper tous ça alors qu'il y a déjà un outils dans la boite qui me permet de pondre des graphes à partir des CSV produit mais manque de bol il ne permet pas des exportations (satanné produit proprio) et pas moyen de le paramatré comme on veut (à vive les GPL !! au moins on peut faire ce qu'on veut)

en gros voilà

je peut déjà créer une base avec le nom des serveurs existants et le faire complété auto par la suite :

j'avais pensé à une base de données du style :

une table serveur, avec id_serveur, nom_serveur ...
une table requette, avec id_requette ... (correspondant au Nb PDP Request ... si tu me suit)

bien que je me demande si seul la table serveur est utile, car l'autre ne servirai pas à grand chose (j'ai pas de formulaire php à faire derrière donc pas de requette à générer du style : combien y a t'il de PDP réussi sur tel serveur ...)

[Mr N.]

A un instant t tu as trois serveurs dans un csv

Code :

1
2
3
riri
fifi
loulou

Donc dans tes repertoires tu as stocker les graphes correspondant à ces trois serveurs.
Le lendemain, un serveur s'ajoute dans le csv : donald
quand tu vas vouloir enregistrer les graphes pour donald, tu va bien voir qu'il manque son repertoire et tu le créeras à ce moment là...

Code :

1
2
3
4
riri
fifi
loulou
donald

non ?

[M@XflY]

si c'est exactement ça

j'avais pas compris ta question, les noms des serveurs sont effectivement bien dans les CSV

par contre je me demandai ce qui est le mieux entre un exports de mes données d'origine : le format CSV ou le format .txt ?

je voulais que tu vérifie également (si possible) si mon raisonnement que je t'ai indiqué plus haut (les différents script à utiliser) est logique ou si je plante completement ?

[Mr N.]

Il me semble qu'un seul script est nécessaire : celui qui construit les graphes est capable :
- de créer des graphes
- de créer les dossiers pour les nouveaux serveurs

Ce n'est pourtant pas faute de me répéter

[M@XflY]

ok merci pour ton aide et désolé de t'avoir fait répéter

[M@XflY]

salut

j'ai trouvé une solution super simple pour pas me prendre la tete :

j'ai trouvé un script qui m'upload les CSV directement dans une base SQL

comme ça avec Artichow j'effectue des requettes SQL directement sur la base (selctionnez tous les champs correspondant à all ...) et je me créer une table heures (elles est constante donc au pire elle sera toujours là)

et hop ma requette SQL intégré à Artichow via php me pond les graphes

et pour l'histoire du menu de navigation je reste dans le meme ordre d'idée j'aurai une table backup de tous les serveurs existants et avec une requette sql il vérifira quelle est à jour

et un petit script me gérera le menu de navigation sur le site en conséquence

et hop voilà le tour est joué

mais bon pour la forme je veut bien un cours sur les traitement des tableaux en php (filtrage, selection de champ ...) car j'ai trop de lacune de ce côté là (j'ai pas trouvé de cours d'ailleurs à ce sujet) et j'ai plus de connaissance sur les requettes SQL

merci d'avance pour ton aide !!