Tester une liste de site web

Version imprimable

27/01/2014, 16h05
Kersou

Tester une liste de site web

Bonjour à tous,

Je suis nouveau sur le forum, et après de nombreuses recherches je n'est pas trouvé de réponse à mon interrogation.

Ma question (qui est devenu un problème) est que, on m'a donné comme mission dans l'entreprise dans laquelle je travaille de faire un inventaire des adresses URL de nos clients (1500) pour ensuite pouvoir les tester et vérifier si les liens sont morts.

Après de nombreuses recherches sur internet je n'est pas trouvé de solution à ce problème. Au départ, on m'avais conseillé d'utiliser la commande wget. Mais je n'ai pas réussi à avoir le résultat escompté.
Ensuite j'ai essayé avec la fonction php, mais le résultat fut négatif..

Si quelqu'un aurais la solution à ce problème, je lui serais (très) très reconnaissant. :D

D'avance merci

bonjour,

avec cette fonction get-headers.php

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
 
 
function getResponseCode($url){
    if (!($headers = @get_headers($url))) {
        return false; //url invalide
    }
 
    return substr($headers[0], 9, 3); //code réponse 
}
 
$url='http://www.domaine.com';
 
if(getResponseCode($url)!==false)
echo "url valide";
else
echo "url non validde";

@armel18, votre code n'est pas complet, il ne teste que si l'URL est inaccessible ou n'est pas correcte. Il faut également tester que le code réponse n'est pas 404 :
Code:

1 2 3 4 5 6 7 8 function is_dead_link($theURL) { $headers = get_headers($theURL); if($headers === FALSE) return FALSE; return substr($headers[0], 9, 3) === '404'; }
Code:

1 2 3 4 if(is_dead_link($url)){ echo $url . ' est un lien mort'; }

Merci pour cette réponse rapide.

Le code s'exécute mais il y a un problème dans le résultat ; en effet il m'indique que l'url est non valide, alors que l'adresse est bel et bien valide (ex: www.google.fr)

J'avais trouvé une fonction qui m'offrait également un résultat mais de la même manière celui ci était erroné.

Le code essayé au préalable :
Code:

1 2 3 4 5 6 7 8 9 10 <?php $lien = "http://www.google.fr"; if(preg_match('#[^http://(?www\.)google\.fr(.*)$]#Usi', $lien)) { $source = file_get_contents($lien); if(!preg_match('#Erreur#i', $source)) { } else print 'lien mort/inexistant'; } else print 'lien incorrect'; ?>
Je ne comprend pas cette situation parce que j'ai accès à ces sites via navigateur.

oui en effet mon teste n'était pas complet.
le plus important c'est d'obtenir un code d'erreur 404 qui traduit un lien mort.ceci devrait normalement fonctionner:

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
 
/*
*@return false| Integer(code reponse du serveur)
*/
function getResponseCode($url){
    if (!($headers = @get_headers($url))) {
        return false; //url invalide
    }
 
    return substr($headers[0], 9, 3); //code réponse 
}
 
$url='http://www.google.com';
 var_dump( getResponseCode($url) );
if(getResponseCode($url) ===false || getResponseCode($url) ==='404')
echo "url non valide";
else
if( getResponseCode($url) !=='404' )
echo "url valide";

30/01/2014, 09h16
ThomasR
Citation:

Envoyé par armel18

oui en effet mon teste n'était pas complet.
le plus important c'est d'obtenir un code d'erreur 404 qui traduit un lien mort.ceci devrait normalement fonctionner:

C'est dommage de faire 4 requêtes, et donc de multiplier par 4 le temps d’exécution, alors qu'une seule est nécessaire.
Code:

1 2 3 4 5 6 $url='http://www.google.com'; $response = getResponseCode($url); if($response === FALSE || $response === '404') echo "url ko"; else echo "url ok";
30/01/2014, 09h18
ThomasR

Citation:

Envoyé par Kersou

Merci pour cette réponse rapide.

Le code s'exécute mais il y a un problème dans le résultat ; en effet il m'indique que l'url est non valide, alors que l'adresse est bel et bien valide (ex: www.google.fr)

Si cela vous indique que l'URL n'est pas valide c'est que l'URL n'est pas valide. Le code que j'ai donné est propre, fonctionne parfaitement, et sert juste à savoir si c'est une 404. Je vous recommande de l'utiliser.

Code:

var_dump(is_dead_link('http://www.google.fr'));// affiche FALSE

Votre erreur vient plutôt de votre Regex qui fait un preg_match sur le lien, et du file_get_contents, faites un

Code:

var_dump($lien);

.
30/01/2014, 10h07
Kersou

Parfait ça fonctionne merci beaucoup ! Mon chef va être content ;)