Consulte robots.txt inexistant

{F-I} · 22/03/2008, 08h09

Bonjour à tous,

Je me demande pourquoi Google et Yahoo consulte tous les jours la page robots.txt alors qu'il n'y a rien dans ce fichier et il n'existe même pas dans le FTP...

Voici la partie de la balise header qui pourrait vous aider :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
<head>
    	<title>Handy-Mobil &gt; Accueil du site</title> <!-- titre différent chaque page ? MAXI 100 caractères y compris les espaces -->

		<!-- Contenu -->
		<meta http-equiv="Content-Type" content="text/html; charset=iso-8859-1" />
		<meta name="language" content="fr" />
		<meta http-equiv="Content-Language" content="fr" />
		<meta name="description" content="Handy Mobil est une association &agrave; but non lucratif (loi de 1901), destin&eacute;e &agrave; aider au d&eacute;placement des personnes &agrave; mobilit&eacute; r&eacute;duite, dans la r&eacute;gion d'Annemasse et la Haute-Savoie" /> 
		<meta name="keywords" content="transport, handicap&eacute;, paralys&eacute;, Annemasse, Haute-Savoie, fauteil-roulant, Vall&eacute;e Verte, association, b&eacute;n&eacute;vole, personne, aide, d&eacute;placement, handicap&eacute;s, paralys&eacute;s, handicap&eacute;e, paralys&eacute;e, handicap" /> 
		<meta name="abstract" content="transport, handicap&eacute;, Annemasse, Haute-Savoie, b&eacute;n&eacute;vole" /> 

		<!-- Détails -->
		<meta name="author" content="ISSARTEL Fabien" />
		<meta name="reply-to" content="*********** masqué pour évite robotspam" />
		<meta name="identifier-url" content="http://www.handy-mobil.fr" />
		<meta name="subject" content="Site d'association de transport handicap, Handy-Mobil" />
		<meta name="expires" content="never" />
		<meta name="copyright" content="" /> <!-- Nom et date du copyright du site -->
		<meta name="location" content="France, FRANCE" />
		<meta name="Date-Creation-ddmmyyyy" content="17102007" />
		<meta name="generator" content="NotePad++" />
		<meta http-equiv="VW96.OBJECT TYPE" content="Document" />
		<meta name="rating" content="general" />

		<!-- Destiné aux robots -->
		<meta name="robots" content="index, follow" />
        <meta name="revisit-after" content="30 days" />

		<!-- Fiche CSS et icône -->
		<link rel="stylesheet" media="screen" type="text/css" title="Fiche CSS Handy-Mobil" href="include/style.css" />
		<link rel="shortcut icon" href="images/favicon.ico" />

		<!-- Commande de Google -->
		<meta name="verify-v1" content="**********************=" />
	
    </head>

Sachant que j'ai placé les mots clés etc... Je veux commencer à me référencer pour ce site

Merci de vos aides

Marc Lussac · 23/03/2008, 03h16

- Les "gentils" robots (google, yahoo, ...) cherchent toujours le fichier robot.txt avant de bosser pour savoir ou ne pas aller, c'est une procédure standard. Les "méchant" robots (aspirateurs email,...) s'en fichent ils essayent de fouiller partout pour trouver ce qu'ils cherchent.

- Le fichier robot.txt ne sert à rien en référencement, il sert au contraire à dé référencer des pages à ta demande.

Si tu cherche à mieux faire référencer ton site, oublie le fichier robot.txt et lis les tutoriels référencement

Le référencement est devenu une science, un job à part entière, lis les tutoriels sinon tu n'arrivera à rien.

23/03/2008, 03h16	#2
Marc Lussac Directeur Marketing Marc Lussac Responsable marketing opérationnel Inscription : mars 2002 Messages : 26 358 Détails du profil Informations personnelles : Nom : Marc Lussac Localisation : Canada Informations professionnelles : Activité : Responsable marketing opérationnel Secteur : Communication - Médias Informations forums : Inscription : mars 2002 Messages : 26 358 Points : 23 184 Points : 23 184	- Les "gentils" robots (google, yahoo, ...) cherchent toujours le fichier robot.txt avant de bosser pour savoir ou ne pas aller, c'est une procédure standard. Les "méchant" robots (aspirateurs email,...) s'en fichent ils essayent de fouiller partout pour trouver ce qu'ils cherchent. - Le fichier robot.txt ne sert à rien en référencement, il sert au contraire à dé référencer des pages à ta demande. Si tu cherche à mieux faire référencer ton site, oublie le fichier robot.txt et lis les tutoriels référencement Le référencement est devenu une science, un job à part entière, lis les tutoriels sinon tu n'arrivera à rien. __________________ -> Ne pas me contacter pour le forum et je ne répondrai à aucune question technique -> Comment nous contacter -> Pour partenariat ou publicité : Mon Email
	00

Outils de la discussion
Afficher une version imprimable Envoyer un lien vers cette page par email