CURL sur google search

Version imprimable

14/01/2015, 10h24
thais781

CURL sur google search
Bonjour,

J'ai un petit soucis avec ma fonction curl.
Pas de soucis pour un site classique, mais il semblerait que Google bloque la récupération du code html de ses pages :
Code:

1 2 curl "https://www.google.fr/search?site=&source=hp&q=facebook&oq=facebook"
Une idée de comment faire ?

Merci pour votre aide

Thais
14/01/2015, 13h45
N_BaH

Bonjour,

ajoute une instruction user-agent
?
14/01/2015, 14h55
thais781

C'est à dire ? je ne connais pas cette instruction .....

Merci

Thais
14/01/2015, 15h04
N_BaH

RTFM !

Ok, j'ai essayé avec cette ligne

Code:

1
2
 
curl -A "Mozilla/5.0 (compatible; MSIE 7.01; Windows NT 5.0)" www.google.fr/search?site=webhp&q=facebook

et le resultat est le même ....

Code:

1
2
3
4
5
6
7
8
<HTML><HEAD><meta http-equiv="content-type" content="text/html;charset=utf-8">
<TITLE>302 Moved</TITLE></HEAD><BODY>
<H1>302 Moved</H1>
The document has moved
<A HREF="http://www.google.fr/webhp?site=webhp">here</A>.
</BODY></HTML>
 
[1]+  Done                    curl -A "Mozilla/5.0 (compatible; MSIE 7.01; Windows NT 5.0)" www.google.fr/search?site=webhp

Il y a un truc spécifique avec google que je ne maitrise pas :calim2:

Thais

14/01/2015, 15h30
N_BaH

il faut mettre les adresses internet entre guillemets, il peut y avoir des caractères qui sont interprétés par le shell (notamment le &).
14/01/2015, 17h40
thais781

ah oui, c amarche mieux :D