requête http filenotfound

Version imprimable

08/08/2009, 19h15
Oprichnik

requête http filenotfound

Bonjour, je tente depuis un certain temps de récupérer la source d'une page web avec les classes URL, HttpURLConnection, .. mais j'obtiens une erreur filenotfoundexception pratiquement à chaque fois..

Je ne sais également pas quand utiliser la méthode connect() de HttpURLConnection.. après la avoir écrit les données post ou get dans le buffer ? avant ?

Merci
09/08/2009, 12h03
Uther

Il faudrait que tu posters ton code pour que l'on puisse t'aider.

Voilà le code :

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
 
HttpURLConnection conn;
String line, htmlLine, html = "", post;
 
String headersNames[] = {
		"Host",
		"User-Agent",
		"Accept",
		"Accept-Language",
		"Accept-Encoding",
		"Accept-Charset",
		"Keep-Alive",
		"Connection",
		"Referer",
		"Cache-Control",
		"Pragma",
		"Cookie"
};
 
String headers[] = {
		"",
		"Mozilla/5.0 (Windows; U; Windows NT 5.1; fr; rv:1.9.0.6) Gecko/2009011913 Firefox/3.0.5",
		"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
		"fr,fr-fr;q=0.8,en-us;q=0.5,en;q=0.3",
		"gzip,deflate",
		"ISO-8859-1,utf-8;q=0.7,*;q=0.7",
		"300",
		"keep-alive",
		"", // referer
		"no-cache",
		"no-cache",
		""
};
 
BufferedReader reader;
OutputStreamWriter writer;
URL url;
 
	url = new URL(this.chm);
	conn = (HttpURLConnection) url.openConnection();
	conn.setRequestMethod(this.meth.toUpperCase());
	conn.setDoOutput(true);
 
	for(int i=0;i<headers.length;i++) {
		  conn.setRequestProperty(headersNames[i], headers[i]);
	}
 
	writer = new OutputStreamWriter(conn.getOutputStream());
	post = URLEncoder.encode(this.loginField,"UTF-8") + "=" + URLEncoder.encode(this.login,"UTF-8") + "&" + URLEncoder.encode(this.passField,"UTF-8") + "=" + URLEncoder.encode(this.pass,"UTF-8");
 
	writer.write(post);
	writer.close();
 
	conn.connect();
 
	reader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
 
	while((htmlLine = reader.readLine()) != null) {
		html += "\n" + htmlLine;
	}
 
	reader.close();
 
	conn.disconnect();

Es tu sur que la ressource que tu veux y acceder existe?
J'ai essayé ton code chez moi et ça donne nickel.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
 
 
 
package javaapplication1;
 
import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.io.OutputStreamWriter;
import java.net.HttpURLConnection;
import java.net.URL;
import java.net.URLEncoder;
 
 
public class Main {
 
    /**
     * @param args the command line arguments
     */
    public static void main(String[] args) throws Exception
    {
        HttpURLConnection conn;
String line, htmlLine, html = "", post;
 
String headersNames[] = {
		"Host",
		"User-Agent",
		"Accept",
		"Accept-Language",
		"Accept-Encoding",
		"Accept-Charset",
		"Keep-Alive",
		"Connection",
		"Referer",
		"Cache-Control",
		"Pragma",
		"Cookie"
};
 
String headers[] = {
		"",
		"Mozilla/5.0 (Windows; U; Windows NT 5.1; fr; rv:1.9.0.6) Gecko/2009011913 Firefox/3.0.5",
		"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
		"fr,fr-fr;q=0.8,en-us;q=0.5,en;q=0.3",
		"gzip,deflate",
		"ISO-8859-1,utf-8;q=0.7,*;q=0.7",
		"300",
		"keep-alive",
		"", // referer
		"no-cache",
		"no-cache",
		""
};
 
BufferedReader reader;
OutputStreamWriter writer;
URL url;
 
	url = new URL("http://www.waptrick.com");
	conn = (HttpURLConnection) url.openConnection();
	conn.setRequestMethod("POST");
	conn.setDoOutput(true);
 
	for(int i=0;i<headers.length;i++) {
		  conn.setRequestProperty(headersNames[i], headers[i]);
	}
 
	writer = new OutputStreamWriter(conn.getOutputStream());
	post = URLEncoder.encode("darrylsite","UTF-8") + "=" + URLEncoder.encode("darrylsite","UTF-8") + "&" + URLEncoder.encode("***","UTF-8") + "=" + URLEncoder.encode("****","UTF-8");
 
	writer.write(post);
	writer.close();
 
	conn.connect();
 
	reader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
 
	while((htmlLine = reader.readLine()) != null) {
		html += "\n" + htmlLine;
	}
 
	reader.close();
  System.out.println(html);
	conn.disconnect();
 
    }
 
}

09/08/2009, 15h30
Oprichnik

oui, la page est accessible dans firefox cependant certains sites fonctionnent tout de même, en général ce sont les pages web avec l'extension php qui ne marchent pas??

Le probleme vient du fait dans les entêtes http que tu as specifier, tu n'as pas indiquer le "Host" qui doit indiquer où trouver la ressource. Le "Host" doit etre le serveur sur le quel se trouve le fichier.
Aussi, dans les entêtes toujours tu as mal renseigné le parametre "Accept-Encoding".
Je te poste le code que j'ai utilisé pour le test sur mon site qui est aussi en php et qui ne marchait pas avant les modifications que je viens de faire.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
 
 
package javaapplication1;
 
import java.io.BufferedReader;
import java.io.InputStreamReader;
import java.io.OutputStreamWriter;
import java.net.HttpURLConnection;
import java.net.URL;
import java.net.URLEncoder;
 
 
public class Main {
 
    /**
     * @param args the command line arguments
     */
    public static void main(String[] args) throws Exception
    {
        HttpURLConnection conn;
String line, htmlLine, html = "", post;
 
String headersNames[] = {
		"Host",
		"User-Agent",
		"Accept",
		"Accept-Language",
		"Accept-Encoding",
		"Accept-Charset",
		"Keep-Alive",
		"Connection",
		"Referer",
		"Cache-Control",
		"Pragma",
		"Cookie"
};
 
String headers[] = {
		"darkpi.100webspace.net",
		"Mozilla/5.0 (Windows; U; Windows NT 5.1; fr; rv:1.9.0.6) Gecko/2009011913 Firefox/3.0.5",
		"text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8",
		"fr,fr-fr;q=0.8,en-us;q=0.5,en;q=0.3",
		"ISO-8859-1,utf-8;q=0.7,*;q=0.7",
		"gzip,deflate",
		"300",
		"keep-alive",
		"", // referer
		"no-cache",
		"no-cache",
		""
};
 
 
BufferedReader reader;
OutputStreamWriter writer;
URL url;
 
	post = URLEncoder.encode("darrylsite","UTF-8") + "=" + URLEncoder.encode("darrylsite","UTF-8") + "&" + URLEncoder.encode("***","UTF-8") + "=" + URLEncoder.encode("****","UTF-8");
    url = new URL("http://darkpi.100webspace.net/");
 
 
    conn = (HttpURLConnection) url.openConnection();
	conn.setRequestMethod("POST");
    for(int i=0;i<headers.length;i++)
    {
		  conn.setRequestProperty(headersNames[i], headers[i]);
	}
	conn.setDoOutput(true);
 
	writer = new OutputStreamWriter(conn.getOutputStream());
	writer.write(post);
	writer.close();
 
	conn.connect();
 
	reader = new BufferedReader(new InputStreamReader(conn.getInputStream()));
 
	while((htmlLine = reader.readLine()) != null) {
		html += "\n" + htmlLine;
	}
 
	reader.close();
  System.out.println(html);
	conn.disconnect();
 
    }
 
}

09/08/2009, 16h30
Oprichnik

ah merci beaucoup, je voyais pas la solution..

ok pour le host et pour l'encoding j'ai inversé charset et encoding?

charset c'est gzip,deflate ?
09/08/2009, 16h38
darrylsite

Citation:

Envoyé par Oprichnik

ah merci beaucoup, je voyais pas la solution..

ok pour le host et pour l'encoding j'ai inversé charset et encoding?

charset c'est gzip,deflate ?

je crois que oui :ccool:
09/08/2009, 16h43
Oprichnik

Quand je regarde les entêtes avec tamper data (extension firefox) ou webscarab il m'indique bien comme c'était à la base (je me suis basé la dessus pour établir des headers).

Tu peux vérifier stp ?

Merci en tout cas

PS : Et pour le conn.connect(), c'est au bon endroit (après l'écriture des données à envoyer). Et pour passer des paramètre get, il faut les mettre dans l'url ou comme pour post ?