[Erreur 507] A l'ouverture d'une connexion HTTP

Version imprimable

31/12/2013, 16h49
JULIA

[Erreur 507] A l'ouverture d'une connexion HTTP

Bonjour,

j'essaye de télécharger des fichiers depuis plusieurs site internet

la plus part des fichier sont téléchargé mais j'en ai un qui me sors une erreur java.io.IOException: Server returned HTTP response code: 507 for URL:
http://medianet.edmond-de-rothschild...0587642_fr.pdf

avez vous une idée svp?
01/01/2014, 17h44
thelvin

Ben, HTTP 507 c'est un code d'erreur qui se décrit très bien lui-même. S'il y a pas la place il y a pas la place. Réessaie plus tard.
02/01/2014, 10h48
JULIA

Bonjour,
Bonne année à tous

Merci pour la réponse mais ce que je n'arrive pas à comprendre que
1- j'arrive à accéder au fichier depuis le browser
2- je télécharge le fichier et non pas j'upload donc l'espace insuffisant je ne vois trop comment :roll:
02/01/2014, 11h29
OButterlin

Bonne année également ;)

Si je comprends bien, tu as un programme sur ton serveur qui ouvre des connexions (ftp ?) vers d'autres pour récupérer des fichiers, c'est bien ça ?

Si oui, tu devrais montrer le code qui s'exécute, c'est certainement ton serveur qui émet l'erreur, tu n'as rien dans la log ?

au fait je fait une connexion http puis je récupere le fichier pour le parser avec apache Tika

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
 private URLConnection getURLConnection(PdfDocConfig pdfDocConfig) {
        // if (pdfDocConfig.getUrl().contains("https")) {
        TrustManager[] trustAllCerts = new TrustManager[]{
            new X509TrustManager() {
                @Override
                public java.security.cert.X509Certificate[] getAcceptedIssuers() {
                    return null;
                }
 
                @Override
                public void checkClientTrusted(
                        java.security.cert.X509Certificate[] certs, String authType) {
                }
 
                @Override
                public void checkServerTrusted(
                        java.security.cert.X509Certificate[] certs, String authType) {
                }
            }
        };
        URLConnection uCon = null;
        // Activate the new trust manager
        try {
            SSLContext sc = SSLContext.getInstance("SSL");
            sc.init(null, trustAllCerts, new java.security.SecureRandom());
            HttpsURLConnection.setDefaultSSLSocketFactory(sc.getSocketFactory());
 
            URL url = new URL(pdfDocConfig.getUrl());
 
            uCon = url.openConnection();
 
        } catch (NoSuchAlgorithmException | KeyManagementException e) {
 
            // }
        } catch (IOException ex) {
            Exceptions.printStackTrace(ex);
        }
        return uCon;
    }
 
 
    private String fileUrlTika(PdfDocConfig pdfDocConfig) {
        URLConnection uCon;
        String result = null;
        InputStream is = null;
        org.apache.tika.parser.pdf.PDFParser parser;
        ContentHandler textHandler = new BodyContentHandler();
 
        try {
 
            uCon = getURLConnection(pdfDocConfig);
            is = uCon.getInputStream();
            Metadata metadata = new Metadata();
            parser = new PDFParser();
            parser.setSortByPosition(true);
            parser.parse(is, textHandler, metadata, new ParseContext());
            result = textHandler.toString();
        } catch (IOException | TikaException | SAXException e) {
            logger.error(e);
        } finally {
            if (is != null) {
                try {
 
                    is.close();
                } catch (IOException e) {
                    logger.error(e);
                }
            }
        }
        return result;
    }

02/01/2014, 12h32
OButterlin

Et rien dans la log du serveur ?
02/01/2014, 12h37
JULIA

au fait le serveur n'est pas à moi
mon code marche super bien avec 6 autres site il y a que celui là qui bug :calim2:
02/01/2014, 12h51
OButterlin

le code que tu montres tourne sur un serveur auquel tu n'as pas accès ?
ça va être difficile de savoir ce qui se passe, tu devrais leur demander les logs, ou un accès en lecture aux logs
02/01/2014, 13h03
JULIA

ça va être difficile d'avoir accès ou même de les contacter :(
c'est ça le problème

mais ce que je ne comprends pas pas pourquoi avec le web browser ça marche
02/01/2014, 13h12
OButterlin

et bien parce que tu ne passes pas par ton code... désolé :aie:

Probablement parce que le serveur en question a mis en place différentes startégies pour éviter que des bots aillent récupérer leur contenu. Ca leur coute de la bande passante et, justement dans le domaine financier, des bots, il y en a des chiées qui scannent les sites financiers pour faire des ordres en bourse....

Tu peux commencer par utiliser commons httpclient de apache, et essayer de te faire passer pour un navigateur type firefox ou internet explorer, ça devrais passer.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
[tchize@localhost tmp]$ wget http://medianet.edmond-de-rothschild.fr/edram/pdf/Monthly_Factsheet_FR0010587642_fr.pdf
--11:33:51--  http://medianet.edmond-de-rothschild.fr/edram/pdf/Monthly_Factsheet_FR0010587642_fr.pdf
           => `Monthly_Factsheet_FR0010587642_fr.pdf'
Resolving medianet.edmond-de-rothschild.fr... 193.227.133.61, 213.41.36.61
Connecting to medianet.edmond-de-rothschild.fr|193.227.133.61|:80... connected.
HTTP request sent, awaiting response... 507 Insufficient Storage
11:33:51 ERROR 507: Insufficient Storage.

[tchize@localhost tmp]$ wget --user-agent="Mozilla/5.0 (Windows NT 6.0; rv:2.0) Gecko/20100101 Firefox/4.0 Opera 12.14" http://medianet.edmond-de-rothschild.fr/edram/pdf/Monthly_Factsheet_FR0010587642_fr.pdf
--11:34:39--  http://medianet.edmond-de-rothschild.fr/edram/pdf/Monthly_Factsheet_FR0010587642_fr.pdf
           => `Monthly_Factsheet_FR0010587642_fr.pdf'
Resolving medianet.edmond-de-rothschild.fr... 193.227.133.61, 213.41.36.61
Connecting to medianet.edmond-de-rothschild.fr|193.227.133.61|:80... connected.
HTTP request sent, awaiting response... 200 OK
Length: 246,142 (240K) [application/pdf]

100%[====================================>] 246,142        1.06M/s

02/01/2014, 15h47
JULIA

yes

ça marche merci beaucoup