Discussion :

[Gunny]

Bonjour,

Je me casse la tête depuis quelques heures là dessus et je ne trouve pas de solution.
J'utilise un contrôle webbrowser pour crawler un site web qui requiert une double authentification : une boîte de dialogue système (htaccess probablement) et ensuite un formulaire web.
A un moment je dois enregistrer un pdf qui est généré par le site. Je n'ai donc pas d'url directe vers le document, juste une url "classique" vers une jsp.
J'ai exploré la piste évidente du webclient. Le problème étant que le WebClient n'étant pas authentifié via le formulaire web, au lieu de me récupérer le pdf, il me récupère la page qui est affichée lorsque l'on essaye d'appeler l'url sans s'être authentifié via le formulaire. Les credentials passent l'authentification https mais c'est tout.
Ensuite j'ai essayé d'utiliser les propriétés Document et DocumentStream de mon contrôle WebBrowser dans le gestionnaire d'évènement DocumentCompleted, mais sans succès. En effet si j'appelle la fonction Navigate() sur l'url du pdf, c'est Adobe Reader qui se lance, et par conséquent le document pdf n'est pas chargé dans la propriété Document (dans celle-ci se trouve en fait la page précédente).
J'essaye d'explorer la piste de simuler un clic droit>enregistrer sous mais sans grand succès.

Quelqu'un a-t-il une idée ?

Merci beaucoup !

[tomlev]

Le problème étant que le WebClient n'étant pas authentifié via le formulaire web, au lieu de me récupérer le pdf, il me récupère la page qui est affichée lorsque l'on essaye d'appeler l'url sans s'être authentifié via le formulaire. Les credentials passent l'authentification https mais c'est tout.

Le problème est que de base, WebClient ne sait pas gérer les cookies. Donc l'authentification par formulaire que tu fais est aussitôt "oubliée", vu que tu ne retransmets pas les cookies que tu as reçus en t'authentifiant.

Heureusement c'est assez facile d'ajouter cette fonctionnalité :

- Crée une classe qui hérite de WebClient (appelle la par exemple WebClientEx)
- Ajoute une propriété CookieContainer (de type CookieContainer)
- Override la méthode GetWebRequest pour gérer les cookies de la HttpWebRequest

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
public class WebClientEx : WebClient
{
    public CookieContainer CookieContainer { get; set; }
 
    protected override WebRequest GetWebRequest(Uri address)
    {
        var req = base.GetWebRequest(address);
        var httpReq = req as HttpWebRequest;
        if (httpReq != null)
        {
            httpReq.CookieContainer = this.CookieContainer;
        }
        return req;
    }
}

Pour l'utiliser, initialise la propriété CookieContainer :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
var client = new WebClientEx();
client.CookieContainer = new CookieContainer();
...

Si tu réutilises le même WebClientEx pour plusieurs requêtes successives (ou que tu réutilises le même CookieContainer avec plusieurs WebClientEx), les cookies seront conservés entre chaque requête, et ça devrait fonctionner comme tu veux

[Gunny]

Merci !

J'ai donc écrit ce code (je vous passe les appels à mon fichier config) :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
 
WebClientEx client = new WebClientEx();
client.Proxy.Credentials = CredentialCache.DefaultNetworkCredentials;
client.Credentials = new NetworkCredential(login, pass);
client.CookieContainer = new CookieContainer();
 
//Authentification formulaire
string url = "urlForm";
NameValueCollection formData = new NameValueCollection();
formData["txtLogin"] = login2;
formData["txtMdp"] = pass2;
 
byte[] responseBytes = client.UploadValues(url, "POST", formData);
 
 
// On enregistre temporairement le PDF
string tempPath = Path.GetTempFileName() + ".pdf";
client.DownloadFile("URLpdf", tempPath);

Et... ça ne fonctionne pas, mon code reste bloqué lors de l'appel à UploadValues (erreur 401). D'où cela peut-il venir ?

[tomlev]

Et... ça ne fonctionne pas, mon code reste bloqué lors de l'appel à UploadValues. D'où cela peut-il venir ?

Bizarre... et si tu vires le CookieContainer ça bloque pas ?

[Gunny]

Ca ne change rien non, toujours erreur 401. Pourtant mes credentials sont corrects.

[tomlev]

Bizarre... sans le CookieContainer ça doit pourtant revenir au même qu'avec un WebClient normal