Lecture données site internet

Version imprimable

28/08/2023, 12h45
kitcarflo

Lecture données site internet

Bonjour.

Je viens vers vous pour un petit problème.

Il me faut récupérer les données d'une page web. C'est une page blanche, avec juste quelques mots (un mot par ligne).

J'avais un bout de code me permettant de réaliser le travail, mais depuis le changement de HTTP à HTTPS, ça ne marche plus. Et je ne trouve pas de solution pour récupérer dans mon programme les données.

Quelqu'un a déjà fait cela ?
28/08/2023, 13h03
popo

Nous n'avons pas encore la faculté de deviner le code que vous avez écrit.
Mais la technologie progresse...

En attendant, merci de poster le code qui ne fonctionne plus.

Voici le code que j'utilisais.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
Imports System.IO
Imports System.Net
 
Private Sub Button1_Click(ByVal sender As System.Object, ByVal e As System.EventArgs) Handles Button1.Click
        Dim webRequest As WebRequest
        Dim webResponse As WebResponse
        Dim pageHtml As String
 
        webRequest = HttpWebRequest.Create("Adresse de la page du site")
        webResponse = webRequest.GetResponse()
 
        Using stream As StreamReader = New StreamReader(webResponse.GetResponseStream())
            pageHtml = stream.ReadToEnd()
            MsgBox(pageHtml)
        End Using
end sub

28/08/2023, 18h32
popo

A première vue, ce code à l'air correct.
Tu obtiens un message d'erreur ?

Edit :
Même si ce n'est probablement pas pour cela que ça ne fonctionne pas, l'objet que tu utilises est déprécié.

Microsoft recommande celui-là à la place :
https://learn.microsoft.com/en-us/dotnet/api/system.net.http.httpclient?view=net-7.0

Je viens de faire le test.
Ta méthode et celle que je t'ai suggéré fonctionnent toutes les deux et renvoient rigoureusement le même résultat.

Code:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
Module Module1
 
    Const Uri As String = "https://www.json.org/json-fr.html"
 
    Sub Main()
        Dim code1 As String = ExecuteWithHttpWebRequest()
        Dim code2 As String = ExecuteWithHttpClient()
 
        Dim result As String = If(code1.Equals(code2), "OK", "KO")
 
        Console.WriteLine(result)
        Console.ReadKey()
    End Sub
 
    Function ExecuteWithHttpWebRequest() As String
        Dim webRequest As WebRequest
        Dim webResponse As WebResponse
        Dim pageHtml As String
 
        webRequest = HttpWebRequest.Create(Uri)
        webResponse = webRequest.GetResponse()
 
        Using stream As StreamReader = New StreamReader(webResponse.GetResponseStream())
            pageHtml = stream.ReadToEnd()
 
            Return pageHtml
        End Using
    End Function
 
    Function ExecuteWithHttpClient() As String
        Using client As HttpClient = New HttpClient()
            Return client.GetStringAsync(Uri).Result
        End Using
    End Function
End Module

Résultat : OK.

Edit :
A vérifier en priorité.
Est-ce que ton URL fonctionne si tu l'appelle depuis un navigateur ?
Est-ce que tu obtiens un statut différent de 200 ?

30/08/2023, 11h24
kitcarflo

Bonjour.

Avec ma méthode, j'ai une erreur sur la ligne :

Code:

webResponse = webRequest.GetResponse()

"La demande a été abandonnée : Impossible de créer un canal sécurisé SSL/TLS."

La page que je charge fonctionne bien quand je saisie l'adresse sur mon navigateur.

J'ai essayé en changeant l'adresse de ma page par la tienne : "https://www.json.org/json-fr.html" et j'obtiens la même erreur. Je vais maintenant essayer avec ta méthode pour voir, mais j'ai une erreur sur "httpClient" qui est de type inconnu
31/08/2023, 09h49
popo

Cela ressemble à un problème de sécurité bien connu.
Tu utilises probablement une version obsolète de TLS.

Ceci devrait t'aider :
https://www.developpez.net/forums/d1.../#post10372117
08/09/2023, 12h09
kitcarflo

Bonjour.

Désolé pour ne répondre que maintenant. Des problèmes m'ont tenue un peu à l’écart.

Je n'ai jamais fait ce genre de chose et je ne vois comment faire pour faire cibler la version 4.5 du net framework.
08/09/2023, 13h59
popo

Clic droit sur ton projet, puis "Propriétés".
Dans le volet "Application" (le premier), il y a la version cible.

Si .Net Framework 4.5 (ou supérieur) n'apparait pas, il faut quitter complètement Visual Studio, télécharger et installer le package développeur.
La version 4.5 n'étant plus maintenue, autant passer directement en 4.8.
https://dotnet.microsoft.com/en-us/d...ramework/net48
08/09/2023, 19h04
umfred

dans VS2022, il propose, il me semble de télécharger d'autres versions du Framework.

Et encore faut-il que le projet soit en .NET Framework et pas en .NET5/6/7; auquel cas, il faut créer un nouveau projet d'application avec la mention Framework si on veut utiliser le .NET Framework)
09/09/2023, 12h45
popo

Si le projet était en .Net 5 ou supérieur, il n'aurait pas ce problème.
10/09/2023, 01h03
wallace1

Bonsoir,

Le problème a déjà été traité ici :
https://www.developpez.net/forums/bl...urise-ssl-tls/
Un autre lien utile ici :
https://stackoverflow.com/questions/37869135/is-that-possible-to-send-httpwebrequest-using-tls1-2-on-net-4-0-framework

Bon codage 😉
18/09/2023, 19h44
kitcarflo

Citation:

Envoyé par popo

Clic droit sur ton projet, puis "Propriétés".
Dans le volet "Application" (le premier), il y a la version cible.

Si .Net Framework 4.5 (ou supérieur) n'apparait pas, il faut quitter complètement Visual Studio, télécharger et installer le package développeur.
La version 4.5 n'étant plus maintenue, autant passer directement en 4.8.
https://dotnet.microsoft.com/en-us/d...ramework/net48

Quand je vais dans le volet "Application", je n'ai pas de "version cible" ou autre qui me permette de voir quelle version du Framework.
Je suis sous Visual Studio 2010.

Quand je créer une nouvelle application, le max que je peux prendre est la version 4.0 du Frameworks.

Peut -être je devrais passer sur VS 2022 ?
21/09/2023, 10h36
popo
Si je ne dis pas de bêtises, Visual Studio 2010 peut aller jusqu'à la version 4.6 du Framework mais pas au delà.
Quoi qu'il en soit, il faudra quand même l'installer.

Si tu en as la possibilité, il serait effectivement judicieux d'installer la version 2022.
Ainsi :
- Tu bénéficiera des améliorations en termes de performances et de sécurité
- Tu pourras utiliser la dernière version de .Net Framework (la 4.8 donc) ou passer sur .Net CORE.
23/09/2023, 10h45
kitcarflo

1 pièce(s) jointe(s)

Bonjour,

J'ai mis la version 2022 proposé par Microsoft.

Le mieux serait de partir sur le .Net Core 3.1 ?

Pièce jointe 644346
23/09/2023, 12h05
popo

Le mieux serait d'utiliser .Net 7.0