IdentifiantMot de passe
Loading...
Mot de passe oublié ?Je m'inscris ! (gratuit)
Navigation

Inscrivez-vous gratuitement
pour pouvoir participer, suivre les réponses en temps réel, voter pour les messages, poser vos propres questions et recevoir la newsletter

Réseau C Discussion :

Reconnection à un serveur HTTP


Sujet :

Réseau C

  1. #1
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut Reconnection à un serveur HTTP
    Bonjour,

    j'essaye de créer une sorte d'aspirateur web,
    mon application télécharge les pages web d'un site,

    je me connecte une première fois au site avec la fonction

    Je suis bien connecté, je recois correctement et intégralement les données de la première page que je demande, dans l'entete http de la réponse du serveur, il y a marqué : "connection: close" ce qui signifie que le serveur va fermer ma connection après m'avoir transmit l'intégralité de la page, je prend note et donc avant de télécharger la deuxième page je me reconnecte, mais le connect() cette fois ci me renvoie une valeur < 0, ce qui signifie qu'il y a une erreur, j'essaye d'obtenir l'erreur avec un :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
     
    errno = WSAGetLastError();
    printf("errno : %i %s\n",errno,strerror(errno));
    qui me renvoit :

    errno : 10056 Unknown error
    Bref incompréhensible, mais je relance mon application cette fois ci en ignorant l'échec du deuxième connect() et j'essaye d'envoyer des données au serveur malgrès avoir recu, encore une fois, un "connection: close" dans l'entete http lors du téléchargement de la premiere page (c'est volontaire car je ne l'utilise pas les connexions persistantes du protocole http 1.1 mais je souhaite le faire ainsi pour le moment).

    La fonction send qui demande la deuxième page :

    Ne me renvoie pas d'erreur ! Alors que je ne me suis pas reconnecté je le rappelle. Donc j'essaye de lire la réponse du serveur et la fonction recv

    Me renvoie 0, pas -1, ce qui veut dire que je suis bien connecté au serveur, malgrès donc avoir recu "connection: close" précédemment, mais il me renvoie 0, j'ai donc rien à lire, je ne recoit pas ma page html, meme pas l'entete http pour me dire qu'il se passe quelque chose.


    En clair, je ne sais pas si je suis bien connecté au serveur, apparemment oui, alors pourquoi m'avoir renvoyé un "connection : close", (le serveur ne fait pas ce qu'il dit ?), puis le send() réussi, cela signifie que je suis bien connecté et pourquoi alors je ne recoit aucune donnée alors que j'ai bien recu la première page html demandé.

    Bref je suis en pleine galère.

    Pour info, je suis sous windows,
    j'ai utilisé :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
     
    sock = socket(AF_INET,SOCK_STREAM,0);
    Pour créer la socket que j'utilise pour télécharger toutes les pages (enfin une seule pour le moment vu mon erreur).

    Une idée ?

    Merci

  2. #2
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut
    errno : 10056 Unknown error

    signifie, en cherchant sur internet, que la socket est déja connecté,

    ca me met sur une piste mais ca ne résoud pas mon problème,

    pourquoi le serveur m'a mit "connection: close" sans fermer la connection ensuite et surtout pourquoi il ne communique plus avec mon client bien qu'apparemment je suis toujours connecté.

  3. #3
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par flo_k Voir le message
    errno : 10056 Unknown error

    signifie, en cherchant sur internet, que la socket est déja connecté,

    ca me met sur une piste mais ca ne résoud pas mon problème,

    pourquoi le serveur m'a mit "connection: close" sans fermer la connection ensuite et surtout pourquoi il ne communique plus avec mon client bien qu'apparemment je suis toujours connecté.
    Pour que la déconnexion soit prise en compte par le protocole, il faut faire un closesocket() (ou close()) sur le client.
    Pas de Wi-Fi à la maison : CPL

  4. #4
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
    95
    96
     
    #include <stdio.h>
    #include <stdlib.h>
    #include <string.h>
     
    #if defined (WIN32)
        #include <winsock2.h> 
        typedef int socklen_t;
    #else
    #include <sys/types.h>
    #include <unistd.h>
    #include <sys/stat.h>
    #include <signal.h>
    #include <fcntl.h> 
    #include <sys/socket.h>
    #include <netinet/in.h>
    #include <netdb.h>
    #include <errno.h>
    #include <arpa/inet.h>
    #endif
     
    #define MAX_MESS 100000
    #define NOMBRE_DE_PAGES_A_TELECHARGER 5
     
    int bor_connect_in(int soc,struct sockaddr_in *adr)
    {
    	return connect(soc,(struct sockaddr *)adr,sizeof(struct sockaddr_in));
    }
     
    int main( int argc, char ** argv )
    {
        int sock,r,pos,i;
    	struct hostent *hp;
    	struct sockaddr_in adr;
    	char pagehtml[MAX_MESS];
     
        #if defined (WIN32)
        WSADATA wsa_data;
     
        if (WSAStartup(MAKEWORD(2, 2), &wsa_data) != 0) 
        printf("\nWSAStartup failed\n");
        #endif
     
        hp = gethostbyname("heure.com");
        if(hp == NULL)
        {errno = WSAGetLastError();
         printf("\ngethostbyname errno : %i %s\n",errno,strerror(errno));}
     
        adr.sin_family = AF_INET;
        adr.sin_port = htons(80);
        memcpy(&adr.sin_addr.s_addr,hp->h_addr,hp->h_length);
     
        sock = socket(AF_INET,SOCK_STREAM,0);		
        if(sock < 0)
        {errno = WSAGetLastError();
         printf("\nsocket errno : %i %s\n",errno,strerror(errno));}
     
         if( bor_connect_in(sock,&adr) < 0)
         {errno = WSAGetLastError();
         printf("\nConnect errno : %i %s\n",errno,strerror(errno));}
     
        for(i = 0;i < NOMBRE_DE_PAGES_A_TELECHARGER; i++)
        {
              r = send(sock,"GET /index.html HTTP/1.0\n\n",strlen("GET /index.html HTTP/1.0\n\n"),0);
              if(r < 0)
              {errno = WSAGetLastError();
              printf("\nSend errno : %i %s\n",errno,strerror(errno));}
     
              pos=0;
    	      while(1)
    	      {
    		          r = recv(sock,pagehtml+pos,MAX_MESS-pos-1,0);
    		          if(r == 0 && pos == 0)
    		          {printf("\nAucune réponses du serveur\n");break;}
    		          else if(r == 0)
    		          {printf("\nRéponse du serveur terminé, page html obtenu\nEntete http et pagehtml :\n\n %s\n\n",pagehtml);break;}
    		          else if(r < 0)
    		          {errno = WSAGetLastError();
                      printf("\nRecv errno : %i %s\n",errno,strerror(errno));break;}
     
    		          pos+=r; 
     
    		          if(pos>=MAX_MESS-2)
    	              {printf("\nBuffer plein\n");break;}
               }
    	}
     
        #if defined (WIN32)
        WSACleanup ();
        #endif
     
        if(close(sock) < 0)
        printf("\nClose errno : %i %s\n",errno,strerror(errno));
     
    	return EXIT_SUCCESS;
    }
    Je vous poste mon code en entier car je sature,
    j'essaye de télécharger 5 fois la meme page,
    en executant ce code, si vous l'essayez, on obtient la première page, enfin une erreur 404 mais on obtient quand meme une réponse, mais après en essayant de retélécharger la meme page le serveur ne répond plus.

    Et en plus à la fin du programme, je n'arrive pas à fermer ma socket
    close(sock) renvoie : "Close errno : 9 Bad file descriptor"

    Comme dit dans le premier post, j'ai essayé de me reconnecté avec connect() avant le téléchargement de chaque page (en mettant l'appel à la fonction connect() dans la boucle for), car dans l'entete http précédente j'ai recu un "connection: close" ce qui signifie d'après la RFC que je vais etre déconnecté du serveur après avoir recu les données.

    Mais en tentant donc un connect(), il y a une erreur, il me dit que je suis déja connecté donc peu importe, j'enleve le connect(), j'envoie ma requete mais j'obtiens aucune réponse du serveur alors que je suis bien connecté car send et recv me renvoie 0 et non -1.

  5. #5
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par flo_k Voir le message
    Je vous poste mon code en entier car je sature,
    Attention, pour Windows, c'est :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    #if defined (WIN32) ||defined (_WIN32)
    j'essaye de télécharger 5 fois la meme page,
    en executant ce code, si vous l'essayez, on obtient la première page, enfin une erreur 404 mais on obtient quand meme une réponse, mais après en essayant de retélécharger la meme page le serveur ne répond plus.

    Et en plus à la fin du programme, je n'arrive pas à fermer ma socket
    close(sock) renvoie : "Close errno : 9 Bad file descriptor"

    Comme dit dans le premier post, j'ai essayé de me reconnecté avec connect() avant le téléchargement de chaque page (en mettant l'appel à la fonction connect() dans la boucle for), car dans l'entete http précédente j'ai recu un "connection: close" ce qui signifie d'après la RFC que je vais etre déconnecté du serveur après avoir recu les données.

    Mais en tentant donc un connect(), il y a une erreur, il me dit que je suis déja connecté donc peu importe, j'enleve le connect(), j'envoie ma requete mais j'obtiens aucune réponse du serveur alors que je suis bien connecté car send et recv me renvoie 0 et non -1.
    avec ton code, j'obtiens ceci :
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
     
     
    RÚponse du serveur terminÚ, page html obtenu
    Entete http et pagehtml :
     
     HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 11:04:26 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
     
     
     
    Aucune rÚponses du serveur
     
    Aucune rÚponses du serveur
     
    Aucune rÚponses du serveur
     
    Aucune rÚponses du serveur
     
    Close errno : 9 Bad file descriptor
     
    Process returned 0 (0x0)   execution time : 1.337 s
    Press any key to continue.
    Comme je l'ai déjà expliqué, une fois la page reçue, il faut se déconnecter (closesocket()). C'est comme ça que fonctionne http.

    1 - tu te connectes
    2 - tu envoies la requête
    3 - tu reçois la réponse
    4 - tu te déconnectes.

    Attention, tes traitements d'erreurs étaient inutile (pas de rupture de l'excécution). J'ai donc refais l'algo selon les modèles habituels.

    http://emmanuel-delahaye.developpez.com/reseaux.htm

    Il faudrait travailler sur les messages d'erreurs pour rendre le code portable sous Linux.

    Je suggère de ne pas trop casser les pieds du serveur (flood) et de le laisser respirer... (Sleep() de 100 ms)
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
    95
    96
    97
    98
    99
    100
    101
    102
    103
    104
    105
    106
    107
    108
    109
    110
    111
    112
    113
    114
    115
    116
    117
    118
    119
    120
    121
    122
    123
    124
    125
    126
    127
    128
     
     
    #include <stdio.h>
    #include <stdlib.h>
    #include <string.h>
     
    #if defined (WIN32) ||defined (_WIN32)
    #include <winsock2.h>
    typedef int socklen_t;
    #else
    #include <sys/types.h>
    #include <unistd.h>
    #include <sys/stat.h>
    #include <signal.h>
    #include <fcntl.h>
    #include <sys/socket.h>
    #include <netinet/in.h>
    #include <netdb.h>
    #include <errno.h>
    #include <arpa/inet.h>
    #endif
     
    #define MAX_MESS 100000
    #define NOMBRE_DE_PAGES_A_TELECHARGER 5
     
    static int bor_connect_in (int soc, struct sockaddr_in *adr)
    {
       return connect (soc, (struct sockaddr *) adr, sizeof (struct sockaddr_in));
    }
     
    static void lire_page (void)
    {
       SOCKET sock = socket (AF_INET, SOCK_STREAM, 0);
       if (sock != INVALID_SOCKET)
       {
          struct hostent *hp = gethostbyname ("heure.com");
          if (hp != NULL)
          {
             struct sockaddr_in adr;
     
             adr.sin_family = AF_INET;
             adr.sin_port = htons (80);
             memcpy (&adr.sin_addr.s_addr, hp->h_addr, hp->h_length);
     
             if (bor_connect_in (sock, &adr) != SOCKET_ERROR)
             {
                char const *msg = "GET /index.html HTTP/1.0\n\n";
                int r = send (sock, msg, strlen (msg), 0);
                if (r > 0)
                {
                   char pagehtml[MAX_MESS];
                   r = recv (sock, pagehtml, sizeof pagehtml - 1, 0);
                   if (r > 0)
                   {
                      pagehtml[r]=0;
                      printf ("%s", pagehtml);
                   }
                   else if (r == 0)
                   {
                      printf ("deconnexion par le serveur\n");
     
                   }
                   else
     
                   {
                      errno = WSAGetLastError ();
                      printf ("\nRecv errno : %i %s\n", errno, strerror (errno));
     
                   }
     
                }
                else if (r < 0)
                {
                   errno = WSAGetLastError ();
                   printf ("\nSend errno : %i %s\n", errno, strerror (errno));
                }
                else
                {
                   printf ("deconnexion par le serveur\n");
                }
             }
             else
             {
                errno = WSAGetLastError ();
                printf ("\nConnect errno : %i %s\n", errno, strerror (errno));
             }
          }
          else
          {
             errno = WSAGetLastError ();
             printf ("\ngethostbyname errno : %i %s\n", errno, strerror (errno));
          }
     
          if (closesocket (sock) < 0)
          {
             perror ("close");
          }
       }
       else
       {
          errno = WSAGetLastError ();
          printf ("\nsocket errno : %i %s\n", errno, strerror (errno));
       }
    }
     
    int main (int argc, char **argv)
    {
       int sock, r, pos, i;
     
    #if defined (WIN32) ||defined (_WIN32)
       WSADATA wsa_data;
     
       if (WSAStartup (MAKEWORD (2, 2), &wsa_data) != 0)
          printf ("\nWSAStartup failed\n");
    #endif
     
       for (i = 0; i < NOMBRE_DE_PAGES_A_TELECHARGER; i++)
       {
          lire_page ();
          Sleep (100);
       }
     
    #if defined (WIN32) ||defined (_WIN32)
       WSACleanup ();
    #endif
     
       return EXIT_SUCCESS;
    }
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
     
    HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 12:34:52 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
    HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 12:34:52 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
    HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 12:34:52 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
    HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 12:34:52 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
    HTTP/1.1 404 Not Found
    Date: Thu, 13 Nov 2008 12:34:52 GMT
    Server: Apache/2.0.52 (CentOS)
    Vary: Accept-Encoding
    Content-Length: 298
    Connection: close
    Content-Type: text/html; charset=iso-8859-1
     
    <!DOCTYPE HTML PUBLIC "-//IETF//DTD HTML 2.0//EN">
    <html><head>
    <title>404 Not Found</title>
    </head><body>
    <h1>Not Found</h1>
    <p>The requested URL /index.html was not found on this server.</p>
    <hr>
    <address>Apache/2.0.52 (CentOS) Server at wwv3.virtual-network.com Port 80</addr
    ess>
    </body></html>
     
    Process returned 0 (0x0)   execution time : 2.042 s
    Press any key to continue.
    Pas de Wi-Fi à la maison : CPL

  6. #6
    Rédacteur
    Avatar de 3DArchi
    Profil pro
    Inscrit en
    Juin 2008
    Messages
    7 634
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Juin 2008
    Messages : 7 634
    Points : 13 017
    Points
    13 017
    Par défaut
    Citation Envoyé par Emmanuel Delahaye Voir le message
    Comme je l'ai déjà expliqué, une fois la page reçue, il faut se déconnecter (closesocket()). C'est comme ça que fonctionne http.

    1 - tu te connectes
    2 - tu envoies la requête
    3 - tu reçois la réponse
    4 - tu te déconnectes.
    De mémoire, il me semble que HTTP 1.1. accepte les connexions persistantes pour des requêtes sur le même serveur.

  7. #7
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par 3DArchi Voir le message
    De mémoire, il me semble que HTTP 1.1. accepte les connexions persistantes pour des requêtes sur le même serveur.
    Mais il doit falloir le préciser dans la requête initiale, ce qui n'est pas fait ici...
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
     "GET /index.html HTTP/1.0\n\n"
    C'est rustique !
    Pas de Wi-Fi à la maison : CPL

  8. #8
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut
    Waouh
    Merci Emmanuel d'avoir corrigé tout ca,

    cependant il y a quelques trucs qui m'échappent,

    la ou j'ai appris les sockets, mon professeur à l'université en l'occurence, précisait qu'il fallait boucler sur le recv() tant qu'il y avait des données à lire, car l'intégralitée des pages html qui sont souvent très importantes ne sont pas envoyées/recues en un coup, or la il n'y a plus qu'un appel à recv ?

    Et aussi je vois que tu traites le cas : recv() == 0 comme une deconnection du serveur, pourquoi ? s'il n'y a rien à lire, cela ne veut pas dire qu'on a forcément été déconnecté ?

    Pour les connexions persistantes en effet, mais il arrive que le serveur http ne les accepte pas ou bien nous déconnecte au bout d'un moment pour ses propres raisons, il faut vérifier l'entete http pour en etre sur, c'est pour ca que je préfére partir sur le modèle de la reconnection systèmatique.

    Merci en tout cas pour votre aide

  9. #9
    Membre émérite Avatar de nicolas.sitbon
    Profil pro
    Inscrit en
    Août 2007
    Messages
    2 015
    Détails du profil
    Informations personnelles :
    Âge : 41
    Localisation : France

    Informations forums :
    Inscription : Août 2007
    Messages : 2 015
    Points : 2 280
    Points
    2 280
    Par défaut
    Citation Envoyé par flo_k Voir le message
    Waouh
    Merci Emmanuel d'avoir corrigé tout ca,

    cependant il y a quelques trucs qui m'échappent,

    la ou j'ai appris les sockets, mon professeur à l'université en l'occurence, précisait qu'il fallait boucler sur le recv() tant qu'il y avait des données à lire, car l'intégralitée des pages html qui sont souvent très importantes ne sont pas envoyées/recues en un coup, or la il n'y a plus qu'un appel à recv ?

    Et aussi je vois que tu traites le cas : recv() == 0 comme une deconnection du serveur, pourquoi ? s'il n'y a rien à lire, cela ne veut pas dire qu'on a forcément été déconnecté ?

    Pour les connexions persistantes en effet, mais il arrive que le serveur http ne les accepte pas ou bien nous déconnecte au bout d'un moment pour ses propres raisons, il faut vérifier l'entete http pour en etre sur, c'est pour ca que je préfére partir sur le modèle de la reconnection systèmatique.

    Merci en tout cas pour votre aide
    Upon successful completion, recv() shall return the length of the message in bytes. If no messages are available to be received and the peer has performed an orderly shutdown, recv() shall return 0. Otherwise, -1 shall be returned and errno set to indicate the error.
    "The quieter you become, the more you are able to hear"
    "Plus vous êtes silencieux, plus vous êtes capable d'entendre"

  10. #10
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par flo_k Voir le message
    la ou j'ai appris les sockets, mon professeur à l'université en l'occurence, précisait qu'il fallait boucler sur le recv() tant qu'il y avait des données à lire, car l'intégralitée des pages html qui sont souvent très importantes ne sont pas envoyées/recues en un coup, or la il n'y a plus qu'un appel à recv ?
    Oui, j'ai simplifié. J'ai vu que tu savais faire le bouclage... SI tu penses en avoir besoin, fait le, mais affiche (ou enregistre dans un fichietr) au fur et à mesure. Inutile de tout mettre en mémoire.
    Et aussi je vois que tu traites le cas : recv() == 0 comme une deconnection du serveur, pourquoi ? s'il n'y a rien à lire, cela ne veut pas dire qu'on a forcément été déconnecté ?
    En mode bloquant, si. Relis la doc de la fonction recv()...
    Pas de Wi-Fi à la maison : CPL

  11. #11
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut
    Ok merci à vous deux,
    j'ai encore des petites questions si tu as le temps,

    dans ton corrigé, tu fermes la socket car tu sais que le protocole http 1.0 marche comme cela mais sans vraiment savoir si le serveur va réellement déconnecter le client et donc si jamais j'implémente les connexions persistantes, alors je devrais recreer une socket (et fermer la précédente) seulement si j'ai bien recu un send() ou recv() égal à zero ?

    Et du coup en utilisant les connexions persistantes et si je boucle sur le recv(), car en effet c'est comme cela que je pense le faire, tant qu'il ne me renvoie pas zero, je serai déconnecté à coup sur puisque j'attend un zero ...

    D'après la RFC il faut lire bloc par bloc puisqu'en utilisant les connexions persistantes le serveur renvoie non seulement les données mais aussi la taille du bloc des données suivant (ou quelque chose comme ca), du coup on sait quand on doit s'arreter de boucler sur le recv (quand la taille du bloc suivant est zero) et on n'est pas déconnecté à chaque fois.

    Le problème c'est que c'est assez dur à réaliser ce décodage des données, surtout en C, en tout cas je n'y suis pas arrivé pour le moment, donc je me demandais si un select() pouvait régler le problème.

    En effet si je structe ma socket en lecture, le select() va se "débloquer" seulement si il y a quelque chose à lire (donc quand le recv() est différent de zero ?) ainsi je ne serais pas déconnecté en utilisant les connexions persistantes et en utilisant select() ?

    Dernière chose, j'ai essayé de remplacer dans le code corrigé, closesocket() par close() et ce dernier me renvoie une erreur, "mauvais descripteur" ou quelque chose comme ca, est-ce que close va fonctionner une fois sous unix ?

  12. #12
    Expert éminent sénior
    Homme Profil pro
    Architecte technique retraité
    Inscrit en
    Juin 2008
    Messages
    21 287
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Manche (Basse Normandie)

    Informations professionnelles :
    Activité : Architecte technique retraité
    Secteur : Industrie

    Informations forums :
    Inscription : Juin 2008
    Messages : 21 287
    Points : 36 776
    Points
    36 776
    Par défaut
    Bonjour,
    Il ne vous serait peut être pas inutile de jeter un oeil à libwww, la bibliothèque (peut être un peu ancienne) fournie par le W3C et les exemples associés.
    -W
    Architectures post-modernes.
    Python sur DVP c'est aussi des FAQs, des cours et tutoriels

  13. #13
    Membre émérite Avatar de nicolas.sitbon
    Profil pro
    Inscrit en
    Août 2007
    Messages
    2 015
    Détails du profil
    Informations personnelles :
    Âge : 41
    Localisation : France

    Informations forums :
    Inscription : Août 2007
    Messages : 2 015
    Points : 2 280
    Points
    2 280
    Par défaut
    Citation Envoyé par flo_k Voir le message
    En effet si je structe ma socket en lecture, le select() va se "débloquer" seulement si il y a quelque chose à lire (donc quand le recv() est différent de zero ?) ainsi je ne serais pas déconnecté en utilisant les connexions persistantes et en utilisant select() ?
    select() te dira que la socket est prête en lecture si le serveur ferme sa socket, et donc ton recv() te renverra 0.
    Citation Envoyé par flo_k Voir le message
    Dernière chose, j'ai essayé de remplacer dans le code corrigé, closesocket() par close() et ce dernier me renvoie une erreur, "mauvais descripteur" ou quelque chose comme ca, est-ce que close va fonctionner une fois sous unix ?
    close() fonctionne sous unix, je confirme.
    "The quieter you become, the more you are able to hear"
    "Plus vous êtes silencieux, plus vous êtes capable d'entendre"

  14. #14
    Expert éminent sénior
    Avatar de Médinoc
    Homme Profil pro
    Développeur informatique
    Inscrit en
    Septembre 2005
    Messages
    27 374
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Âge : 40
    Localisation : France

    Informations professionnelles :
    Activité : Développeur informatique
    Secteur : High Tech - Éditeur de logiciels

    Informations forums :
    Inscription : Septembre 2005
    Messages : 27 374
    Points : 41 541
    Points
    41 541
    Par défaut
    C'est pourquoi je conseille d'utiliser systématiquement closesocket(), et de faire un #define closesocket(x) close(x) quand on compile sous *n*x.
    D'ailleurs, je ne suis pas le seul à le conseiller...
    SVP, pas de questions techniques par MP. Surtout si je ne vous ai jamais parlé avant.

    "Aw, come on, who would be so stupid as to insert a cast to make an error go away without actually fixing the error?"
    Apparently everyone.
    -- Raymond Chen.
    Traduction obligatoire: "Oh, voyons, qui serait assez stupide pour mettre un cast pour faire disparaitre un message d'erreur sans vraiment corriger l'erreur?" - Apparemment, tout le monde. -- Raymond Chen.

  15. #15
    Membre du Club
    Profil pro
    Inscrit en
    Octobre 2006
    Messages
    87
    Détails du profil
    Informations personnelles :
    Localisation : France

    Informations forums :
    Inscription : Octobre 2006
    Messages : 87
    Points : 46
    Points
    46
    Par défaut
    Je relance le sujet, car j'ai un petit problème,
    car le code ci dessous marche très bien (voir fin de post),


    mais je remplace l'allocation statique ici :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
     
    char pagehtml[MAX_MESS];
    par une dynamique (car j'en ai besoin)

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
     
    char *pagehtml;
    pagehtml = (char *)malloc(sizeof(char) * MAX_MESS);
    et j'utilise ensuite ce pointeur dans l'appel à recv qui ne change pas :

    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
     
    r = recv (sock, pagehtml, sizeof pagehtml - 1, 0);
    pagehtml n'est pas remplit de la meme manière, dans le premier cas, comme dit au début j'ai la réponse totale du serveur, tout marche comme il faut, et dans le deuxième cas, la fin de la réponse du serveur (une page html pour rappel) n'est pas copié dans mon buffer : pagehtml.

    Vous pouvez vous en convaincre en testant sur de grosses pages html à télécharger.

    Merci de votre aide.

    Citation Envoyé par Emmanuel Delahaye Voir le message
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
    6
    7
    8
    9
    10
    11
    12
    13
    14
    15
    16
    17
    18
    19
    20
    21
    22
    23
    24
    25
    26
    27
    28
    29
    30
    31
    32
    33
    34
    35
    36
    37
    38
    39
    40
    41
    42
    43
    44
    45
    46
    47
    48
    49
    50
    51
    52
    53
    54
    55
    56
    57
    58
    59
    60
    61
    62
    63
    64
    65
    66
    67
    68
    69
    70
    71
    72
    73
    74
    75
    76
    77
    78
    79
    80
    81
    82
    83
    84
    85
    86
    87
    88
    89
    90
    91
    92
    93
    94
    95
    96
    97
    98
    99
    100
    101
    102
    103
    104
    105
    106
    107
    108
    109
    110
    111
    112
    113
    114
    115
    116
    117
    118
    119
    120
    121
    122
    123
    124
    125
    126
    127
    128
     
     
    #include <stdio.h>
    #include <stdlib.h>
    #include <string.h>
     
    #if defined (WIN32) ||defined (_WIN32)
    #include <winsock2.h>
    typedef int socklen_t;
    #else
    #include <sys/types.h>
    #include <unistd.h>
    #include <sys/stat.h>
    #include <signal.h>
    #include <fcntl.h>
    #include <sys/socket.h>
    #include <netinet/in.h>
    #include <netdb.h>
    #include <errno.h>
    #include <arpa/inet.h>
    #endif
     
    #define MAX_MESS 100000
    #define NOMBRE_DE_PAGES_A_TELECHARGER 5
     
    static int bor_connect_in (int soc, struct sockaddr_in *adr)
    {
       return connect (soc, (struct sockaddr *) adr, sizeof (struct sockaddr_in));
    }
     
    static void lire_page (void)
    {
       SOCKET sock = socket (AF_INET, SOCK_STREAM, 0);
       if (sock != INVALID_SOCKET)
       {
          struct hostent *hp = gethostbyname ("heure.com");
          if (hp != NULL)
          {
             struct sockaddr_in adr;
     
             adr.sin_family = AF_INET;
             adr.sin_port = htons (80);
             memcpy (&adr.sin_addr.s_addr, hp->h_addr, hp->h_length);
     
             if (bor_connect_in (sock, &adr) != SOCKET_ERROR)
             {
                char const *msg = "GET /index.html HTTP/1.0\n\n";
                int r = send (sock, msg, strlen (msg), 0);
                if (r > 0)
                {
                   char pagehtml[MAX_MESS];
                   r = recv (sock, pagehtml, sizeof pagehtml - 1, 0);
                   if (r > 0)
                   {
                      pagehtml[r]=0;
                      printf ("%s", pagehtml);
                   }
                   else if (r == 0)
                   {
                      printf ("deconnexion par le serveur\n");
     
                   }
                   else
     
                   {
                      errno = WSAGetLastError ();
                      printf ("\nRecv errno : %i %s\n", errno, strerror (errno));
     
                   }
     
                }
                else if (r < 0)
                {
                   errno = WSAGetLastError ();
                   printf ("\nSend errno : %i %s\n", errno, strerror (errno));
                }
                else
                {
                   printf ("deconnexion par le serveur\n");
                }
             }
             else
             {
                errno = WSAGetLastError ();
                printf ("\nConnect errno : %i %s\n", errno, strerror (errno));
             }
          }
          else
          {
             errno = WSAGetLastError ();
             printf ("\ngethostbyname errno : %i %s\n", errno, strerror (errno));
          }
     
          if (closesocket (sock) < 0)
          {
             perror ("close");
          }
       }
       else
       {
          errno = WSAGetLastError ();
          printf ("\nsocket errno : %i %s\n", errno, strerror (errno));
       }
    }
     
    int main (int argc, char **argv)
    {
       int sock, r, pos, i;
     
    #if defined (WIN32) ||defined (_WIN32)
       WSADATA wsa_data;
     
       if (WSAStartup (MAKEWORD (2, 2), &wsa_data) != 0)
          printf ("\nWSAStartup failed\n");
    #endif
     
       for (i = 0; i < NOMBRE_DE_PAGES_A_TELECHARGER; i++)
       {
          lire_page ();
          Sleep (100);
       }
     
    #if defined (WIN32) ||defined (_WIN32)
       WSACleanup ();
    #endif
     
       return EXIT_SUCCESS;
    }

  16. #16
    Membre émérite Avatar de nicolas.sitbon
    Profil pro
    Inscrit en
    Août 2007
    Messages
    2 015
    Détails du profil
    Informations personnelles :
    Âge : 41
    Localisation : France

    Informations forums :
    Inscription : Août 2007
    Messages : 2 015
    Points : 2 280
    Points
    2 280
    Par défaut
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    char *pagehtml;
    pagehtml = (char *)malloc(sizeof(char) * MAX_MESS);
    c'est lourd pour rien, essaye plutôt
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    char *pagehtml = malloc (MAX_MESS);
    et pour ton problème, il vient de là:
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    r = recv (sock, pagehtml, sizeof pagehtml - 1, 0);
    pagehtml n'est plus un tableau mais un pointeur.
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    r = recv (sock, pagehtml, MAX_MESS, 0);
    "The quieter you become, the more you are able to hear"
    "Plus vous êtes silencieux, plus vous êtes capable d'entendre"

  17. #17
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par nicolas.sitbon Voir le message
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    r = recv (sock, pagehtml, MAX_MESS, 0);
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    r = recv (sock, pagehtml, MAX_MESS - 1, 0);
    Pour garantir une place pour le 0 final...
    Pas de Wi-Fi à la maison : CPL

  18. #18
    Expert éminent sénior
    Homme Profil pro
    Architecte technique retraité
    Inscrit en
    Juin 2008
    Messages
    21 287
    Détails du profil
    Informations personnelles :
    Sexe : Homme
    Localisation : France, Manche (Basse Normandie)

    Informations professionnelles :
    Activité : Architecte technique retraité
    Secteur : Industrie

    Informations forums :
    Inscription : Juin 2008
    Messages : 21 287
    Points : 36 776
    Points
    36 776
    Par défaut on se reveille!
    Citation Envoyé par Emmanuel Delahaye Voir le message
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    r = recv (sock, pagehtml, MAX_MESS - 1, 0);
    Pour garantir une place pour le 0 final...
    recv ne retourne pas une chaîne de caractères terminée par 0 mais une suite d'octets et sa longueur (qu'on pourra appeler "message").
    Dans le cas HTTP, la fin du message est souvent la fin du "body" codée comme précisé dans l'en-tête => le premier 0 rencontré ne signifie pas toujours 'fin du
    message'.
    -W
    Architectures post-modernes.
    Python sur DVP c'est aussi des FAQs, des cours et tutoriels

  19. #19
    Membre émérite Avatar de nicolas.sitbon
    Profil pro
    Inscrit en
    Août 2007
    Messages
    2 015
    Détails du profil
    Informations personnelles :
    Âge : 41
    Localisation : France

    Informations forums :
    Inscription : Août 2007
    Messages : 2 015
    Points : 2 280
    Points
    2 280
    Par défaut
    Citation Envoyé par wiztricks Voir le message
    recv ne retourne pas une chaîne de caractères terminée par 0 mais une suite d'octets et sa longueur (qu'on pourra appeler "message").
    Dans le cas HTTP, la fin du message est souvent la fin du "body" codée comme précisé dans l'en-tête => le premier 0 rencontré ne signifie pas toujours 'fin du
    message'.
    -W
    Emmanuel le sait et je le sais mais c'est pour pouvoir plus facilement traiter avec les fonctions de chaines après. ça n'est bien sûr pas une obligation, tout dépend de ce que l'on fait après avec les données.
    "The quieter you become, the more you are able to hear"
    "Plus vous êtes silencieux, plus vous êtes capable d'entendre"

  20. #20
    Expert éminent sénior
    Avatar de Emmanuel Delahaye
    Profil pro
    Retraité
    Inscrit en
    Décembre 2003
    Messages
    14 512
    Détails du profil
    Informations personnelles :
    Âge : 67
    Localisation : France, Paris (Île de France)

    Informations professionnelles :
    Activité : Retraité

    Informations forums :
    Inscription : Décembre 2003
    Messages : 14 512
    Points : 20 985
    Points
    20 985
    Par défaut
    Citation Envoyé par wiztricks Voir le message
    recv ne retourne pas une chaîne de caractères terminée par 0 mais une suite d'octets et sa longueur (qu'on pourra appeler "message").
    Oui, mais ici, il s'agit d'une chaine de caractères. On utiliise la longueur retournée pour placer le 0.
    Code : Sélectionner tout - Visualiser dans une fenêtre à part
    1
    2
    3
    4
    5
     
       n = recv(...);
       if (n > 0)
       {
          buf[n] = 0;
    si on a pas fait la réservation pour le 0, on risque de le placer en dehors du tableau de char.
    Dans le cas HTTP, la fin du message est souvent la fin du "body" codée comme précisé dans l'en-tête => le premier 0 rencontré ne signifie pas toujours 'fin du
    message'.
    Le 0 des chaines de caractères C (détail d'implémentation lié au langage) n'est pas transmis. Les protocoles réseaux n'ont que faire des détails liés aux langages...

    Les protocoles de type FTP ou HTTP sont de type texte et n'utilisent pas de 0 dans les données transmises (sauf pour mode binaire pur en ftp, par exemple).
    Pas de Wi-Fi à la maison : CPL

Discussions similaires

  1. Sockets SSL ( serveur HTTPS )
    Par hexadecime dans le forum Réseau/Web
    Réponses: 4
    Dernier message: 19/10/2007, 18h02
  2. [C++] Serveur HTTP
    Par taron dans le forum C++
    Réponses: 1
    Dernier message: 12/01/2006, 00h44
  3. Tester un serveur HTTP et un FTP
    Par fmcvieira dans le forum VB 6 et antérieur
    Réponses: 2
    Dernier message: 29/11/2005, 21h51
  4. [Net] Creation serveur HTTP en C++
    Par Yannos94 dans le forum C++
    Réponses: 13
    Dernier message: 14/11/2005, 12h05
  5. [Réseau] Headers vers un serveur http
    Par gexti dans le forum Entrée/Sortie
    Réponses: 5
    Dernier message: 04/05/2004, 14h58

Partager

Partager
  • Envoyer la discussion sur Viadeo
  • Envoyer la discussion sur Twitter
  • Envoyer la discussion sur Google
  • Envoyer la discussion sur Facebook
  • Envoyer la discussion sur Digg
  • Envoyer la discussion sur Delicious
  • Envoyer la discussion sur MySpace
  • Envoyer la discussion sur Yahoo