linux socket用GET发送http请求来获取网页信息并保存在文件中，点击文件即可打开网页

[dandelion1030]

保存后的文件双击结果为：

为什么不能保存网页的源代码？


客户端代码如下：

#include <stdio.h>
#include <unistd.h>
#include <sys/types.h>
#include <sys/socket.h>
#include <sys/stat.h>
#include <fcntl.h>
#include <string.h>
#include <arpa/inet.h>
#include <netdb.h>
#include <netinet/in.h>
#include <stdlib.h>

#define BUFSIZE 0xF000
void geturl(char* url)
{
        int cfd;
        struct sockaddr_in cadd;
        struct hostent *pURL = NULL;
        //int BUFSIZE = (int)malloc(2048);
        char myurl[BUFSIZE];
        char *pHost = 0;
        //char *pGET = 0;
        char host[BUFSIZE],GET[BUFSIZE];
        char request[BUFSIZE];
        static char text[BUFSIZE];
        int i,j;

        //分离主机中的主机地址和相对路径
        memset(myurl,0,BUFSIZE);
        memset(host,0,BUFSIZE);
        strcpy(myurl,url);
        for(pHost = myurl;*pHost != '/' && *pHost != '\0';++pHost);

        //获取相对路径保存到GET中
        memset(GET,0,BUFSIZE);
        if((int)(pHost-myurl) == strlen(myurl))
        {
                strcpy(GET,"/");//即url中没有给出相对路径，需要自己手动的在url尾
部加上/
        }
        else
        {
                strcpy(GET,pHost);//地址段pHost到strlen(myurl)保存的是相对路径
        }

        //将主机信息保存到host中
        //此处将它置零，即它所指向的内容里面已经分离出了相对路径，剩下的为host信
息(从myurl到pHost地址段存放的是HOST)
        *pHost = '\0';
        strcpy(host,myurl);

        //设置socket参数

        if(-1 == (cfd = socket(AF_INET,SOCK_STREAM,0)))
        {
                printf("create socket failed of client!\n");
                exit(-1);
        }
        printf("create socket success of client!\n");

        pURL = gethostbyname(host);//将上面获得的主机信息通过域名解析函数获得域>名信息

        //设置IP地址结构
        bzero(&cadd,sizeof(struct sockaddr_in));
        cadd.sin_family = AF_INET;
        cadd.sin_addr.s_addr = *((unsigned long*)pURL->h_addr_list[0]);
        cadd.sin_port = htons(80);

        //向WEB服务器发送URL信息
        memset(request,0,BUFSIZE);
        strcat(request,"GET ");
        strcat(request,GET);
        strcat(request," HTTP/1.1\r\n");//至此为http请求行的信息

        strcat(request,"Accept: text/html, image/jpeg, image/png, vedio/x-mng, text/*, image/*, */*\r\n");
        strcat(request,"Accept-Lauguage: zh-cn\r\n");
        strcat(request,"Accept-Encoding: x-gzip, x-deflate, gzip, deflat\r\n");
        strcat(request,"Accept-charset: utf-8, utf-8; q=0.5, *; q=0.5\r\n");
        strcat(request,"HOST: ");
        strcat(request,host);
        strcat(request,"\r\n");
        //strcat(request,"Content-Type: text/html\r\n");
        //strcat(request,"Content-Length: 1024\r\n");
        strcat(request,"Connection: Keep-Alive\r\n");
        strcat(request,"Cache-Control: no-cache\r\n\r\n");

        //连接服务器
        int cc;
        if(-1 == (cc = connect(cfd,(struct sockaddr*)&cadd,(socklen_t)sizeof(cadd))))
        {
                printf("connect failed of client!\n");
                exit(1);
        }
        printf("connect success!\n");

        //向服务器发送url请求的request
        int cs;
        if(-1 == (cs = send(cfd,request,strlen(request),0)))
        {
                printf("向服务器发送请求的request失败!\n");
                exit(1);
        }
        printf("发送成功,发送的字节数:%d\n",cs);

        //将http请求信息写入文件hPage
        int chfd;
        if(-1 == (chfd = open("hPage",O_RDWR|O_CREAT|O_TRUNC,0766)))
        {
                printf("open or create hPage failed!\n");
                exit(1);
        }
        printf("open or create success!\n");


        int chf;
        if(-1 == (chf = write(chfd,request,strlen(request))))
        {
                perror("hPage写入请求信息失败!\n");
                exit(1);
        }
        else if(chf == 0)
        {
                printf("hPage写入请求信息字节数为0!\n");
        }
        printf("hPage写入了请求信息:%d字节\n",chf);


        //客户端接收服务器的返回信息
        memset(text,0,BUFSIZE);
        int cr;
        if(-1 == (cr = recv(cfd,text,BUFSIZE,0)))
        {
                printf("recieve failed!\n");
                exit(1);
        }
        else
        {
                printf("receive succecc!\n");
                int cofd;
                for(;;)
                {
                        //创建一个文件mPage用于保存网页的主要信息

                        if(-1 == (cofd = open("mPage.html",O_RDWR|O_CREAT|O_TRUNC,0766)))
                        {
                                perror("open or create mPage fialed!\n");
                                exit(1);
                        }


                        //将网页的主要内容(text)写入mPage中
                        int cf;
                        if(-1 == (cf = write(cofd,text,strlen(text))))
                        {
                                perror("mPage写入主页信息失败!\n");
                                break;
                        }
                        else if(cf == 0)
                        {
                                printf("mPage写入主页信息字节数为0!\n");
                                break;

                        }
                        else
                        {
                                printf("mPage写入了主页信息:%d字节\n",cf);
                                break;
                        }


                        //将text清空,方便接受其他网页信息
                        memset(text,0,BUFSIZE);

                        //关闭文件描述符
                        //close(chfd);
                        close(cofd);
                }
        }

        //free(BUFSIZE);
        close(cfd);
}
int main(int argc,char* argv[])
{
        if(argc<2)
        {
                printf("用法:%c url网页网址\n",argv[0]);
                exit(1);
        }
        geturl(argv[1]);
        return 0;

}

[VajraPrajnaparamita]

要解析HTTP头中的content-length，再接收完HTTP头后继续接收content-length，两者之间有\r\n，所以只接收完HTTP头就退出了。

[慕长生]

引用 1 楼 Tengguanghua 的回复:

要解析HTTP头中的content-length，再接收完HTTP头后继续接收content-length，两者之间有\r\n，所以只接收完HTTP头就退出了。

我的HTTP头总写的不对，总在接收recv的时候阻塞很长时间，然后返回10054错误