[C]获取网页源码|Get Webpage data

Jerry小坏

by 努力喵

1. 
   
2. #include <stdio.h>
   
3. #include <string.h>
   
4. #include <stdlib.h>
   
5. #include <winsock2.h>
   
6. 
   
7. #pragma comment(lib, "ws2_32.lib")
   
8. 
   
9. 
   
10. int geturl(char *url)
    
11. {
    
12.     /****************解析URL，解析资源名、主机名********************/
    
13.     const char *parseptr1;
    
14.     const char *parseptr2;
    
15.     char host[BUFSIZ];
    
16.     char resource[BUFSIZ];
    
17.     int len, i;
    
18.    
    
19.     parseptr2 = url;
    
20.    
    
21.     parseptr1 = strstr(parseptr2, "http://");
    
22.     if(NULL == parseptr1)           //解析用户输入URL形式如[]"www.baidu.com" 情况
    
23.     {
    
24.         parseptr1 = strchr(parseptr2, '/');
    
25.         len = parseptr1 - parseptr2;
    
26.         if(NULL == parseptr1) //解析主机、资源名[]
    
27.         {
    
28.             strcpy(host, parseptr2);
    
29.             strcpy(resource, "/");
    
30.         }
    
31.         else     //解析用户输入URL形式如[]"www.baidu.com/xxx"情况
    
32.         {
    
33.             for(i = 0; i < len; i++)
    
34.             {
    
35.                 host = parseptr2;//解析主机名[]
    
36.             }
    
37.             host[len] = '\0';
    
38.             for(i = 0; i < len; i++)
    
39.             {
    
40.                 parseptr2++;
    
41.             }
    
42.             strcpy(resource, parseptr2);//解析资源名[]
    
43.         }
    
44.         printf("host: %s\nresouce: %s\n", host, resource);
    
45.     }
    
46.     else
    
47.     {
    
48.         parseptr1 = strchr(parseptr2, ':');  //解析用户输入URL形式如[]"http://www.baidu.com"情况
    
49.         len = parseptr1 - parseptr2;
    
50.         printf("protocol: ");   //解析协议[]
    
51.         for(i = 0; i < len; i++)
    
52.         {
    
53.             printf("%c", parseptr2);
    
54.         }
    
55.         for(i = 0; i < 3; i++)
    
56.         {
    
57.             parseptr1++;
    
58.         }
    
59.         parseptr2 = parseptr1;
    
60.         parseptr1 = strchr(parseptr2, '/');
    
61.         len = parseptr1 - parseptr2;
    
62.         if(NULL == parseptr1)
    
63.         {
    
64.             strcpy(host, parseptr2);     //解析主机名[]
    
65.             strcpy(resource, "/");       //解析资源名[]
    
66.         }
    
67.         else   //解析用户输入URL形式如[]"http://www.baidu.com/xxx.."情况
    
68.         {
    
69.             for(i = 0; i < len; i++)
    
70.             {
    
71.                 host = parseptr2;
    
72.             }
    
73.             host[len] = '\0';
    
74.             parseptr2 = parseptr1;
    
75.             strcpy(resource, parseptr2);
    
76.         }
    
77.         
    
78.         printf("\nhost: %s\nresource: %s\n", host, resource);
    
79.     }
    
80.    
    
81.     /*****************创建socket************/
    
82.     //初始化套接字[]
    
83.     WSADATA wsaData;
    
84.     WSAStartup(MAKEWORD(2,2), &wsaData);
    
85.    
    
86.     //创建套接字[]
    
87.     SOCKET sock = socket(AF_INET, SOCK_STREAM, IPPROTO_TCP);
    
88.     if(sock == INVALID_SOCKET)
    
89.     {
    
90.         printf("Failed socket().\n");
    
91.         WSACleanup();
    
92.         return 0;
    
93.     }
    
94.    
    
95.     //设置socket参数[]
    
96.     struct sockaddr_in sockAddr;
    
97.     memset(&sockAddr, 0, sizeof(sockAddr));
    
98.     sockAddr.sin_family = AF_INET;
    
99.     sockAddr.sin_port = htons(80);
    
100.    
     
101.     //获取主机名和地址信息[]
     
102.     struct hostent *hp = gethostbyname(host);
     
103.     if(hp == NULL)
     
104.     {
     
105.         printf("Can not find host address.\n");
     
106.         return 0;
     
107.     }
     
108.     sockAddr.sin_addr.s_addr = *((unsigned long *)hp->h_addr);
     
109.    
     
110.     //连接到服务器[]
     
111.     if(connect(sock, (SOCKADDR *)&sockAddr, sizeof(sockAddr)) == -1)
     
112.     {
     
113.         printf("Failed connect().\n");
     
114.         WSACleanup();
     
115.         return 0;
     
116.     }
     
117.    
     
118.    
     
119.     /****************与服务器通信，收发数据[]***************/
     
120.     //准备发送数据[]
     
121.     char request[BUFSIZ] = "";
     
122.     //request = "GET " + resource + " HTTP/1.1\r\nHost:" + host + "\r\nConnection:Close\r\n\r\n";
     
123.     strcat(request, "GET ");
     
124.     strcat(request, resource);
     
125.     strcat(request, " HTTP/1.1\r\nHost:");
     
126.     strcat(request, host);
     
127.     strcat(request, "\r\nConnection:Close\r\n\r\n");
     
128.    
     
129.     //发送数据[]
     
130.     if(SOCKET_ERROR==send(sock, request, sizeof(request), 0))
     
131.     {
     
132.         printf("Send error.\n");
     
133.         closesocket(sock);
     
134.         return 0;
     
135.     }
     
136.    
     
137.     //接收数据[]
     
138.     static char pageBuf[BUFSIZ];
     
139.     printf("Read: ");
     
140.     int ret = 1;
     
141.     while(ret > 0)
     
142.     {
     
143.         ret = recv(sock, pageBuf, BUFSIZ, 0);
     
144.         printf("%s", pageBuf);
     
145.         strnset(pageBuf, '\0', BUFSIZ);
     
146.     }
     
147.    
     
148.     closesocket(sock);
     
149.     WSACleanup();
     
150.     return 0;
     
151. }
     
152. 
     
153. int main(int argc, char *argv[])
     
154. {
     
155.     char url[256];
     
156.     puts("Enter URL:");
     
157.     scanf("%s", url);
     
158.     geturl(url);
     
159.     return 0;
     
160. }
     

复制代码