这一节应该是聊天程序的最后一节了，现在回顾我们的聊天程序，看起来还有很多功能没有实现，但是不管怎么说，都还是不错的。这一节我们将讲多服务器问题(高大上的说法就是负载问题了。)至于聊天程序的文件发送(也即二进制文件发送例如图片)和单点登陆(就是多加一个数组fd_L[],用来记录是否已经登陆过了。)，这些问题就不讨论了。
支持多服务器实现负载问题的聊天程序
今天才知道原来我们一直使用的select来处理IO多路复用的这个函数最多只能有1024个连接，因为内部实现里面的数组就是只有1024，多了不行。什么？一个准备上万人用的聊天程序就只能1000个人？怎么可能，作为强大的服务器，肯定还有其他可以解决的办法，系统提供了一个poll和epoll等函数用来处理这个问题。还有一种办法就是创建多进程或多线程，不同的进程和线程中用一个select，就可以实现1024个以上的连接。所以只要判断conn_amount的个数如果大于1024那么就创建一个进程(线程)来继续接收更多的连接。
可是我们今天要实现的是多个服务器，其原理跟多进程是一样的。
程序的运行是这样的。server2和server3到Server1中注册，表示对应的服务器可以使用，然后就是各个客户端了，首先Client1发送请求通讯连接到Server1，然后由Server1发送一个可以使用的服务器(Server2或Server3)IP地址和端口给Client1，再然后由Client1向获取到的IP和端口的服务器发送连接请求。假如是连接到Server2，就可以建立通讯了。同理Client2，3，4，5都是这样建立到Server2，Server3的连接。这样5个客户端就可以分发到两个服务器了。至于分配的方法，就可以自己定义了，可以是随机分配，或者存到数据库中，如果是存到数据库中的话，那么是不是很像群功能呢？而且群里的人还是固定的。如果像上图，如何使Client1和Client4进行通讯的呢？可以判断Client是否在Server2中，如果不在就由Server2对数据转发到Server3，再由Server3发送到Client4。这样就可以了。
不过我们这一节就没有完成那么多的功能，只是实现Client1间接链接到Server2，Client3间接连接到Server2，然后让Client1与Client3通讯。其他的服务器之间通讯就不实现了。
好了废话不多说，代码走起。
client.c 代码修改如下
...
15 struct user
16 {
... 19 };
20
21 /*下面增加多服务器代码*/
22 struct Addr
23 {
24 char host[64];
25 int port;
26 };
27
28 int query_addr(struct Addr *paddr,char *phost,int port)
29 {
30 int sockfd;
31 struct Addr addr;
32 struct hostent * host;
33 struct sockaddr_in servAddr;
34 int size;
35 host=gethostbyname(phost);
36 if(host==NULL)
37 {
38 perror("host 为空");
39 exit(-1);
40 }
41
42 if((sockfd=socket(AF_INET,SOCK_STREAM,0))==-1)
43 {
44 perror("socket 失败");
45 }
46
47 servAddr.sin_family=AF_INET;
48 servAddr.sin_port=htons(port);
49 servAddr.sin_addr=*((struct in_addr *)host->h_addr);
50 bzero(&(servAddr.sin_zero),8);
51
52 if(connect(sockfd,(struct sockaddr *)&servAddr,sizeof(struct sockaddr_in))==-1)
53 {
54 perror("connect 失败");
55 exit(-1);
56 }
57 memset(paddr,0,sizeof(struct Addr));
58 size=recv(sockfd,(char *)paddr,sizeof(struct Addr),0);
59
60 return 0;
61 }
62
63 int main(int argc,char *argv[])
64 {
... 74 struct Addr addr;
75
76
77 if(argc != 5)
78 {
79 perror("use: ./client [hostname] [prot] [username] [password]");
80 exit(-1);
81 }
82 query_addr(&addr,argv[1],atoi(argv[2]));
83 printf("从服务器获取到的IP:%s\n\t\t端口:%d\n",addr.host,addr.port);
84 strcpy(use.name,argv[3]);
85 strcpy(use.pwd,argv[4]);
86
87 host=gethostbyname(addr.host);
...
104 servAddr.sin_family=AF_INET;
105 servAddr.sin_port=htons(addr.port);
106 servAddr.sin_addr=*((struct in_addr *)host->h_addr);
107 //servAddr.sin_addr.s_addr=inet_addr("127.0.0.1");
108 bzero(&(servAddr.sin_zero),8);
109
110 /*connect the socket*/
... ...
168 close(sockfd);
169 //kill(0,SIGKILL);//0表示同一进程组的进程
170
171 return 0;
172 }
这次增加了一个结构体Addr用来保存服务器的IP地址和端口号的。命令行参数填写的是super-server的IP地址和端口。然后调用query_addr函数，获取从super-server返回来的当前可用的服务器的IP地址和端口。然后在进行通讯。
增加一个super-server.c文件
1 #include <stdio.h>
2 #include <stdlib.h>
3 #include <errno.h>
4 #include <string.h>
5 #include <netdb.h>
6 #include <sys/types.h>
7 #include <sys/socket.h>
8 #include <sys/time.h>
9 #include <sys/un.h>
10 #include <sys/ioctl.h>
11 #include <sys/wait.h>
12 #include <sys/select.h>
13 #include <netinet/in.h>
14 #include <arpa/inet.h>
15 #include <unistd.h>
16 #include <time.h>
17
18
19 #define SERVER_PORT 12138
20 #define BACKLOG 20
21 #define MAX_CON_NO 10
22 #define MAX_DATA_SIZE 4096
23
24 #define MAX_ADDR 64
25 struct Addr
26 {
27 char host[64];
28 int port;
29 };
30
31 struct AddrList //保存所有可用的服务器IP地址和端口，flag表示该地址是否可用，因为服务器可能中途断开了。
32 {
33 int flag;
34 struct Addr addr;
35 };
36
37
38 int main(int argc,char *argv[])
39 {
40 struct sockaddr_in clientSockaddr;
41 int clientfd;
42 char sendBuf[MAX_DATA_SIZE];
43 int sendSize;
44 int sockfd;
45 int on;
46 int sinSize;
47 struct Addr addr;
48 struct AddrList addrlist[MAX_ADDR];
49 int addrlist_count=0;
50 int i,ilist;
51
52 memset(addrlist,0,sizeof(addrlist));
53
54 if((sockfd=socket(AF_INET,SOCK_STREAM,0))==-1)
55 {
56 perror("创建socket失败");
57 exit(-1);
58 }
59
60 clientSockaddr.sin_family=AF_INET;
61 clientSockaddr.sin_port=htons(SERVER_PORT); //super-server默认使用12138作为服务端口
62 clientSockaddr.sin_addr.s_addr=htonl(INADDR_ANY);
63 bzero(&(clientSockaddr.sin_zero),8);
64
65 setsockopt(sockfd,SOL_SOCKET,SO_REUSEADDR,&on,sizeof(on));
66
67 if(bind(sockfd,(struct sockaddr *)&clientSockaddr,sizeof(struct sockaddr))==-1)
68 {
69 perror("bind 失败");
70 exit(-1);
71 }
72
73 //backlog是积压值，对于TCP，通常建立连接时，会有3/4次握手的过程，一个client连接在完成了建立连接的握手过程，而还没有被应用层（应用程序）所响应时，这个连接被置于backlog队列中。当达到backlog队列以满时，client的连接请求会返回超时的错误。
74 if(listen(sockfd,5)==-1)
75 {
76 perror("listen 失败");
77 exit(-1);
78 }
79
80 sinSize=sizeof(clientSockaddr);
81
82 for(i=0;i<MAX_ADDR;i++)
83 {
84 addrlist[i].flag=0;
85 }
86
87 for(i=0;i<2;i++)//这里先固定成两个，可以修改成select然后实现动态增加服务器和减少服务器
88 {
89 //加入进来的服务器server
90 if((clientfd=accept(sockfd,(struct sockaddr *)&clientSockaddr,&sinSize))==-1)
91 {
92 perror("accept 失败");
93 exit(-1);
94 }
95
96 if((sendSize=recv(clientfd,(char *)&addr,sizeof(struct Addr),0))!=sizeof(struct Addr))
97 {
98 perror("send 失败");
99 exit(-1);
100 }
101 printf("server发过来的地址 %s:%d\n",addr.host,addr.port);
102 addrlist[i].flag=1;
103 strcpy(addrlist[i].addr.host,addr.host);//保存服务器ip/端口信息到super-server中
104 addrlist[i].addr.port=addr.port;
105 close(clientfd);
106 }
107 /*
108 addrlist[0].flag=1;
109 addrlist[1].flag=1;
110 strcpy(addrlist[0].addr.host,"localhost");
111 strcpy(addrlist[1].addr.host,"localhost");
112 addrlist[0].addr.port=12137;
113 addrlist[1].addr.port=12139;
114 */
115
116 ilist=0;
117 i=0;
118 while(1)
119 {
120 /*分配域名/IP和端口*//*分配的方法是轮询*/
121 i=ilist+1;
122 while(i<MAX_ADDR)
123 {
124 if(addrlist[i].flag!=0)
125 {
126 ilist=i;
127 break;
128 }
129 i++;
130 i=i%MAX_ADDR;
131 }
132
133 strcpy(addr.host,addrlist[ilist].addr.host);
134 addr.port=addrlist[ilist].addr.port;
135 printf("发送给客户端的id=%d 域名/IP:%s port:%d \n",ilist,addr.host,addr.port);
136
137 if((clientfd=accept(sockfd,(struct sockaddr *)&clientSockaddr,&sinSize))==-1)
138 {
139 perror("accept 失败");
140 exit(-1);
141 }
142
143 if((sendSize=send(clientfd,(char *)&addr,sizeof(struct Addr),0))!=sizeof(struct Addr))
144 {
145 perror("send 失败");
146 exit(-1);
147 }
148 close(clientfd);
149 }
150
151 return 0;
152 }
在第87行处是使用固定两台服务器server的，这个可以修改成select或poll等进行复用，实时监听是否有新的服务器server到来或者有服务器离开。这个select版本我就不写了，看了之前的博客内容就应该会写，如果还不会那就等Socket网络编程系列的另外一个程序了，由于程序代码越来越多，调试起来比较麻烦，讲解也不太好讲解，所以就准备出新的系列了。还希望多支持啊!╮(╯3╰)╭
第120行处，采用的分配服务器的方法是轮询。依靠生成环境的不同这里可以进行修改，比如是随机分配，依靠数据库用户表中的数据选择指定的服务器进行登陆(这个像不像玩游戏时那个分区啊，什么电信一区，网通二区。就是根据数据库判断的)。还有根据用户的IP获取用户所在的城市，然后进行服务器的分配的，以获得最佳连通效果。QQ群等等什么的都是差不多这样吧。我猜的！
最后一个代码是server.c
...
25 struct user
26 {
... 29 };
30
31 int MAX(int a,int b)
32 {
... 36 }
37
38 void print_time(char * ch,time_t *now)
39 {
... 43 }
44
45
46 int mysql_check_login(struct user su)
47 {
... 91 return 0;
92 }
93
94 //根据用户名返回该用户名在fd_A中的位置
95 //fd=-1,表示没有该用户 //fd>0 正常返回
96 int fd_ctoa(char fd_C[][32],char *ch)
97 {
...109 }
110
111 /*下面部分是多服务器增加的代码*/
112 struct Addr
113 {
114 char host[64];
115 int port;
116 };
117
118 int server_register(char *super_server_host,int super_server_port,struct Addr addr)
119 {
120 int sockfd;
121 struct hostent * host;
122 struct sockaddr_in servAddr;
123 int size;
124 host=gethostbyname(super_server_host);
125 if(host==NULL)
126 {
127 perror("host 为空");
128 exit(-1);
129 }
130
131 if((sockfd=socket(AF_INET,SOCK_STREAM,0))==-1)
132 {
133 perror("socket 失败");
134 }
135
136 servAddr.sin_family=AF_INET;
137 servAddr.sin_port=htons(super_server_port);
138 servAddr.sin_addr=*((struct in_addr *)host->h_addr);
139 bzero(&(servAddr.sin_zero),8);
140
141 if(connect(sockfd,(struct sockaddr *)&servAddr,sizeof(struct sockaddr_in))==-1)
142 {
143 perror("connect 失败");
144 exit(-1);
145 }
146
147 size=send(sockfd,(char *)&addr,sizeof(struct Addr),0);//传一个Addr信息过去
148
149 printf("连接到超级主机 %s:%d 上，本地打开地址 %s:%d\n",super_server_host,super_server_port,addr.host,addr.port);
150
151 return 0;
152 }
153
154
155
156 int main(int argc,char *argv[])
157 {
...177 struct Addr addr;
178
179
180 if(argc != 5)
181 {
182 printf("usage: ./server [super-server host] [super-server port] [local_host] [local port]\n");
183 exit(1);
184 }
185 strcpy(addr.host,argv[3]);//本机的IP或域名
186 addr.port=atoi(argv[4]);//本机的端口
187 server_register(argv[1],atoi(argv[2]),addr);//向super-server发送IP和端口，告诉super-server如果有client来连接，那就请把我的地址告诉它，让它来连接我。
188
...
197 /*init sockaddr_in*/
198 serverSockaddr.sin_family=AF_INET;
199 serverSockaddr.sin_port=htons(atoi(argv[4]));//改一下端口
200 serverSockaddr.sin_addr.s_addr=htonl(INADDR_ANY);
201 bzero(&(serverSockaddr.sin_zero),8);
202
203 setsockopt(sockfd,SOL_SOCKET,SO_REUSEADDR,&on,sizeof(on));
...
234 while(1)
235 {
236 FD_ZERO(&servfd);//清空所有server的fd
237 FD_ZERO(&recvfd);//清空所有client的fd
238 FD_SET(sockfd,&servfd);
239 //timeout.tv_sec=30;//可以减少判断的次数
240 switch(select(max_servfd+1,&servfd,NULL,NULL,&timeout))
241 {
...289 }
290 //FD_COPY(recvfd,servfd);
291 for(i=0;i<MAX_CON_NO;i++)//最大队列进行判断，优化的话，可以使用链表
292 {
...297 }
298
299 switch(select(max_recvfd+1,&recvfd,NULL,NULL,&timeout))
300 {
... ... 408 }//end-switch
409 }
410 return 0;
411 }
虽然我演示的时候所有的操作都是在一台机器上运行的。其实是可以多个机器同时协作运行的。修改185行处的IP就可以实现不同的机器了。
程序的makefile
1 main: 2 gcc client.c -o client 3 gcc server.c `mysql_config --cflags --libs` -o server 4 gcc super-server.c -o super-server
(No picture say a JB)接下来是程序运行时的截图。由于程序运行过程有点复杂，我们一步一步来。
首先，运行super-server ，运行的命令是 ./super-server 默认打开的是12138这个端口进行监听，用于处理服务器和客户端的连接问题。
然后就运行两个server程序，运行的命令分别是
./server localhost 12138 localhost 11111 ./server localhost 12138 localhost 22222
打开两个终端，分别输入，表示连接超级服务器super-server的12138端口，并且自己的服务器使用11111和22222进行监听。
运行后三者的截图如下
这样就两个服务器启动了，接下来是启动三个客户端，这样就能保证有两个是在同一个服务器中了，三者的运行命令分别如下
./client loclhost 12138 user1 123456 ./client loclhost 12138 user2 123456 ./client loclhost 12138 user3 123456
表示连接到超级服务器super-server的12138服务端口，使用用户名密码验证。运行后截图如下
从上图可以看到user1和user3是被分配到同一个服务器中去的。超级服务器中也实现了轮询的效果了。
最后一步了，就是看看以前写的聊天功能还在不在了
嗯，好了，由于client1和client3是在同一个服务器上，所以进行通讯是没有问题的，但是client2不在同一个服务器中，就通讯不了了。实现不同服务器上用户的通讯也不是很难，就是在服务器上增加一个服务器之间的转发功能就可以了。还有一个问题就是程序中为了方便，有很多地方没有进行合法性的判断，而且还有很多很多的BUG。
小结：经过9天，实现了一个小小的聊天程序，有群聊功能，私聊功能，用户验证功能，指令系统功能，数据库连接问题，服务器负载问题。虽然内容没有什么高大上，但是对于一个初学者来说，想想就有点小激动。
本系列Socket网络编程--聊天程序所有章节传送门如下:
Socket网络编程--聊天程序(1) http://www.cnblogs.com/wunaozai/p/3870156.html
Socket网络编程--聊天程序(2) http://www.cnblogs.com/wunaozai/p/3870194.html
Socket网络编程--聊天程序(3) http://www.cnblogs.com/wunaozai/p/3870258.html
Socket网络编程--聊天程序(4) http://www.cnblogs.com/wunaozai/p/3870338.html
Socket网络编程--聊天程序(5) http://www.cnblogs.com/wunaozai/p/3871563.html
Socket网络编程--聊天程序(6) http://www.cnblogs.com/wunaozai/p/3875506.html
Socket网络编程--聊天程序(7) http://www.cnblogs.com/wunaozai/p/3876134.html
Socket网络编程--聊天程序(8) http://www.cnblogs.com/wunaozai/p/3878374.html
Socket网络编程--聊天程序(9) http://www.cnblogs.com/wunaozai/p/3880462.html
所有开发过程中的代码: http://files.cnblogs.com/wunaozai/Socket-Chat.zip
因为每一个版本都是上一个版本的修改版，在学习的过程中，如果想知道这一小节增加了什么内容，可以用 vimdiff file1 file2 比较两个文件，就知道修改了哪些内容。
Socket网络编程--聊天程序(9)