马上注册,结交更多好友,享用更多功能,让你轻松玩转社区。
您需要 登录 才可以下载或查看,没有账号?立即注册
x
服务器,配景服务软件,后端开发,为软件客户端提供支持,数据支持,存储支持,数据中转
高并发要求,随着用户数目的增长,服务器的计划结构扩展,为更多用户提供服务器。
Web服务器(网页网站的后端都是web服务器),软件服务器(手机软件或者pc软件)。
开源服务器软件Apache,Nginx,用户配置即可使用,提供web服务器。
关于网页网站二点技术标准:共用协议(http https),超文本标记语言html,端标语共享使用http=80 https=443。
软件服务器,因不同软件不同功能,服务器的结构也不同,所以很难开源,因为并不适用其他软件。
后端开发的操作体系(服务器操作体系),Linux,Unix,window server,大多数都是控制台体系。
服务器集群:1.处理服务器(128核),2.图形处理器(GPU)渲染或图形盘算,3.数据库服务器 多版本数据库兼容。4.文件存储体系。
搭建集群的本钱比力高。
服务器的焦点使命,网络穿透。
服务器作为信息中转站,帮助所有用户转接数据,变更网络情况,用户重新毗连服务器,重新提交信息,服务器实时更新客户端的网络信息。
代理服务器
哀求与响应(Request/Response)一次交互。
代理服务器可以作为过滤层,摆设防火墙,防DOS攻击等等,隐藏主服务器。
横向扩展服务器硬件,分布式结构。分布式管理程序:资源共享,资源利用最大化,让每台处理机统一分配管理与调度,成为一个个体。
负载平衡概念:将大量的业务哀求匀称分发给n个处理单元。制止某些处理单元过载,制止某些处理单元长期闲置。
轮询分发(逐个分发)
根据处理单元的负载情况,决定如何分配。
心跳机制 Keep_alive
心跳测试,在一个时间段内,要通过心跳测试测试对端存活是否有效,有效保持毗连,无效断开毗连。
操作体系自带心跳机制(setsocketopt),这个心跳机制默认下要很久才能检测出对端是否断开。
如果一个毗连,一段时间没有交互,会被冷处理,通过间隔收发心跳包,让毗连保持活性,制止被冷处理。
单历程服务器
毗连部门,业务处理部门,协议解析部门。毗连部门和业务处理部门都是阻塞的,哀求时无法毗连,等待毗连时无法读取哀求。
单历程服务端,满意根本tcp毗连,完成简单的数据交互,对于体系时间的哀求和响应。
htons();将 16 位的短整数(如端标语)从主机字节顺序转换为网络字节顺序。
htonl();将 32 位整数从主机字节顺序转换为网络字节顺序。
INADDR_ANY,服务器将绑定到所有可用的网络接口上。这意味着服务器将接受任何网卡或接口上的毗连,而不限定于一个特定的 IP 地址。
bind()用于将一个套接字绑定到一个特定的地址和端口。绑定操作告诉操作体系,当有数据到达这个特定的 IP 地址和端口时,应该将数据交给这个套接字处理。
单历程阻塞
服务端:
- #include<stdio.h>
- #include<sys/fcntl.h>
- #include<sys/types.h>
- #include<sys/stat.h>
- #include<time.h>
- #include<string.h>
- #include<arpa/inet.h>
- #include<sys/socket.h>
- #include<unistd.h>
- #include<stdlib.h>
- int init_net()
- {
- int sock;
- struct sockaddr_in sockaddr;
- bzero(&sockaddr,sizeof(sockaddr));
- sockaddr.sin_family=AF_INET;
- sockaddr.sin_port=htons(1234);
- sockaddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((sock=socket(AF_INET,SOCK_STREAM,0))==-1)
- printf("socket error\n");
- else printf("socket ok\n");
- if((bind(sock,(struct sockaddr*)&sockaddr,sizeof(sockaddr)))==-1)
- {
- perror("bind error\n");
- }
- else printf("bind ok\n");
- listen(sock,128);
- return sock;
- }
- void mess_response(int so,struct sockaddr_in addr)
- {
- char s[1024];
- char c[16];
- bzero(c,16);
- bzero(s,1024);
- inet_ntop(AF_INET,&addr.sin_addr,c,16);
- sprintf(s,"hi %s\n",c);
- int t=send(so,s,strlen(s),MSG_NOSIGNAL);
- if(t<0)
- {
- perror("err");
- }
- return;
- }
- int recv_request(int sock)
- {
- char s[1024];
- char tim[1024];
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- int len;
- time_t tp;
- while((len=recv(sock,s,sizeof(s),0))>0)
- {
- s[strlen(s)-1]='\0';
- if(strncmp(s,"time",strlen(s))==0)
- {
- tp=time(NULL);
- ctime_r(&tp,tim);
- send(sock,tim,strlen(tim),MSG_NOSIGNAL);
- }
- else{
- send(sock,"try again",9,MSG_NOSIGNAL);
- }
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- }
- if(len==0)
- {
- printf("client sock %d its exiting...\n",sock);
- close(sock);
- }
- }
- int main()
- {
- int sock,csock;
- struct sockaddr_in sock_client;
- bzero(&sock_client,sizeof(sock_client));
- sock=init_net();
- printf("init ok\n");
- socklen_t socklen;
- while(1)
- {
- socklen=sizeof(sock_client);
- if(( csock=(accept(sock,(struct sockaddr*)&sock_client,&socklen)))==-1)
- perror("err\n");
- else{
- printf("accept success\n");
- }
- mess_response(csock,sock_client);
- recv_request(csock);
- }
- close(csock);
- close(sock);
- return 0;
- }
复制代码 客户端:
- #include<stdio.h>
- #include<unistd.h>
- #include<stdlib.h>
- #include<arpa/inet.h>
- #include<signal.h>
- #include<sys/socket.h>
- #include<sys/fcntl.h>
- #include<string.h>
- int main()
- {
- int sock;
- struct sockaddr_in serveraddr;
- serveraddr.sin_family=AF_INET;
- serveraddr.sin_port=htons(1234);
- inet_pton(AF_INET,"127.0.0.1",&serveraddr.sin_addr.s_addr);
- if((sock=socket(AF_INET,SOCK_STREAM,0))==-1)
- {
- printf("socket error\n");
- }
- else printf("socket success\n");
- if((connect(sock,(struct sockaddr*)&serveraddr,sizeof(serveraddr)))==-1)
- {
- printf("connect error\n");
- }
- else{
- printf("connect success\n");
- }
- char buff[1024];
- bzero(buff,1024);
- int r=recv(sock,buff,sizeof(buff),0);
- printf("%d\n",r);
- //if((recv(sock,buff,sizeof(buff),0))==-1)
- //{
- // perror("recv error\n");
- //}
- //else printf("recv ok\n");
- printf("%s\n",buff);
- bzero(buff,1024);
- while((fgets(buff,sizeof(buff),stdin))!=NULL)
- {
- send(sock,buff,strlen(buff),MSG_NOSIGNAL);
- bzero(buff,1024);
- recv(sock,buff,sizeof(buff),0);
- printf("%s\n",buff);
- }
- close(sock);
- return 0;
- }
复制代码
单历程非阻塞轮询模子
服务端:
- #include<stdio.h>
- #include<sys/fcntl.h>
- #include<sys/types.h>
- #include<sys/stat.h>
- #include<time.h>
- #include<string.h>
- #include<arpa/inet.h>
- #include<sys/socket.h>
- #include<unistd.h>
- #include<stdlib.h>
- #include<fcntl.h>
- #include<sys/types.h>
- #include<sys/stat.h>
- #include<errno.h>
- int clientsock[10000];
- int init_net();
- void mess_response(int,struct sockaddr_in);
- int recv_request(int);
- int start_server();
- #include<server.h>
- void mess_response(int so,struct sockaddr_in addr)
- {
- char s[1024];
- char c[16];
- bzero(c,16);
- bzero(s,1024);
- inet_ntop(AF_INET,&addr.sin_addr,c,16);
- sprintf(s,"hi %s\n",c);
- int t=send(so,s,strlen(s),MSG_NOSIGNAL);
- if(t<0)perror("err");
- return;
- }
- #include<server.h>
- int recv_request(int sock)
- {
- char s[1024];
- char tim[1024];
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- int len;
- time_t tp;
- int i=0;
- for(i;i<10000;i++)
- {
- if(clientsock[i]!=-1)
- {
- if((len=recv(clientsock[i],s,sizeof(s),MSG_DONTWAIT))>0)
- {
- s[strlen(s)-1]='\0';
- if(strncmp(s,"time",strlen(s))==0)
- {
- tp=time(NULL);
- ctime_r(&tp,tim);
- send(clientsock[i],tim,strlen(tim),MSG_NOSIGNAL);
- }
- else{
- send(clientsock[i],"try again",9,MSG_NOSIGNAL);
- }
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- }
- if(len==0)
- {
- printf("client sock %d its exiting...\n",sock);
- close(clientsock[i]);
- clientsock[i]=-1;
- }
- }
- }
- }
- #include<server.h>
- int server_start()
- {
- int sock,csock;
- struct sockaddr_in sock_client;
- int i;
- for(i=0;i<10000;i++)
- clientsock[i]=-1;
- bzero(&sock_client,sizeof(sock_client));
- sock=init_net();
- printf("init ok\n");
- int flag;
- fcntl(sock,F_GETFL,&flag);
- flag|=O_NONBLOCK;
- fcntl(sock,F_SETFL,flag);
- socklen_t socklen;
- while(1)
- {
- socklen=sizeof(sock_client);
- if(( csock=(accept(sock,(struct sockaddr*)&sock_client,&socklen)))>0)
- {
- for(i=0;i<10000;i++)
- {
- if(clientsock[i]==-1)
- {
- clientsock[i]=csock;
- break;
- }
- }
- mess_response(csock,sock_client);
- printf("accept success\n");
- }
- if(csock==-1)
- {
- if(errno==EAGAIN)
- recv_request(csock);
- else perror("accept call failed\n");
- }
- }
- close(csock);
- close(sock);
- }
- #include<server.h>
- int init_net()
- {
- int sock;
- struct sockaddr_in sockaddr;
- bzero(&sockaddr,sizeof(sockaddr));
- sockaddr.sin_family=AF_INET;
- sockaddr.sin_port=htons(1234);
- sockaddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((sock=socket(AF_INET,SOCK_STREAM,0))==-1)
- printf("socket error\n");
- else printf("socket ok\n");
- if((bind(sock,(struct sockaddr*)&sockaddr,sizeof(sockaddr)))==-1)
- {perror("bind error\n");}
- else printf("bind ok\n");
- listen(sock,128);
- return sock;
- }
- #include<server.h>
- int main()
- {
- server_start();
- return 0;
- }
复制代码

单历程服务端只符合简易情况下的需求。
单历程接纳非阻塞瓜代执行的策略让等待毗连和读取处理瓜代执行,但是如果服务器长时间为某个客户端处理业务,导致无法建立新毗连处理其他人的数据。
并发服务器-多历程服务器
多历程服务器是具备并发处理本领的服务器模子,可以并发毗连并发处理,为若干客户端提供服务。并发数目取决于历程数目,频繁创建和烧毁历程有庞大的体系开销。
多历程模子中有多个处理单元,为多对多模子。多历程模子中,子历程随客户端持续,链接乐成创建,客户端退出则子历程退出。僵尸历程接纳,无论是阻塞接纳还是非阻塞,都会影响毗连,所以我们让线程负责接纳。

- #include<stdio.h>
- #include<stdlib.h>
- #include<sys/types.h>
- #include<sys/stat.h>
- #include<time.h>
- #include<string.h>
- #include<arpa/inet.h>
- #include<sys/socket.h>
- #include<fcntl.h>
- #include<sys/types.h>
- #include<sys/stat.h>
- #include<errno.h>
- #include<pthread.h>
- #include<signal.h>
- #include<sys/wait.h>
- int init_net();
- void mess_response(int,struct sockaddr_in);
- int recv_request(int);
- int start_server();
- void* thread_wait(void* arg);
- void sig_wait(int n);
- #include<server.h>
- int init_net()
- {
- int sock;
- struct sockaddr_in sockaddr;
- bzero(&sockaddr,sizeof(sockaddr));
- sockaddr.sin_family=AF_INET;
- sockaddr.sin_port=htons(1234);
- sockaddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((sock=socket(AF_INET,SOCK_STREAM,0))==-1)
- printf("socket error\n");
- else printf("socket ok\n");
- if((bind(sock,(struct sockaddr*)&sockaddr,sizeof(sockaddr)))==-1)
- {perror("bind error\n");}
- else printf("bind ok\n");
- listen(sock,128);
- return sock;
- }
- #include<server.h>
- void mess_response(int so,struct sockaddr_in addr)
- {
- char s[1024];
- char c[16];
- bzero(c,16);
- bzero(s,1024);
- inet_ntop(AF_INET,&addr.sin_addr,c,16);
- sprintf(s,"hi %s\n",c);
- int t=send(so,s,strlen(s),MSG_NOSIGNAL);
- if(t<0)perror("err");
- return;
- }
- #include<server.h>
- int recv_request(int sock)
- {
- char s[1024];
- char tim[1024];
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- int len;
- time_t tp;
- while((len=recv(sock,s,sizeof(s),0))>0)
- {
- s[strlen(s)-1]='\0';
- if(strncmp(s,"time",strlen(s))==0)
- {
- tp=time(NULL);
- ctime_r(&tp,tim);
- send(sock,tim,strlen(tim),MSG_NOSIGNAL);
- }
- else{
- send(sock,"try again",9,MSG_NOSIGNAL);
- }
- bzero(s,sizeof(s));
- bzero(tim,sizeof(tim));
- }
- printf("client sock %d ,child process %d its exiting...\n",sock,getpid());
- close(sock);
- exit(sock);
- return 0;
- }
- #include<server.h>
- void sig_wait(int n)
- {
- pid_t zpid;
- while((zpid=waitpid(-1,NULL,WNOHANG))!=-1)
- {
- if(zpid>0){
- printf("thread wait success,zpid %d\n",zpid);
- }
- }}
- #include<server.h>
- void* thread_wait(void* arg)
- {
- struct sigaction act,oact;
- pthread_detach(pthread_self());
- act.sa_handler=sig_wait;
- act.sa_flags=0;
- sigemptyset(&act.sa_mask);
- sigaction(SIGCHLD,&act,&oact);
- sigprocmask(SIG_SETMASK,&act.sa_mask,NULL);
- printf("wait thread 0x%x waiting..\n",(unsigned int)pthread_self());
- while(1)
- sleep(1);
- pthread_exit(NULL);
- }
- #include<server.h>
- int server_start()
- {
- int sock,csock;
- struct sockaddr_in sock_client;
- int i;
- bzero(&sock_client,sizeof(sock_client));
- sock=init_net();
- printf("init ok\n");
- socklen_t socklen;
- sigset_t set,oset;
- sigemptyset(&set);
- sigaddset(&set,SIGCHLD);
- sigprocmask(SIG_SETMASK,&set,&oset);
- pthread_t tid;
- int err;
- if((err=pthread_create(&tid,NULL,thread_wait,NULL))>0){
- printf("wait thread create err:%s\n",strerror(err));
- exit(0);
- }
- pid_t pid;
- while(1)
- {
- socklen=sizeof(sock_client);
- if(( csock=(accept(sock,(struct sockaddr*)&sock_client,&socklen)))>0)
- {
- pid=fork();
- if(pid>0)
- {
- mess_response(csock,sock_client);
- printf("accept success\n");
- }
- else if(pid==0)
- {
- recv_request(csock);
- }
- else exit(0);
- }
- else {
- printf("accept error\n");
- }
- }
- close(sock);
- return 0;
- }
- #include<server.h>
- int main()
- {
- server_start();
- return 0;
- }
复制代码
多历程稳定性强,因为每个处理单元是一个历程,一个历程异常退出不会影响其他历程。
并发服务器-多线程服务器
稳定性较差,线程瓦解可能影响其他线程,但是开销小轻量级。(线程安全问题)
并发量取决于线程数目。
频繁创建烧毁历程有庞大的体系开销。
和多历程差不多。
多路IO复用服务器
IO复用技术又名多路IO转接技术,可以帮助开发者监听大量的sock。
sock监听技术,io监听技术。
select模子
写的是单历程的。

#include<sys/select.h>//头文件
fd_set set;//监听集合类型
FD_ZERO(&set);//初始化监听集合,将位码初始化为0
FD_SET(int sockfd,&set);//将sockfd在集合中对应的位设置成1
FD_CLR(int sockfd,&sest);//将sockfd在集合中的对应位设置为0
int code=FD_ISSET(int sock,&set);//返回sockfd在集合中位码
int ready=select(maxfd+1,fd_set* rd,fd_set* wr,fd_set* err,timeval* timeout);//监听函数,监听事件选择以集合为单位,批处理,timeout=NULL,阻塞监听,监听集合对应文件描述符表,所以在设置监听数目时要考虑设备描述符。
struct timeval* val; val.secons=0; val.ms=0;//如果要非阻塞使用select,需要定义时间结构体并将时间成员初始化成0,如果需要select定时阻塞,用户自行设置时间在结构体中。
- #include<unistd.h>
- #include<stdlib.h>
- #include<signal.h>
- #include<time.h>
- #include<sys/select.h>
- #include<sys/socket.h>
- #include<string.h>
- #include<arpa/inet.h>
- int main()
- {
- //sock的就绪数量
- int socknum;
- //存储客户端sock
- int sockarry[1020];
- //最大的描述符
- int maxfd;
- int ssock;
- int csock;
- //初始化客户端sock数组
- int i;
- for(i=0;i<1020;i++)
- {
- sockarry[i]=-1;
- }
- //初始化网络
- struct sockaddr_in saddr,caddr;
- saddr.sin_family=AF_INET;
- saddr.sin_port=htons(1234);
- saddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((ssock=socket(AF_INET,SOCK_STREAM,0))==-1)
- {
- perror("sock init error\n");
- }
- bind(ssock,(struct sockaddr*)&saddr,sizeof(saddr));
- listen(ssock,128);
- maxfd=ssock;
- //监听集合
- fd_set set,oset;
- //初始化监听集合
- FD_ZERO(&set);
- FD_SET(ssock,&set);
- socklen_t addrlen;
- //初次连接回复
- char response[1500];
- char cip[16];
- char buff[1024];
- bzero(response,1500);
- bzero(cip,16);
- bzero(buff,1024);
- //时间
- char timebuff[1024];
- time_t tp;
- int len;
- printf("server running\n");
- //轮询监听
- while(1)
- {
- oset=set;
- if((socknum=select(maxfd+1,&oset,NULL,NULL,NULL))==-1)
- perror("select() failed");
- while(socknum)
- {
- //是severfd
- if(FD_ISSET(ssock,&oset))
- {
- addrlen=sizeof(caddr);
- csock=accept(ssock,(struct sockaddr*)&caddr,&addrlen);
- //首次连接成功返回信息
- inet_ntop(AF_INET,&caddr.sin_addr.s_addr,cip,16);
- sprintf(response,"hi %s",cip);
- send(csock,response,strlen(response),MSG_NOSIGNAL);
- bzero(response,sizeof(response));
- //设置监听,存入数组
- FD_SET(csock,&set);
- for( i=0;i<1020;i++)
- {
- if(sockarry[i]==-1)
- {
- sockarry[i]=csock;
- break;
- }
- }
- //更新最大sockfd
- if(maxfd<csock)maxfd=csock;
- //将oset设置为0
- FD_CLR(ssock,&oset);
- }
- //是clientfd
- else
- {
- i=0;
- //遍历sockarry数组,查找就绪的csock并处理
- for(i;i<1020;i++)
- {
- if(sockarry[i]!=-1)
- if(FD_ISSET(sockarry[i],&oset))
- {
- //读取处理数组
- if((len=recv(sockarry[i],buff,sizeof(buff),0))>0)
- {
- buff[strlen(buff)-1]='\0';
- if((strcmp(buff,"time"))==0)
- {
- bzero(timebuff,1024);
- tp=time(NULL);
- ctime_r(&tp,timebuff);
- send(sockarry[i],timebuff,strlen(timebuff),MSG_NOSIGNAL);
- }
- else{
- send(sockarry[i],"try again",10,MSG_NOSIGNAL);
- }
- bzero(buff,1024);
- FD_CLR(sockarry[i],&oset);
- }
- if(len==0)
- {
- //客户端退出,在监听中删除,在组中删除
- FD_CLR(sockarry[i],&set);
- FD_CLR(sockarry[i],&oset);
- close(sockarry[i]);
- sockarry[i]=-1;
- }
- break;
- }
- }
- }
- socknum--;
- }
- }
- close(ssock);
- return 0;
- }
复制代码 长处:
1.使用比力简单,相识监听集合以及IO复用机制即可使用,帮助用户完成少量sock的网络事件监听
2.跨平台兼容性比力好,在各个体系语言均有select支持
3.select支持微妙级定时,可以满意一些特定需求
缺点:
1.select无法满意大监听需求,最大监听数1024
2.轮询监听,随着轮询数目的增大,io处理性能呈线性下降
3.select监听到停当后只返回停当的数目,需要用户自行遍历查找停当的sock
4.需要用户举行传入传出分离设置
5.随着select的持续使用,会有庞大的开销和挂载开销
6.监听数目比力少,其次设置监听不机动,无法针对不同的sock设置不同的监听
poll模子
长处:
1.监听事件的种类丰富,对监听与停当举行了传入传出分离,无需用户分离
2.poll支持用户自定义长度结构体数组作为集合,突破了1024限定(轮询)
缺点:
1.轮询问题
2.拷贝开销挂载开销
3.只返回停当需要用户自行遍历查找停当的sock
4.只支持毫秒级别定时
5.在某些特定的Linux版本才可以使用
struct pollfd listen_array[4096];//监听数组,还可以帮助用户存储sock
listen_array[0].fd=sock;//如果需要监听则设置为某个sock,取消监听设置为-1
listen_arry[0].events=POLLIN|POLLOUT|POLLERR;//设置要监听的事件
listen_arry[0],revents;//如果监听的sock停当,体系将停当事件传到revents中
int readycode=poll(listen_array);//timeout -1阻塞 0非阻塞 >0定时阻塞
- #include<stdio.h>
- #include<unistd.h>
- #include<stdlib.h>
- #include<signal.h>
- #include<time.h>
- #include<sys/select.h>
- #include<sys/socket.h>
- #include<poll.h>
- #include<string.h>
- #include<arpa/inet.h>
- int main()
- {
- //sock的就绪数量
- int socknum;
- //存储客户端sock
- struct pollfd sockarry[4096];
- int ssock;
- int csock;
- //初始化客户端sock数组
- int i;
- for(i=0;i<4096;i++)
- {
- sockarry[i].fd=-1;
- sockarry[i].events=POLLIN;
- }
- //初始化网络
- struct sockaddr_in saddr,caddr;
- saddr.sin_family=AF_INET;
- saddr.sin_port=htons(1234);
- saddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((ssock=socket(AF_INET,SOCK_STREAM,0))==-1)
- {
- perror("sock init error\n");
- }
- bind(ssock,(struct sockaddr*)&saddr,sizeof(saddr));
- listen(ssock,128);
- //监听集合
- sockarry[0].fd=ssock;
- socklen_t addrlen;
- //初次连接回复
- char response[1500];
- char cip[16];
- char buff[1024];
- bzero(response,1500);
- bzero(cip,16);
- bzero(buff,1024);
- //时间
- char timebuff[1024];
- time_t tp;
- int len;
- printf("server running\n");
- //轮询监听
- while(1)
- {
- if((socknum=poll(sockarry,4096,-1))==-1)
- perror("poll() failed");
- while(socknum)
- {
- //是severfd
- if(sockarry[0].revents==POLLIN)
- {
- addrlen=sizeof(caddr);
- csock=accept(ssock,(struct sockaddr*)&caddr,&addrlen);
- //首次连接成功返回信息
- inet_ntop(AF_INET,&caddr.sin_addr.s_addr,cip,16);
- sprintf(response,"hi %s",cip);
- send(csock,response,strlen(response),MSG_NOSIGNAL);
- bzero(response,sizeof(response));
- //设置监听,存入数组
- for( i=1;i<4096;i++)
- {
- if(sockarry[i].fd==-1)
- {
- sockarry[i].fd=csock;
- break;
- }
- }
- //就绪处理
- sockarry[0].revents=0;
- }
- //是clientfd
- else
- {
- i=1;
- //遍历sockarry数组,查找就绪的csock并处理
- for(i;i<4096;i++)
- {
- if(sockarry[i].fd!=-1)
- if(sockarry[i].revents==POLLIN)
- {
- //读取处理数组
- if((len=recv(sockarry[i].fd,buff,sizeof(buff),0))>0)
- {
- buff[strlen(buff)-1]='\0';
- if((strcmp(buff,"time"))==0)
- {
- bzero(timebuff,1024);
- tp=time(NULL);
- ctime_r(&tp,timebuff);
- send(sockarry[i].fd,timebuff,strlen(timebuff),MSG_NOSIGNAL);
- }
- else{
- send(sockarry[i].fd,"try again",10,MSG_NOSIGNAL);
- }
- bzero(buff,1024);
- sockarry[i].revents=0;
- }
- if(len==0)
- {
- //客户端退出,在监听中删除,在组中删除
- close(sockarry[i].fd);
- sockarry[i].fd=-1;
- sockarry[i].revents=0;
- }
- break;
- }
- }
- }
- socknum--;
- }
- }
- close(ssock);
- return 0;
- }
复制代码 用ulimit -a检察一下,如果小于4096,那么创建的sockarray会报错。

epoll模子
整合了select和poll的优势,而且优化了问题
epoll使用红黑树作为监听集合(监听树)
int epfd=epoll_create(int treeMax);//创建监听树,参数为巨细,返回值指向树的描述符
struct epolevent node;
node.data.fd=sock;
node.events=EPOLLIN|EPOLLOUT|EPOLLERR;
epoll_ctl(epfd,EPOLL_CTL_ADD,sock,struct epollevent* node);//添加节点
epoll_ctl(epfd,EPOLL_CTL_DEL,sock,NULL);//删除节点
epoll_ctl(epfd,EPOLL_CTL_MOD,sock,&node);//修改只能监听的事件,无法修改sock
struct epollevent ready_arry[Max];//用户空间定义停当队列(数组)
int readynode=epoll_wait(epfd,ready_arry,Max,-1);//Max停当最大数,树巨细=停当队列巨细=最大停当数
epoll监听树直接创建于内核,然后节点放入epoll等待队列,然后停当后弹出到停当链表(双向链表结构体,内核),然后从内核空间拷贝到用户空间,然后epoll监听到停当直接返回停当节点(sock),用户遍历处理这些sock即可。
epoll不用担心轮询问题,所以没有监听限定,可以监听体系最大描述符数目,并没有多余开销
epoll不存在轮询问题,无需担心监听数目增大,体系开销增大。
epoll直接返回停当的sock,用户直接处理即可。
epoll监听集合在内核层,所以不会出现重复拷贝和重复挂载的问题,包管每个节点只拷贝一次,只挂载一次。
epoll与poll一样,监听的事件更丰富,而后设置监听比力机动,可以对不同的sock设置不同的事件监听。
作为监听模子,select,poll,epoll,epoll监听本领最强,但是处理本领而言(与监听模子无关)
监听部门(通过io复用技术监听管理有效毗连)
处理部门(并发处理),又快又好的将请叱责部处理掉(快速反应,进步体验)
epoll的监听模式(水平触发模式EPOLLLT 边沿触发模式EPOLLET)EPOLLONTSHOT
epoll是线程安全的,epoll_ctl函数内部自带互斥锁,所以一个线程在访问修改树节点时,其他线程无法挂起等待
EPOLL+线程池服务器(满意高并发需求)
线程池技术:
预创建原则,线程池内部预备线程备用,不宜过多
线程应该重用性,可以一对多处理使命或服务不同的客户端
处理单元(线程)数目并不固定,动态扩容与缩减(使命量)
计划机动的使命通报方式与使命接口,线程可以执行不同种类的使命,不能将线程工作固定
线程池技术多为线程容器
thread_poll_create(int max,int min,int qmax);
int thread_producer_add(pool_t* pt,business_t bs);//添加一次业务向队列(生产者)
void* thread_customer(void* arg);//消耗者线程使命,等待队列,循环获取业务并执行
void* thread_manager(void* arg);//检察线程池阈值,动态扩容缩减线程
int net_init();//服务器网络初始化
int first_response();//毗连乐成初次响应
int epoll_init();//epoll创建初始化
int epoll_listen();//主线程循环监听sock事件,并根据停当添加使命
void* accept_business(void* arg);//tcp毗连业务
void* response_business(voiod* arg);//响应处理业务
if_thread_alive(pthread_t tid);//测试线程,返回0表现线程失效,1表现有效
- #include<string.h>
- #include<stdio.h>
- #include<unistd.h>
- #include<stdlib.h>
- #include<sys/stat.h>
- #include<sys/types.h>
- #include<fcntl.h>
- #include<sys/socket.h>
- #include<arpa/inet.h>
- #include<pthread.h>
- #include<sys/epoll.h>
- #include<time.h>
- #include<signal.h>
- #include<errno.h>
- #define EPOLL_MAX 190000
- int epfd;//监听树的描述符
- //business_t业务类型
- typedef struct
- {
- void* (*task)(void* arg);
- void* arg;
- }business_t;
- //pool_t线程池类型
- typedef struct
- {
- //线程池开关
- int thread_shutdown;
- //线程池最大线程数
- int thread_max;
- //线程池最小线程数
- int thread_min;
- //存活有效的线程数量
- int thread_alive;
- //繁忙线程数量
- int thread_busy;
- //缩减码
- int exit_code;
- //环形任务队列
- business_t* queue;
- int front;
- int rear;
- int max;
- int cur;
- //互斥锁
- pthread_mutex_t lock;
- //生产者条件变量
- pthread_cond_t Not_Full;
- //消费者条件变量
- pthread_cond_t Not_Empty;
- //消费者tid数组
- pthread_t* ctids;
- //管理者线程io
- pthread_t mtid;
- }pool_t;
- pool_t* thread_pool_create(int tmax,int tmin,int qmax);
- int thread_producer_add(pool_t* pt,business_t bs);
- void* thread_customer(void* arg);
- int if_thread_alive(pthread_t tid);
- void* thread_mananger(void* arg);
- int net_init(void);
- int first_response(int sock,struct sockaddr_in caddr);
- int epoll_init(int sock);
- int epoll_listen(pool_t* pt,int sock);
- void* accept_business(void*);
- void* recv_business(void*);
- #include<pool.h>
- void* accept_business(void* arg)
- {
- int sock=*(int*)arg;
- int csock;
- struct sockaddr_in caddr;
- char buffer[16];
- bzero(buffer,sizeof(buffer));
- socklen_t addrlen=sizeof(caddr);
- if((csock=accept(sock,(struct sockaddr*)&caddr,&addrlen))==-1)
- perror("accept_business,accept failed");
- first_response(csock,caddr);
- //设置监听
- struct epoll_event node;
- node.data.fd=csock;
- node.events=EPOLLIN|EPOLLET;
- epoll_ctl(epfd,EPOLL_CTL_ADD,csock,&node);
- inet_ntop(AF_INET,&caddr.sin_addr.s_addr,buffer,16);
- printf("customer 0x%x execl accept_business success,client ip %s,client port %d\n",(unsigned int)pthread_self(),buffer,ntohs(caddr.sin_port));
- return NULL;
- }
- #include<pool.h>
- int if_thread_alive(pthread_t tid)
- {
- int err;
- err=pthread_kill(tid,0);
- if(err==ESRCH)
- return 0;
- else return 1;
- }
- #include<pool.h>
- void* recv_business(void* arg)
- {
- int sock=*(int*)arg;
- //读取请求数据,使用非阻塞,当前缓冲区无可读数据立即返回
- char buffer[1024];
- char timebuf[1024];
- time_t tp;
- int recvlen;
- bzero(buffer,sizeof(buffer));
- while((recvlen=recv(sock,buffer,sizeof(buffer),MSG_DONTWAIT))>0)
- {
- //检测关键字,处理请求
- buffer[strlen(buffer)-1]='\0';
- if((strcmp(buffer,"time"))==0){
- bzero(timebuf,1024);
- tp=time(NULL);
- ctime_r(&tp,timebuf);
- send(sock,timebuf,strlen(timebuf),MSG_NOSIGNAL);
- printf("recv_business execl success,response time\n");
- }
- else{
- send(sock,"Please try again",17,MSG_NOSIGNAL);
- printf("customer 0x%x recv_business execl success,reponse tryagain\n",(unsigned int)pthread_self());
- }
- }
- if(recvlen==0){
- //删除监听
- epoll_ctl(epfd,EPOLL_CTL_DEL,sock,NULL);
- printf("client %d exit,close csock\n",sock);
- close(sock);
- printf("customer 0x%xrecv_business execl success, client exit\n",(unsigned int)pthread_self());
- }
- if(recvlen==-1){
- if(errno==EAGAIN){
- //非阻塞返回
- }
- else perror("recv_bussiness recv call fialed");
- }
- return NULL;
- }
- #include<pool.h>
- extern int epfd;
- int epoll_init(int sock)
- {
- if((epfd=epoll_create(EPOLL_MAX))==-1)
- perror("create failed");
- struct epoll_event node;
- node.data.fd=sock;
- node.events=EPOLLIN|EPOLLET;
- epoll_ctl(epfd,EPOLL_CTL_ADD,sock,&node);
- //创建监听树并将seversock设置成监听读事件
- printf("server epoll success\n");
- return 0;
- }
- #include<pool.h>
- void* thread_customer(void* arg)
- {
- //接收参数
- pool_t* pt=(pool_t*)arg;
- business_t bs;
- pthread_detach(pthread_self());
- //循环等待任务并处理
- printf("customer thread 0x%x,wait business\n",(unsigned int)pthread_self());
- while(pt->thread_shutdown)
- {
- pthread_mutex_lock(&pt->lock);
- while(pt->cur==0)
- {
- pthread_cond_wait(&pt->Not_Empty,&pt->lock);
- if(!pt->thread_shutdown){
- printf("customer 0x%x,thread_shutdown %d,customer exiting..\n",(unsigned int)pthread_self(),pt->thread_shutdown);
- pthread_mutex_unlock(&pt->lock);
- pthread_exit(NULL);
- }
- if(pt->exit_code>0){
- printf("manager kill customer 0x%x success\n",(unsigned int)pthread_self());
- --(pt->thread_alive);
- --(pt->exit_code);
- pthread_mutex_unlock(&pt->lock);
- pthread_exit(NULL);
- }
- }
- //获取任务
- bs.task=pt->queue[pt->rear].task;
- bs.arg=pt->queue[pt->rear].arg;
- --(pt->cur);
- pt->rear=(pt->rear+1)%pt->max;
- ++(pt->thread_busy);
- pthread_mutex_unlock(&pt->lock);
- //唤醒生产者
- pthread_cond_signal(&pt->Not_Full);
- //执行任务
- bs.task(bs.arg);
- pthread_mutex_lock(&pt->lock);
- --(pt->thread_busy);
- pthread_mutex_unlock(&pt->lock);
- }
- printf("customer 0x%x,thread_shutdown %d,customer exiting..\n",(unsigned int)pthread_self(),pt->thread_shutdown);
- pthread_exit(NULL);
- }
- #include<pool.h>
- void* thread_mananger(void* arg)
- {
- pool_t* pt=(pool_t*)arg;
- int alive,busy,cur;
- int flag;
- int add;
- int fd;
- if((access("manager_information",F_OK))==0)
- unlink("manager_information");
- fd=open("manager_information",O_RDWR|O_CREAT,0664);
- char result[4096];
- while(pt->thread_shutdown){
- pthread_mutex_lock(&pt->lock);
- alive=pt->thread_alive;
- busy=pt->thread_busy;
- cur=pt->cur;
- pthread_mutex_unlock(&pt->lock);
- bzero(result,sizeof(result));
- sprintf(result,"manager 0x%x,alive %d ,busy %d,idel %d busy/alive %.2f%% alive/max %.2f%%\n",alive,busy,alive-busy,(double)busy/alive*100,(double)alive/pt->thread_max*100);
- write(fd,result,strlen(result));
- //扩容 thread_min作为扩容与缩减量
- //1.任务数量cur>=alive-busy
- //2.使用百分比扩容,如果忙线程占存活线程的70%
- //3.扩容不能超出最大阈值thread_max
- int err;
- if((cur>=alive-busy||(double)busy/alive*100>=70)&&alive+pt->thread_min<=pt->thread_max)
- {
- //ctids,如果为0直接使用,非0要测试线程是否存活
- //遍历tids查找可用位置,并且创建新消费者
- for(flag=0,add=0;flag<pt->thread_max&&add<pt->thread_min;flag++)
- {
- if(pt->ctids[flag]==0||!if_thread_alive(pt->ctids[flag]))
- {
- if((err=pthread_create(&pt->ctids[flag],NULL,thread_customer,(void*)pt))>0)
- printf("manager create new customer failed:%s\n",strerror(err));
- add++;
- pthread_mutex_lock(&pt->lock);
- ++(pt->thread_alive);
- pthread_mutex_unlock(&pt->lock);
- }
- }
- }
- //缩减条件:闲线程是忙线程的倍数,缩减不允许小于最小阈值
- if(busy*2<=alive-busy&&alive-pt->thread_min>=pt->thread_min)
- {
- //如何缩减
- //1.管理者缩减cance,改造ctids,除了存储tid,还要存储记录线程状态,管理者遍历而后cancel取消闲线程
- //2.配合缩减,消费者退出码,唤醒闲消费者,消费者检查退出码,而后自行退出
- pt->exit_code=pt->thread_min;
- int i;
- for(i=0;i<pt->thread_min;i++)
- pthread_cond_signal(&pt->Not_Empty);
- }
- sleep(1);
- }
- printf("manager 0x%x exit.\n",(unsigned int)pthread_self());
- pthread_exit(NULL);
- }
- #include<pool.h>
- //生产者监听模型
- int epoll_listen(pool_t* pt,int sock)
- {
- int readycode;
- struct epoll_event readyarray[EPOLL_MAX];
- int i;
- business_t bs;
- while(pt->thread_shutdown)
- {
- if((readycode=epoll_wait(epfd,readyarray,EPOLL_MAX,-1))==-1)
- perror("epoll_listen,epoll_wait call failed");
- else{
- i=0;
- while(readycode)
- {
- //判断就绪
- if(readyarray[i].data.fd==sock){
- //serversock ready
- bs.task=accept_business;
- bs.arg=(void*)&readyarray[i].data.fd;
- thread_producer_add(pt,bs);
- printf("thread producer 0x%x add accept business..\n",(unsigned int)pthread_self());
- }
- else{
- //clientsock ready
- bs.task=recv_business;
- bs.arg=(void*)&readyarray[i].data.fd;
- thread_producer_add(pt,bs);
- printf("thrad producer 0x%x add recv business..\n",(unsigned int)pthread_self());
- }
- --readycode;
- ++i;
- }}
- }
- printf("producer is done..\n");
- return 0;
- }
- #include<pool.h>
- pool_t* thread_pool_create(int tmax,int tmin,int qmax)
- {
- //对线程池类初始化,申请空间,按最小阈值创建消费者并创建管理者
- pool_t* pt=NULL;
- if((pt=malloc(sizeof(pool_t)))==NULL)
- perror("thread_pool_create,malloc pool failed");
- pt->thread_shutdown=1;
- pt->thread_max=tmax;
- pt->thread_min=tmin;
- pt->thread_alive=0;
- pt->thread_busy=0;
- pt->exit_code=0;
- //创建队列
- if((pt->queue=malloc(sizeof(business_t)*qmax))==NULL)
- perror("thread_pool_crreate,malloc queue failed");
- pt->front=0;
- pt->rear=0;
- pt->max=qmax;
- pt->cur=0;
- if((pt->ctids=malloc(sizeof(pthread_t)*tmax))==NULL)
- perror("thread_pool_create,malloc ctids failed");
- //初始化ctids,0
- bzero(pt->ctids,sizeof(pthread_t)*tmax);
- if(pthread_mutex_init(&(pt->lock),NULL)!=0||pthread_cond_init(&(pt->Not_Full),NULL)!=0||pthread_cond_init(&(pt->Not_Empty),NULL)!=0){
- printf("thread_pool_create,init lock or cond failed\n");
- }
- //预创建消费者
- int err;
- int i;
- for(i=0;i<tmin;i++){
- if((err=pthread_create(&pt->ctids[i],NULL,thread_customer,pt))>0)
- printf("thread_pool_create,create customer failed:%s\n",strerror(err));
- else ++(pt->thread_alive);
- }
- //管理线程
- if((err=pthread_create(&pt->mtid,NULL,thread_mananger,pt))>0)
- printf("thread_pool_create,cretate mannager failed:%s\n",strerror(err));
- return pt;
- }
- #include<pool.h>
- int first_response(int sock,struct sockaddr_in caddr)
- {
- char cip[16];
- char response[1500];
- bzero(cip,16);
- bzero(response,sizeof(response));
- inet_ntop(AF_INET,&caddr.sin_addr,cip,16);
- sprintf(response,"hi,%s connection server host success\n",cip);
- if((send(sock,response,strlen(response),0))==-1)
- perror("first_response,send failed");
- return 0;
- }
- #include<pool.h>
- int net_init(void)
- {
- int sock;
- struct sockaddr_in saddr;
- bzero(&saddr,sizeof(saddr));
- saddr.sin_family=AF_INET;
- saddr.sin_port=htons(1234);
- saddr.sin_addr.s_addr=htonl(INADDR_ANY);
- if((sock=socket(AF_INET,SOCK_STREAM,0))==-1)
- perror("sock failed");
- if((bind(sock,(struct sockaddr*)&saddr,sizeof(saddr)))==-1)
- perror("bind failed");
- if((listen(sock,128))==-1)
- perror("listen failed");
- printf("srver init success\n");
- return sock;
- }
- #include<pool.h>
- int thread_producer_add(pool_t* pt,business_t bs)
- {
- //生产者任务
- pthread_mutex_lock(&pt->lock);
- if(pt->thread_shutdown)
- {
- while(pt->cur==pt->max)
- {
- pthread_cond_wait(&pt->Not_Full,&pt->lock);
- if(!pt->thread_shutdown){
- printf("cusomter thread 0x%x,shutdown %d,thread exit..\n",(unsigned int)pthread_self(),pt->thread_shutdown);
- pthread_mutex_unlock(&pt->lock);
- pthread_exit(NULL);
- }
- }
- //添加一次业务
- pt->queue[pt->front].task=bs.task;
- pt->queue[pt->front].arg=bs.arg;
- ++(pt->cur);
- pt->front=(pt->front+1)%pt->max;
- pthread_mutex_unlock(&pt->lock);
- pthread_cond_signal(&pt->Not_Empty);
- }
- pthread_mutex_unlock(&pt->lock);
- return 0;
- }
- #include<pool.h>
- int main()
- {
- int serverfd=net_init();
- epoll_init(serverfd);
- pool_t* pt=thread_pool_create(100,10,1000);
- epoll_listen(pt,serverfd);
- return 0;
- }
复制代码
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。 |