(一)Linux网络编程--网络知识介绍
1、客户端和服务端
网络程序和普通的程序有一个最大的区别是网络程序是由两个部分组成的--客户端和服务器端。
2、客户端
在网络程序中,如果一个程序主动和外面的程序通信,那么我们把这个程序称为客户端程序。 比如我们使用ftp程序从另外一个地方获取文件的时候,是我们的ftp程序主动同外面进行通信(获取文件), 所以这个地方我们的ftp程序就是客户端程序。
服务端和客户端相对应的程序即为服务端程序。被动的等待外面的程序来和自己通讯的程序称为服务端程序。比如上面的文件获取中,另外一个地方的程序就是服务端,我们从服务端获取文件过来。
3、互为客户和服务端
实际生活中有些程序是互为服务和客户端。在这种情况项目, 一个程序既为客户端也是服务端。
4、常用的命令
由于网络程序是有两个部分组成,所以在调试的时候比较麻烦,为此我们有必要知道一些常用的网络命令。
netstat 命令netstat是用来显示网络的连接,路由表和接口统计等网络的信息。netstat有许多的选项。我们常用的选项是-na 用来显示详细的网络状态。至于其它的选项我们可以使用帮助手册获得详细的情况。
telnet telnet是一个用来登录远程的程序,但是我们完全可以用这个程序来调试我们的服务端程序的。比如我们的服务器程序在监听8888端口,我们可以用telnet localhost 8888来查看服务端的状况。
ping ping 程序用来判断网络的状态是否正常,最经常的一个用法是ping 192.168.0.1表示我们想查看到192.168.0.1的硬件连接是否正常。
5、TCP/UDP介绍
TCP(Transfer Control Protocol)传输控制协议是一种面向连接的协议,当我们的网络程序使用这个协议的时候,网络可以保证我们的客户端和服务端的连接是可靠的,安全的。
UDP(User Datagram Protocol)用户数据报协议是一种非面向连接的协议,这种协议并不能保证我们的网络程序的连接是可靠的,所以我们现在编写的程序一般是采用TCP协议的。
(二)Linux网络编程--初等网络函数介绍(TCP)
Linux系统是通过提供套接字(socket)来进行网络编程的。网络程序通过socket和其它几个函数的调用,会返回一个 通讯的文件描述符,我们可以将这个描述符看成普通的文件的描述符来操作,这就是linux的设备无关性的好处。我们可以通过向描述符读写操作实现网络之间的数据交流。
(1)socket
int socket(int domain, int type,int protocol)
domain:说明我们网络程序所在的主机采用的通讯协族(AF_UNIX和AF_INET等)。
AF_UNIX只能够用于单一的Unix 系统进程间通信,而AF_INET是针对Internet的,因而可以允许在远程主机之间通信(当我们 man socket时发现 domain可选项是 PF_*而不是AF_*,因为glibc是posix的实现所以用PF代替了AF,不过我们都可以使用的)。
type:我们网络程序所采用的通讯协议(SOCK_STREAM,SOCK_DGRAM等)
SOCK_STREAM表明我们用的是TCP 协议,这样会提供按顺序的,可靠,双向,面向连接的比特流。 SOCK_DGRAM 表明我们用的是UDP协议,这样只会提供定长的,不可靠,无连接的通信。
protocol:由于我们指定了type,所以这个地方我们一般只要用0来代替就可以了socket为网络通讯做基本的准备。成功时返回文件描述符,失败时返回-1,看errno可知道出错的详细情况。
(2)bind
int bind(int sockfd, struct sockaddr *my_addr, int addrlen)
sockfd:是由socket调用返回的文件描述符。
addrlen:是sockaddr结构的长度。
my_addr:是一个指向sockaddr的指针。在中有 sockaddr的定义。
1 struct sockaddr 2 { 3 unisgned short as_family; 4 char sa_data[14]; 5 };
不过由于系统的兼容性,我们一般不用这个头文件,而使用另外一个结构(struct sockaddr_in) 来代替。在中有sockaddr_in的定义。
1 struct sockaddr_in 2 { 3 unsigned short sin_family; 4 unsigned short int sin_port; 5 struct in_addr sin_addr; 6 unsigned char sin_zero[8]; 7 };
我们主要使用Internet所以sin_family一般为AF_INET,sin_addr设置为INADDR_ANY表示可以和任何的主机通信,sin_port是我们要监听的端口号。sin_zero[8]是用来填充的。bind将本地的端口同socket返回的文件描述符捆绑在一起。成功是返回0,失败的情况和socket一样。
(3)listen
int listen(int sockfd,int backlog)
sockfd:是bind后的文件描述符。
backlog:设置请求排队的最大长度。当有多个客户端程序和服务端相连时,使用这个表示可以介绍的排队长度。
listen函数将bind的文件描述符变为监听套接字。返回的情况和bind一样。
(4)accept
int accept(int sockfd, struct sockaddr *addr, int *addrlen)
sockfd:是listen后的文件描述符。
addr,addrlen是用来给客户端的程序填写的,服务器端只要传递指针就可以了。
bind,listen和accept是服务器端用的函数,accept调用时,服务器端的程序会一直阻塞到有一个 客户程序发出了连接。accept成功时返回最后的服务器端的文件描述符,这个时候服务器端可以向该描述符写信息了。失败时返回-1。
(5)connect
1 int connect(int sockfd, struct sockaddr * serv_addr,int addrlen)
sockfd:socket返回的文件描述符。
serv_addr:储存了服务器端的连接信息。其中sin_add是服务端的地址。
addrlen:serv_addr的长度。
connect函数是客户端用来同服务端连接的。成功时返回0,sockfd是同服务端通讯的文件描述符 失败时返回-1。
(6)实例
服务器端程序
1 /******* 服务器程序 (server.c) ************/ 2 #include <stdlib.h> 3 #include <stdio.h> 4 #include <errno.h> 5 #include <string.h> 6 #include <unistd.h> 7 #include <netdb.h> 8 #include <sys/socket.h> 9 #include <netinet/in.h> 10 #include <sys/types.h> 11 #include <arpa/inet.h> 12 int main(int argc, char *argv[]) 13 { 14 int sockfd,new_fd; 15 struct sockaddr_in server_addr; 16 struct sockaddr_in client_addr; 17 int sin_size,portnumber; 18 char hello[]="Hello! Are You Fine?/n"; 19 if(argc!=2) 20 { 21 fprintf(stderr,"Usage:%s portnumber/a/n",argv[0]); 22 exit(1); 23 } 24 if((portnumber=atoi(argv[1]))<0) 25 { 26 fprintf(stderr,"Usage:%s portnumber/a/n",argv[0]); 27 exit(1); 28 } 29 /* 服务器端开始建立socket描述符 */ 30 if((sockfd=socket(AF_INET,SOCK_STREAM,0))==-1) 31 { 32 fprintf(stderr,"Socket error:%s/n/a",strerror(errno)); 33 exit(1); 34 } 35 /* 服务器端填充 sockaddr结构 */ 36 bzero(&server_addr,sizeof(struct sockaddr_in)); 37 server_addr.sin_family=AF_INET; 38 server_addr.sin_addr.s_addr=htonl(INADDR_ANY); 39 server_addr.sin_port=htons(portnumber); 40 /* 捆绑sockfd描述符 */ 41 if(bind(sockfd,(struct sockaddr *)(&server_addr),sizeof(struct sockaddr))==-1) 42 { 43 fprintf(stderr,"Bind error:%s/n/a",strerror(errno)); 44 exit(1); 45 } 46 /* 监听sockfd描述符 */ 47 if(listen(sockfd,5)==-1) 48 { 49 fprintf(stderr,"Listen error:%s/n/a",strerror(errno)); 50 exit(1); 51 } 52 while() 53 { 54 /* 服务器阻塞,直到客户程序建立连接 */ 55 sin_size=sizeof(struct sockaddr_in); 56 if((new_fd=accept(sockfd,(struct sockaddr *)(&client_addr),&sin_size))==-1) 57 { 58 fprintf(stderr,"Accept error:%s/n/a",strerror(errno)); 59 exit(1); 60 } 61 fprintf(stderr,"Server get connection from %s/n", 62 inet_ntoa(client_addr.sin_addr)); 63 if(write(new_fd,hello,strlen(hello))==-1) 64 { 65 fprintf(stderr,"Write Error:%s/n",strerror(errno)); 66 exit(1); 67 } 68 /* 这个通讯已经结束 */ 69 close(new_fd); 70 /* 循环下一个 */ 71 } 72 close(sockfd); 73 exit(0); 74 }
客户端程序
1 /******* 客户端程序 client.c ************/ 2 #include <stdlib.h> 3 #include <stdio.h> 4 #include <errno.h> 5 #include <string.h> 6 #include <unistd.h> 7 #include <netdb.h> 8 #include <sys/socket.h> 9 #include <netinet/in.h> 10 #include <sys/types.h> 11 #include <arpa/inet.h> 12 int main(int argc, char *argv[]) 13 { 14 int sockfd; 15 char buffer[1024]; 16 struct sockaddr_in server_addr; 17 struct hostent *host; 18 int portnumber,nbytes; 19 if(argc!=3) 20 { 21 fprintf(stderr,"Usage:%s hostname portnumber/a/n",argv[0]); 22 exit(1); 23 } 24 if((host=gethostbyname(argv[1]))==NULL) 25 { 26 fprintf(stderr,"Gethostname error/n"); 27 exit(1); 28 } 29 if((portnumber=atoi(argv[2]))<0) 30 { 31 fprintf(stderr,"Usage:%s hostname portnumber/a/n",argv[0]); 32 exit(1); 33 } 34 /* 客户程序开始建立 sockfd描述符 */ 35 if((sockfd=socket(AF_INET,SOCK_STREAM,0))==-1) 36 { 37 fprintf(stderr,"Socket Error:%s/a/n",strerror(errno)); 38 exit(1); 39 } 40 /* 客户程序填充服务端的资料 */ 41 bzero(&server_addr,sizeof(server_addr)); 42 server_addr.sin_family=AF_INET; 43 server_addr.sin_port=htons(portnumber); 44 server_addr.sin_addr=*((struct in_addr *)host->h_addr); 45 /* 客户程序发起连接请求 */ 46 if(connect(sockfd,(struct sockaddr *)(&server_addr),sizeof(struct sockaddr))==-1) 47 { 48 fprintf(stderr,"Connect Error:%s/a/n",strerror(errno)); 49 exit(1); 50 } 51 /* 连接成功了 */ 52 if((nbytes=read(sockfd,buffer,1024))==-1) 53 { 54 fprintf(stderr,"Read Error:%s/n",strerror(errno)); 55 exit(1); 56 } 57 buffer[nbytes]='/0'; 58 printf("I have received:%s/n",buffer); 59 /* 结束通讯 */ 60 close(sockfd); 61 exit(0); 62 }
MakeFile
这里我们使用GNU 的make实用程序来编译. 关于make的详细说明见 Make 使用介绍
######### Makefile ###########
all:server client
server:server.c
gcc $^ -o $@
client:client.c
gcc $^ -o $@
运行make后会产生两个程序server(服务器端)和client(客户端) 先运行。/server portnumber&(portnumber随便取一个大于1204且不在/etc/services中出现的号码 就用8888好了),然后运行./client localhost 8888 看看有什么结果。(也可以用telnet和netstat试一试)上面是一个最简单的网络程序,不过是不是也有点烦。上面有许多函数我们还没有解释。 我会在下一章进行的详细的说明。
(7)总结
总的来说网络程序是由两个部分组成的--客户端和服务器端.它们的建立步骤一般是:
服务器端socket-->bind-->listen-->accept
客户端
socket-->connect
(三)Linux网络编程--服务器和客户机的信息函数
这一章我们来学习转换和网络方面的信息函数。
3.1 字节转换函数
在网络上面有着许多类型的机器,这些机器在表示数据的字节顺序是不同的, 比如i386芯片是低字节在内存地址的低端,高字节在高端,而alpha芯片却相反。 为了统一起来,在Linux下面,有专门的字节转换函数。
1 unsigned long int htonl(unsigned long int hostlong) 2 unsigned short int htons(unisgned short int hostshort) 3 unsigned long int ntohl(unsigned long int netlong) 4 unsigned short int ntohs(unsigned short int netshort)
在这四个转换函数中,h代表host,n代表network,s代表short,l代表long。
第一个函数的意义是将本机器上的long数据转化为网络上的long。其他几个函数的意义也差不多。
3.2 IP和域名的转换
在网络上标志一台机器可以用IP或者是用域名。那么我们怎么去进行转换呢?
struct hostent *gethostbyname(const char *hostname)
struct hostent *gethostbyaddr(const char *addr,int len,int type)
在中有struct hostent的定义:
1 struct hostent 2 { 3 char *h_name; /* 主机的正式名称 */ 4 char *h_aliases; /* 主机的别名 */ 5 int h_addrtype; /* 主机的地址类型 AF_INET*/ 6 int h_length; /* 主机的地址长度 对于IP4 是4字节32位*/ 7 char **h_addr_list; /* 主机的IP地址列表 */ 8 } 9 #define h_addr h_addr_list[0] /* 主机的第一个IP地址*/
gethostbyname可以将机器名(如 linux.yessun.com)转换为一个结构指针。在这个结构里面储存了域名的信息。gethostbyaddr可以将一个32位的IP地址(C0A80001)转换为结构指针。这两个函数失败时返回NULL 且设置h_errno错误变量,调用h_strerror()可以得到详细的出错信息。
3.3 字符串的IP和32位的IP转换
在网络上面我们用的IP都是数字加点(192.168.0.1)构成的,而在struct in_addr结构中用的是32位的IP,我们上面那个32位IP(C0A80001)是的192.168.0.1 为了转换我们可以使用下面两个函数:
int inet_aton(const char *cp, struct in_addr *inp)
char *inet_ntoa(struct in_addr in)
函数里面 a 代表 ascii n 代表network。第一个函数表示将a.b.c.d的IP转换为32位的IP,存储在 inp指针里面.第二个是将32位IP转换为a.b.c.d的格式。
3.4 服务信息函数
在网络程序里面我们有时候需要知道端口.IP和服务信息.这个时候我们可以使用以下几个函数
1 int getsockname(int sockfd,struct sockaddr *localaddr,int *addrlen) 2 int getpeername(int sockfd,struct sockaddr *peeraddr, int *addrlen) 3 struct servent *getservbyname(const char *servname,const char *protoname) 4 struct servent *getservbyport(int port,const char *protoname) 5 struct servent 6 { 7 char *s_name; /* 正式服务名 */ 8 char **s_aliases; /* 别名列表 */ 9 int s_port; /* 端口号 */ 10 char *s_proto; /* 使用的协议 */ 11 }
一般我们很少用这几个函数。对应客户端,当我们要得到连接的端口号时在connect调用成功后使用可得到系统分配的端口号。对于服务端,我们用INADDR_ANY填充后,为了得到连接的IP我们可以在accept调用成功后 使用而得到IP地址。 在网络上有许多的默认端口和服务,比如端口21对ftp,80对应WWW。为了得到指定的端口号的服务我们可以调用第四个函数,相反为了得到端口号可以调用第三个函数。
3.5 一个例子
1 #include <stdlib.h> 2 #include <stdio.h> 3 #include <errno.h> 4 #include <string.h> 5 #include <unistd.h> 6 #include <netdb.h> 7 #include <sys/socket.h> 8 #include <netinet/in.h> 9 #include <sys/types.h> 10 #include <arpa/inet.h> 11 int main(int argc ,char **argv) 12 { 13 struct sockaddr_in addr; 14 struct hostent *host; 15 char **alias; 16 if(argc<2) 17 { 18 fprintf(stderr,"Usage:%s hostname|ip../n/a",argv[0]); 19 exit(1); 20 } 21 argv++; 22 for(;*argv!=NULL;argv++) 23 { 24 /* 这里我们假设是IP*/ 25 if(inet_aton(*argv,&addr.sin_addr)!=0) 26 { 27 host=gethostbyaddr((char *)&addr.sin_addr,4,AF_INET); 28 printf("Address information of Ip %s/n",*argv); 29 } 30 else 31 { 32 /* 失败,难道是域名?*/ 33 host=gethostbyname(*argv); printf("Address information of host %s/n",*argv); 34 } 35 if(host==NULL) 36 { 37 /* 都不是 ,算了不找了*/ 38 fprintf(stderr,"No address information of %s/n",*argv); 39 continue; 40 } 41 printf("Official host name %s/n",host->h_name); 42 printf("Name aliases:"); 43 for(alias=host->h_aliases;*alias!=NULL;alias++) 44 printf("%s ,",*alias); 45 printf("/nIp address:"); 46 for(alias=host->h_addr_list;*alias!=NULL;alias++) 47 printf("%s ,",inet_ntoa(*(struct in_addr *)(*alias))); 48 } 49 }
在这个例子里面,为了判断用户输入的是IP还是域名我们调用了两个函数,第一次我们假设输入的是IP所以调用inet_aton, 失败的时候,再调用gethostbyname而得到信息。
(四)Linux网络编程--完整的读写函数
一旦我们建立了连接,我们的下一步就是进行通信了。在Linux下面把我们前面建立的通道看成是文件描述符,这样服务器端和客户端进行通信时候,只要往文件描述符里面读写东西了。 就象我们往文件读写一样。
4.1 写函数write
ssize_t write(int fd, const void *buf, size_t nbytes)
write函数将buf中的nbytes字节内容写入文件描述符fd。成功时返回写的字节数。失败时返回-1。 并设置errno变量。 在网络程序中,当我们向套接字文件描述符写时有俩种可能。
1)write的返回值大于0,表示写了部分或者是全部的数据。
2)返回的值小于0,此时出现了错误。我们要根据错误类型来处理。
如果错误为EINTR表示在写的时候出现了中断错误。
如果为EPIPE表示网络连接出现了问题(对方已经关闭了连接)。
为了处理以上的情况,我们自己编写一个写函数来处理这几种情况。
1 int my_write(int fd,void *buffer,int length) 2 { 3 int bytes_left; 4 int written_bytes; 5 char *ptr; 6 ptr=buffer; 7 bytes_left=length; 8 while(bytes_left>0) 9 { 10 /* 开始写*/ 11 written_bytes=write(fd,ptr,bytes_left); 12 if(written_bytes<=0) /* 出错了*/ 13 { 14 if(errno==EINTR) /* 中断错误我们继续写*/ 15 written_bytes=0; 16 else /* 其他错误 没有办法,只好撤退了*/ 17 return(-1); 18 } 19 bytes_left-=written_bytes; 20 ptr+=written_bytes; /* 从剩下的地方继续写 */ 21 } 22 return(0); 23 }
4.2 读函数read
ssize_t read(int fd,void *buf,size_t nbyte)
read函数是负责从fd中读取内容。当读成功时,read返回实际所读的字节数,如果返回的值是0 表示已经读到文件的结束了,小于0表示出现了错误。如果错误为EINTR说明读是由中断引起的,如果是ECONNREST表示网络连接出了问题。和上面一样,我们也写一个自己的读函数。
1 int my_read(int fd,void *buffer,int length) 2 { 3 int bytes_left; 4 int bytes_read; 5 char *ptr; 6 bytes_left=length; 7 while(bytes_left>0) 8 { 9 bytes_read=read(fd,ptr,bytes_read); 10 if(bytes_read<0) 11 { 12 if(errno==EINTR) 13 bytes_read=0; 14 else 15 return(-1); 16 } 17 else if(bytes_read==0) 18 break; 19 bytes_left-=bytes_read; 20 ptr+=bytes_read; 21 } 22 return(length-bytes_left); 23 }
4.3 数据的传递
有了上面的两个函数,我们就可以向客户端或者是服务端传递数据了。比如我们要传递一个结构。可以使用如下方式:
1 /* 客户端向服务端写 */ 2 struct my_struct my_struct_client; 3 write(fd,(void *)&my_struct_client,sizeof(struct my_struct); 4 /* 服务端的读*/ 5 char buffer[sizeof(struct my_struct)]; 6 struct *my_struct_server; 7 read(fd,(void *)buffer,sizeof(struct my_struct)); 8 my_struct_server=(struct my_struct *)buffer;
在网络上传递数据时我们一般都是把数据转化为char类型的数据传递.接收的时候也是一样的。注意的是我们没有必要在网络上传递指针(因为传递指针是没有任何意义的,我们必须传递指针所指向的内容)。
(五)Linux网络编程--用户数据报发送
我们前面已经学习网络程序的一个很大的部分,由这个部分的知识,我们实际上可以写出大部分的基于TCP协议的网络程序了。
现在在 Linux下的大部分程序都是用我们上面所学的知识来写的。我们可以去找一些源程序来参考一下。这一章,我们简单的学习一下基于UDP协议的网络程序。
5.1 两个常用的函数
int recvfrom(int sockfd,void *buf,int len,unsigned int flags,struct sockaddr * from int *fromlen)
int sendto(int sockfd,const void *msg,int len,unsigned int flags,struct sockaddr *to int tolen)
sockfd, buf, len的意义和read,write一样,分别表示套接字描述符,发送或接收的缓冲区及大小。
recvfrom负责从 sockfd接收数据,如果from不是NULL,那么在from里面存储了信息来源的情况,如果对信息的来源不感兴趣,可以将from和fromlen 设置为NULL。sendto负责向to发送信息。此时在to里面存储了收信息方的详细资料。
5.2 一个实例
1 /******服务端程序 server.c******/ 2 #include <stdlib.h> 3 #include <stdio.h> 4 #include <errno.h> 5 #include <string.h> 6 #include <unistd.h> 7 #include <netdb.h> 8 #include <sys/socket.h> 9 #include <netinet/in.h> 10 #include <sys/types.h> 11 #include <arpa/inet.h> 12 #define SERVER_PORT 8888 13 #define MAX_MSG_SIZE 1024 14 void udps_respon(int sockfd) 15 { 16 struct sockaddr_in addr; 17 int n; 18 socklen_t addrlen; 19 char msg[MAX_MSG_SIZE]; 20 while(1) 21 { /* 从网络上读,写到网络上面去 */ 22 memset(msg, 0, sizeof(msg)); 23 addrlen = sizeof(struct sockaddr); 24 n=recvfrom(sockfd, msg, MAX_MSG_SIZE, 0, (struct sockaddr*)&addr,&addrlen); 25 /* 显示服务端已经收到了信息 */ 26 fprintf(stdout,"I have received %s",msg); 27 sendto(sockfd,msg,n,0,(struct sockaddr*)&addr,addrlen); 28 } 29 } 30 int main(void) 31 { 32 int sockfd; 33 struct sockaddr_in addr; 34 sockfd=socket(AF_INET,SOCK_DGRAM,0); 35 if(sockfd<0) 36 { 37 fprintf(stderr,"Socket Error:%s/n",strerror(errno)); 38 exit(1); 39 } 40 bzero(&addr,sizeof(struct sockaddr_in)); 41 addr.sin_family=AF_INET; 42 addr.sin_addr.s_addr=htonl(INADDR_ANY); 43 addr.sin_port=htons(SERVER_PORT); 44 if(bind(sockfd,(struct sockaddr *)&addr,sizeof(struct sockaddr_in))<0) 45 { 46 fprintf(stderr,"Bind Error:%s/n",strerror(errno)); 47 exit(1); 48 } 49 udps_respon(sockfd); 50 close(sockfd); 51 }
客户端程序
1 /******客户端程序******/
2 #include <stdlib.h>
3 #include <stdio.h>
4 #include <errno.h>
5 #include <string.h>
6 #include <unistd.h>
7 #include <netdb.h>
8 #include <sys/socket.h>
9 #include <netinet/in.h>
10 #include <sys/types.h>
11 #include <arpa/inet.h>
12 #define MAX_BUF_SIZE 1024
13 void udpc_requ(int sockfd,const struct sockaddr_in *addr,socklen_t len)
14 {
15 char buffer[MAX_BUF_SIZE];
16 int n;
17 while(fgets(buffer,MAX_BUF_SIZE,stdin))
18 { /* 从键盘读入,写到服务端 */
19 sendto(sockfd,buffer,strlen(buffer),0,addr,len);
20 bzero(buffer,MAX_BUF_SIZE);
21 /