我想大家都用过Linux下的重定向命令”>”,该命令可以将原本打印到屏幕上的内容(包括标准输入和标准错误信息)重定向到指定文件中,屏幕上将不再输出打印信息。如果指定文件已经存在,文件中已存在的内容会被新重定向过来的内容覆盖,倘若不想覆盖,可以用追加重定向命令”>>”,新重定向过来的内容将被追加到已存在的文件中去。但是,如果你想将标准输入内容既显示到屏幕上又保存到文件中去,那就需要使用tee命令了。tee命令将标准输入复制到每个指定的文件,并显示到标准输出(屏幕)上。 阅读全文
我们在编写网络通信程序的时候,不论作为服务端还是客户端,常常需要确保实时检测与对方的连接状态,调用select函数监控文件描述符(套接字)的连接状态是最普遍的方法,但是当遇到对方断电或者网络线路突然断开的情况,select函数将接收不到来自对方的断开消息,所以维护着这一连接的文件描述符(套接字)已经没有存在的意义,这个时候往该文件描述符(套接字)内写内容依然不会返回错误,read也会堵塞着并不返回错误。因此也无法断定该套接字是否还处于连接状态,我们可以通过开启TCP的keepAlive选项来让TCP连接自身维护自己的连接状态,详见《Linux下回收异常断开的TCP连接》,但是倘若要及时检测网络连通性,不得不频繁地发心跳包,势必会影响通信带宽,不是很理想。 阅读全文
现在主流视频网站都是采用Flash播放器播放视频的,视频格式皆为flv,比如Youtube、优酷、土豆网、奇艺网、音悦台等等。我们在这些视频网站观看了喜欢的视频以后,有没有将其提取到本地,然后保存的欲望呢?我们知道,很多视频网站针对Windows都有专门的视频下载客户端,但是却没有一家网站为Linux开发客户端,所有我们不得不自己动手,设法从缓存文件中提取视频文件。 阅读全文
OpenSSL的API使用起来与我们常用的普通网络通信函数大同小异,主要分为初始化阶段、密钥载入及验证阶段、创建SSL(类似于文件描述符(套结字)创建函数socket)阶段、绑定套结字阶段(类似于bind函数)、请求建立连接阶段(客户端特有,类似于connect)、接受连接请求阶段(服务端特有,类似于accept函数)、数据收发阶段(类似于read和write)、结束连接阶段以及结束监听阶段(类似于close)。为了让SSL通信过程更加清晰明了,故自己用C语言封装了5个主要函数,让SSL通信流程为开发者快速掌握、一目了然。
阅读全文
Linux内核与用户空间通信的方式目前主要有9种,分别是内核启动参数、模块参数与 sysfs、sysctl、系统调用、netlink、procfs、seq_file、debugfs和relayfs。Netlink是一种特殊的文件描述符(套结字),为2.6.14及更高版本的Linux所特有,是一种在内核与用户应用间进行双向数据交互的便捷方式,用户态应用调用标准的套结字API 就可以使用netlink提供的强大功能,内核态需要调用专门的内核 API 来使用netlink。Netlink应用已经相当广泛,例如,Linux系统的网络防火墙分为内核态的netfilter和用户态的iptables,netfilter与iptables的数据交换就是通过Netlink机制来完成。
阅读全文
我们在实际应用中很可能遇到这样的情况:客户端与服务器之间已经建立了TCP长连接,他们之间正在进行数据通信,尚未主动执行close操作的时候,突然一方拔掉网线或者断电,双方会因为无法交互断开TCP连接的握手包而一直无法确认是否与对方断开连接。这个时候执行read或recvfrom操作会因为无法收到数据使得进程一直阻塞着而不会返回错误,write操作因为是向缓冲区内写数据,只要缓冲区未满则也不会返回错误。这样,异常断开的TCP连接所绑定的套接字(文件描述符)已经没有意义了,但仍然占用着一个位置,倘若不处理,无意义的套接字(文件描述符)累加到1024时,系统会因为无法再分配新的套接字(文件描述符)而无法接受新的TCP连接。 阅读全文
为了将代码移植到iPhone等运行了iOS的设备上,我们不得不百般地顺从iOS系统的特殊性,Linux上普通的文件描述符(套接字)超时时间设置在iOS上无效,前面那篇文章“实现超时返回的gethostbyname函数”曾试过采用时钟与信号实现超时返回,但因为某些尚未查明的原因,加了信号与时钟以后,程序会莫名地崩溃,这促使我们使用最保险的select函数来实现超时返回。 阅读全文
当我们的程序是单进程的时候,居如connect、read、accept、gethostbyname之类的网络API函数默认都是阻塞的,想实现connect、read、accept的非阻塞版本很容易,之需要将其调用的文件描述符(套接字)设置为非阻塞模式,然后交给select去捕捉返回结果即可。然而gethostbyname函数只需要传递一个域名作为参数,显然无法依靠设置文件描述符(套接字)的超时时间来让其在规定的时间内返回,如果指定域名存在DNS中存在且主机能够连上互联网还好,要是域名在DNS中不存在或者主机没有连上互联网,那样gethostbyname就会一直阻塞着整个进程直至到达系统超时时间,导致程序中的其他功能无法执行,显然代价是惨重的。那么有没有办法实现超时返回的gethostbyname函数呢?答案是肯定的。 阅读全文
socket通常翻译为套接字(文件描述符),当我们使用socket函数创建一个套接字(文件描述符)后,我们可以使用该套接字(文件描述符)来执行很多操作,譬如read、write、open、accpet、connect、recvfrom、sendto等等,这里面的很多操作默认都是阻塞的,而这个阻塞时间就是我今天要讲的socket超时时间,在没有设置socket超时时间的情况下,这些有阻塞行为的操作调用的都是系统默认超时时间。不同的系统会定制不同的socket超时时间,比如本人的Ubuntu10.04的超时时间就是30秒,但多数的系统对于该超时时间的设置都是比较保守的,不会低于30秒。很多情况下,为了让我们的程序更合理,缩短socket超时时间让阻塞动作尽快返回结果就是很有必要了。 阅读全文