江苏龙网

  1. 首页 > 人文 > >

空白键|我要消灭一半程序员，10大高性能开发宝石

程序员经常要面临的一个问题就是：如何提高程序性能?
这篇文章 ， 我们循序渐进 ， 从内存、磁盘I/O、网络I/O、CPU、缓存、架构、算法等多层次递进 ， 串联起高性能开发十大必须掌握的核心技术 。
-I/O优化：零拷贝技术-I/O优化：多路复用技术-线程池技术-无锁编程技术-进程间通信技术-RPC&&序列化技术-数据库索引技术-缓存技术&&布隆过滤器-全文搜索技术-负载均衡技术准备好了吗 ， 坐稳了 ， 发车!
首先 ， 我们从最简单的模型开始 。
老板告诉你 ， 开发一个静态web服务器 ， 把磁盘文件(网页、图片)通过网络发出去 ， 怎么做?
你花了两天时间 ， 撸了一个1.0版本：
主线程进入一个循环 ， 等待连接来一个连接就启动一个工作线程来处理工作线程中 ， 等待对方请求 ， 然后从磁盘读文件、往套接口发送数据 ， 完事儿上线一天 ， 老板发现太慢了 ， 大一点的图片加载都有卡顿感 。 让你优化 ， 这个时候 ， 你需要：
I/O优化：零拷贝技术
上面的工作线程 ， 从磁盘读文件、再通过网络发送数据 ， 数据从磁盘到网络 ， 兜兜转转需要拷贝四次 ， 其中CPU亲自搬运都需要两次 。
ssize_tsendfile(intout_fd,intin_fd,off_t*offset,size_tcount);函数名字已经把函数的功能解释的很明显了：发送文件 。 指定要发送的文件描述符和网络套接字描述符 ， 一个函数搞定!
用上了零拷贝技术后开发了2.0版本 ， 图片加载速度明显有了提升 。 不过老板发现同时访问的人变多了以后 ， 又变慢了 ， 又让你继续优化 。 这个时候 ， 你需要：
I/O优化：多路复用技术
前面的版本中 ， 每个线程都要阻塞在recv等待对方的请求 ， 这来访问的人多了 ， 线程开的就多了 ， 大量线程都在阻塞 ， 系统运转速度也随之下降 。
这个时候 ， 你需要多路复用技术 ， 使用select模型 ， 将所有等待(accept、recv)都放在主线程里 ， 工作线程不需要再等待 。
这个时候 ， 你需要升级多路复用模型为epoll 。
select有三弊 ， epoll有三优 。
select底层采用数组来管理套接字描述符 ， 同时管理的数量有上限 ， 一般不超过几千个 ， epoll使用树和链表来管理 ， 同时管理数量可以很大 。 select不会告诉你到底哪个套接字来了消息 ， 你需要一个个去询问 。 epoll直接告诉你谁来了消息 ， 不用轮询 。 select进行系统调用时还需要把套接字列表在用户空间和内核空间来回拷贝 ， 循环中调用select时简直浪费 。 epoll统一在内核管理套接字描述符 ， 无需来回拷贝 。用上了epoll多路复用技术 ， 开发了3.0版本 ， 你的网站能同时处理很多用户请求了 。
但是贪心的老板还不满足 ， 不舍得升级硬件服务器 ， 却让你进一步提高服务器的吞吐量 。 你研究后发现 ， 之前的方案中 ， 工作线程总是用到才创建 ， 用完就关闭 ， 大量请求来的时候 ， 线程不断创建、关闭、创建、关闭 ， 开销挺大的 。 这个时候 ， 你需要：


推荐阅读


上一篇：柏铭科技|如今小米却落后华为太多，同一年进入PC市场

下一篇：男霸你欢|是因为什么呢?，《越女剑》是金庸小说里唯一部没被翻拍过的作品,