C/C++程序员必须熟练应用的开源项目

转载自：http://blog.csdn.net/langeldep/article/details/6293655

 作为一个经验丰富的C/C++程序员， 肯定亲手写过各种功能的代码， 比如封装过数据库访问的类， 封装过网络通信的类，封装过日志操作的类， 封装过文件访问的类， 封装过UI界面库等， 也在实际的项目中应用过， 但是回过头仔细想想，其实以前自己写过的这些代码，只能是在特定的项目或者特定的环境中使用， 对于自己来说， 在不同的项目中应用， 只需要复制代码， 改改也就可以了， 因为自己写的代码自己很熟悉。问题是， 你封装的这些库， 在给别人使用的时候， 别人用起来是否很方便， 跨平台方面是不是也很通用， 性能是不是足够的好， 是不是支持多线程， 功能是不是也足够强大，可以适用于各种不同的需求。如果你上面这些都做到了， 证明你在这个库上确实花费了一番功夫， 经过了持续的改进和优化。

 

       在日常的开发中， 作为一个程序员， 很多东西已经没有必要再重新开发了， 可以直接拿过来使用， 毕竟21世纪都已经过了N年了。我们没有必要重新发明轮子(不可否认发明轮子的过程可以学到很多东西，我就是这么走过来的)。

 

       下面结合自己多年的开发经验， 想到哪里写到哪里， 希望对新人有一定的帮助。

 

        一、网络

              网络库必须掌握 ACE 和 libevent， 一个是重量级的网络库， 一个是轻量级的网络库。仔细想想，现在那个程序不用网络啊。不懂网络， 你将寸步难行啊。 熟悉这两个开源库的前提是你必须懂socket的原理， 给大家推荐的好书就是 《UNIX网络编程》，看懂这本书就可以了， 其他的什么《windows网络编程》这些都不用看， 因为网络编程，你学会了伯克利的套接字， 你就可以在任何平台上进行网络编程了， 不需要学什么windows下的网络编程， 因为windows下的网络也是从伯克利套接字搞过来的， 如果你学习《windows网络编程》， 那么你那天在linux，unix下进行网络编程，你还得在学习一下。没有那个必要。

 

       二、数据库

             数据库嘛， 开源的Mysql和开源的PostgreSQL只要懂其中一个就可以了， 商业数据库在掌握一个Oracle就可以了，文件数据库掌握 sqlite。 不过请大家注意， 不要被上面数据库名字给迷惑了， 数据库的本质是SQL语句， 一定要懂数据库的基本原理，熟练应用SQL语言，懂数据库的优化，存储过程等。数据库的原理搞懂了， 拿什么数据库过来都轻松掌握， 就不会在乎是Mysql还是Oracle了。

 

       三、日志操作

             日志操作推荐大家熟悉 log4cpp这个日志库， 支持多线程， 日志重定向到网络等都有， 反正你能想到的日志的功能， 都有。

日志嘛，一个是方便查找问题， 方便记录程序运行的一些情况。这是必须的。

 

       四、管理后台

             众所周知， 写程序是给其他人用的，不是自己用， 所以在程序的易用性上，多给对方提供一些可以直接查看的管理界面， 显得分成重要。为程序提供一个web的管理界面，方便用户登录上去查看程序的各种信息， 很有必要。

             我这里有一个方便的web后台管理的http实现， 可以方便的集成到应用程序中。在IE里面输入监听的端口，就可以查看程序的状态。代码还没有仔细整理。有需要的弟兄可以给我留言， 给大家发。

 

       五、读取配置文件

             所有的程序都必须有配置文件， 方便配置一些项目， 为程序提供灵活性。 所以写程序，必须有读取配置文件的封装类。

 

       六、内存池

             所有的进程都需要分配内存， 对C/C++来说， 分配和管理内存是已经很有挑战性的工作。

             给大家推荐 nedmalloc 这个开源的内存池库。nedmalloc是一个跨平台的高性能多线程内存分配库，很多库都使用它。

 

       七、缓存库

             众所周知， 缓存库用得最多的就是 memcache 了。在做数据库开发的时候特别有用。

 

       八、脚本

             脚本是一个很有意思的东西，很多功能，其实我们只要写个脚本就可以完成，代码量少，开发速度快。

             必须掌握的脚本，比较通用的要算 perl 了， 很古老的语言，但是功能太强大了。 我可以保证的说，.net，java能干的工作，肯定可以让perl来干。 C能干的， perl不一定能干。 perl作为linux， unix的系统集成的脚本语言，必须学会。

 

             lua 语言， 这个语言， 在游戏行业用得比较多。不推荐学。

             python 脚本， 功能很强大， 推荐学。

 

        上面这些是所有程序都会用到的比较通用的功能。

 

        在不同的应用领域， 需要掌握不同开源库， 比如搞游戏开发的， 可能需要掌握开源的UI库CEGUI, 开源的3D引擎OGRE等。

搞分布式开发的可能会有分布式的文件系统库等。

开源C/C++网络库比较

转载自：http://blog.csdn.net/langeldep/article/details/6976120

在开源的C/C++网络库中， 常用的就那么几个， 在业界知名度最高的， 应该是ACE了， 不过是个重量级的大家伙， 轻量级的有libevent， libev， 还有 Boost的ASIO。

ACE是一个大型的中间件产品，代码20万行左右，过于宏大，一堆的设计模式，架构了一层又一层，使用的时候， 要根据情况，看你从那一层来进行使用。支持跨平台。

Boost的ASIO是一个异步IO库，封装了对Socket的常用操作，简化了基于socket程序的开发。支持跨平台。

libevent是一个C语言写的网络库， 官方主要支持的是类linux 操作系统， 最新的版本添加了对windows的IOCP的支持。由于IOCP是异步IO，与linux下的POLL模型，EPOLL模型，还有freebsd的KQUEUE等这些同步模型在用法上完全不一致，所以使用方法也不一样，就好比ACE中的Reactor和Proactor模式一样， 使用起来需要转变思路。如果对性能没有特别的要求， 那么使用libevent中的select模型来实现跨平台的操作， select模型可以横跨windows， linux， unix，solaris等系统。

libev是一个C语言写的，只支持linux系统的库，我以前研究的时候只封装了EPOLL模型， 不知道现在的新版有没有改进。使用方法类似libevent， 但是非常简洁，代码量是最少的一个库，也就几千行代码。显然这样的代码跨平台肯定是无法支持的了， 如果你只需要在linux下面运行，那用这个库也是可以的。

ACE网络库在使用中，一直对其中的内存管理搞得一头雾水，分配的内存需要在哪里释放都不知道，ACE不愧是一个做研究用的库， 可以说里面的封装把设计模式这本书中列出的模式都在代码里面实现了一番，用起来感觉是在用java一样，如果你想使用ACE作为你的网络库， 千万不要仅仅把它当成一个网络库使用， 你要把它当成一个框架来使用，如果你只想用它的网络库， 那大可不必用ACE， 因为它太庞大了，学习起来太费劲。但是你把它当成一个框架来用，你会感觉用的还真爽，该有的东西都有，比如线程池，内存池，定时器，递归锁等，都很方便的。Boost的ASIO，在内存管理方面要直观的多。下面简单地与ACE做个比较。

1.层次架构：
ACE底层是C风格的OS适配层，上一层基于C++的wrap类，再上一层是一些框架（Accpetor, Connector，Reactor，Proactor等），最上一层是框架上服务。
Boost.ASIO与之类似，底层是OS的适配层，上一层一些模板类，再上一层模板类的参数化（TCP/UDP），再上一层是服务，它只有一种框架为io_service。
livevent在不同的操作系统下，做了多路复用模型的抽象，可以选择使用不同的模型，通过事件函数提供服务。

2.涉及范围：
ACE包含了日志，IPC，线程池，共享内存，配置服务，递归锁，定时器等。
ASIO只涉及到Socket，提供简单的线程操作。
libevent只提供了简单的网络API的封装， 线程池， 内存池， 递归锁等均需要自己实现。

3.设计模式：
ACE主要应用了Reactor，Proactor等。
而ASIO主要应用了Proactor。
libevent为Reactor模式

4.线程调度：
ACE的Reactor是单线程调度，Proactor支持多线程调度。
ASIO支持单线程与多线程调度。
libevent的线程调度需要自己来注册不同的事件句柄。

5.事件分派处理：
ACE主要是注册handler类，当事件分派时，调用其handler的虚挂勾函数。实现ACE_Handler / ACE_Svc_Handler / ACE_Event_handler等类的虚函数。
ASIO是基于函数对象的hanlder事件分派。任何函数都可能成为hanlder，少了一堆虚表的维护，调度上优于ACE。
libevent基于注册的事件回调函数来实现事件分发。

6.发布方式：
ACE是开源免费的，不依赖于第3方库， 一般应用使用它时，以动态链接的方式发布动态库。
ASIO是开源免费的，依赖Boost，应用使用时只要include头文件，不需动态库。
libevent为开源免费的，一般编译为静态库进行使用。

7.可移植性：
ACE支持多种平台，可移植性不存在问题，据说socket编程在linux下有不少bugs。
ASIO支持多种平台，可移植性不存在问题。
libevent主要支持linux平台，freebsd平台， 其他平台下通过select模型进行支持， 效率不是太高。

8.开发难度：
基于ACE开发应用，对程序员要求比较高，要用好它，必须非常了解其框架。在其框架下开发，往往new出一个对象，不知在什么地方释放好。

基于ASIO开发应用，要求程序员熟悉函数对象，函数指针，熟悉boost库中的boost::bind。内存管理控制方面。

基于libevent开发应用，相对容易， 具体大家可以参考memcached这个开源的应用，里面使用了libevent这个库。