mongo无法利用多核？

    太伤心了，本来以为mongo的速度很快呢。测试插入数据，结果当场被泼了冷水。

conn = pymongo.Connection('localhost', 27017)

db = conn['perform']

coll = db['test']

testdata = []

def init_testdata():

    for i in xrange(1000):

        s1 = ''.join([random.choice(string.hexdigits) for j in xrange(16)])

        s2 = ''.join([random.choice(string.letters) for j in xrange(200)])

        testdata.append((s1, s2))

init_testdata()

def insert_mongo():

    for s1, s2 in testdata: coll.insert({'_id': s1, 'content': s2})

def find_mongo():

    for s1, s2 in testdata:

        s = coll.find_one({'_id': s1})

def testfunc(funcname, times = 1000):

    from timeit import Timer

    t = Timer("%s()" % funcname, "from __main__ import *")

    print 'funcname: %s used %f' % (funcname, t.timeit(times) / times)

if __name__ == '__main__':

    # os.fork()

    # os.fork()

    init_testdata()

    testfunc('insert_mongo', times = 100)

    testfunc('find_mongo', times = 100)

    这个代码，在直接执行的情况下，获得结果是这样的。

funcname: insert_mongo used 0.179303

    折合成iops，也就是5500req/s的样子。打开os.fork后，结果变成了这样。

funcname: insert_mongo used 0.516131

funcname: insert_mongo used 0.526213

    只有3850req/s左右，我靠，比单进程慢那么多？打开四个进程试试？

funcname: insert_mongo used 1.039754

funcname: insert_mongo used 1.058093

funcname: insert_mongo used 1.058598

funcname: insert_mongo used 1.059101

    基本稳定下来了，差不多4000req/s的样子。而且，通过top发现，最关键的问题不在于io和内存，而是mongodb这货只有一个进程，最高吃到100%的CPU——也就是——无法利用多核。

    幸好，在读取测试中，情况不是那么糟糕。在单进程下是下面这样子

funcname: find_mongo used 0.350096

    2850req/s，双进程就变成了这样子。

funcname: find_mongo used 0.220384

funcname: find_mongo used 0.221446

    9000req/s！不但性能有所上升，而且更为惊喜的是，在top中检测发现，主要CPU消耗都放到了python这端。而分布系统的常识告诉我们，客户端的压力（就是应用服务器的压力）是可以很容易的通过添加服务器来解决的。在贝壳当前这台双核的机器上是无法进行进一步测试了，不过按照目前的状况预估，查询时即使只能使用单核，也可以支持10000req/s以上的性能。

    又是一个典型的高读低写数据库呐。也罢也罢，nosql中也就mongo的各种特性比较接近sql数据库，用来跳过ORM层直接做系统比较合适。如果使用memcache或者redis，性能倒是上去了，用起来就未免太蛋疼了一点。不过偷偷的透露一点，贝壳估计，使用redis后，性能还能上去5倍。