tcpforward server benchmark go python pypy twisted gevent

[myrual]

我作的一个试验。
主机 amazon ec2, small, ubuntu 10.04 32bit

pypy2.7 + twisted 最大连接 320 峰值流量 20M
python2.6 + twisted 最大连接 250 峰值流量 16M
golang1.0.2 最大连接 200 峰值流量 13M
python2.6 + gevent 最大连接 150 峰值流量 10M

感受：
pypy确实很强大。
golang很好用。
gevent不是简单的线程替代品，不sleep或者其他io block是不会交出控制权的。

代码库如下
https://github.com/myrual/tcpforward_benchmark

[phuslu]

gevent.sleep(0) 似乎不是必须的.
http://gist.github.com/3910331

[phuslu]

还有, python 2.6 比较老, 可能测试 python 2.7 更有说服力.

[lookhi]

再加个tornado的吧

[phuslu]

@lookhi tornado 其实不必加上啦, 这种 benchmark 它不占优势. nodejs 最新版本倒是值得一试, 估计性能会非常好.

[phuslu]

看了一下 twisted 代码, 使用的 buffer size 是 65536, 大概是这点比较占便宜.
建议楼主把 golang/gevent 的 buffer size 也改成 65536 试下.

[myrual]

@phuslu 用了你的代码，最大连接260, 最大流量13M

[phuslu]

@myrual buffer size 调成 65536 呢?

[myrual]

@phuslu 把go lang里面的接受buffer改到65535就获得了 23M的稳定峰值流量， 400个转发socket.

[phuslu]

@myrual 理论上说 python27+gevent 不会比 python27+twisted 更慢. nodejs 0.8.x 在这类 benchmark 中应该最占便宜.

[myrual]

python gevent 把recv的数量改大没有变化。

[phuslu]

@myrual 呃, 我又把 gist 的代码改了改, 之前 write 没用 buffer, 现在用上了, 可能会好些.

[myrual]

明天到公司试试。顺便尝试一下python27 + gevent 的效果

[myrual]

@phuslu 峰值稳定在20M，400左右的连接。

[phuslu]

@myrual 嗯, 谢谢. 这个结果差不多是 python 的极限了.
之前也看过一些 web 或 tcp 方面 benchmark, gevent 基本是 python 目前唯一拿得出手的比较完备的框架. (单测 web 框架的话, bjoern/meinheld 都会比 gevent 快很多, 可惜不够完备)
tornado 的话, 基本比 gevent 慢 30% 以上, 吃亏在它的 IOStream 的 buffer 是用 collection.deque 实现, 尽管已经高度优化, 但是还是比不上 gevent 集成的 libev/libevent.
纯 IO 的测试(不涉及后端), gevent 勉强可以达到 golang/nodejs 同一个数量级, 但是如果加上一些简单的计算, 差不多慢2~3倍. 如果计算量比较大或者设计后端操作, 那就更慢了.
nodejs/golang 目前做这类 benchmark 性能最好, 而且 golang 在不断发展中, 很期待~

[lookhi]

@myrual 激发这个benchmark的程序在哪里啊？

[myrual]

@lookhi 你说的是客户端么？刚刚简单改了一下，把自己业务相关的名字修改了一下，没验证就push到 github了。依赖gevent库。