推荐学习书目
› Learn Python the Hard Way
Python Sites
› PyPI - Python Package Index
› http://diveintopython.org/toc/index.html
› Pocoo
值得关注的项目
› PyPy
› Celery
› Jinja2
› Read the Docs
› gevent
› pyenv
› virtualenv
› Stackless Python
› Beautiful Soup
› 结巴中文分词
› Green Unicorn
› Sentry
› Shovel
› Pyflakes
› pytest
Python 编程
› pep8 Checker
Styles
› PEP 8
› Google Python Style Guide
› Code Style from The Hitchhiker's Guide
这是一个创建于 4067 天前的主题，其中的信息可能已经有所发展或是发生改变。
万能的v友，应该有不少玩过vsftpd吧？
我想请教一下，如果1k+台机器在10分钟~20分钟内将本机1M~10M大小的日志文件传到指定的ftp服务器上，vsftpd能扛得住吗？可能的瓶颈是磁盘还是网络还是CPU？
运行模式是通过guest虚拟用户登录，客户端通过python的ftplib上传
我想请教一下，如果1k+台机器在10分钟~20分钟内将本机1M~10M大小的日志文件传到指定的ftp服务器上，vsftpd能扛得住吗？可能的瓶颈是磁盘还是网络还是CPU？
运行模式是通过guest虚拟用户登录，客户端通过python的ftplib上传
 |
1
tftk 2014 年 11 月 24 日  1
网络 io。
|
 |
2
lecher 2014 年 11 月 24 日 1
网络请求方面的业务，瓶颈在网络io的居多。
这个业务cpu基本没负载，磁盘10分钟1k＊10M的写入数据量也可以负担得起。 内存看vsftpd设置多大的内存缓冲区，有可能会爆内存。 |
 |
3
AntiGameZ 2014 年 11 月 24 日 1
瓶颈在ftp协议，个人建议rsync
|
 |
6
ctexlive 2014 年 11 月 24 日
应该可以测试吧。如果只有一个日志文件应该比较快。
ftp最大的问题是多个小文件传输极慢。 |
 |
7
lhbc 2014 年 11 月 24 日 via iPhone
取中间值，15分钟，5M大小，1000台机器。
那15分钟要传5G文件，需要带宽45M，算上开销要50M以上 如果文件更大，需要带宽更高 磁盘应该问题不大，CPU完全没问题 |
 |
8
herozzm 2014 年 11 月 24 日
我感觉vsftpd不太稳定，经常无故断开，0KB
|
|
9
AntiGameZ 2014 年 11 月 24 日
|
 |
10
Theo14 2014 年 11 月 24 日 1
问题肯定会出在网络IO上，同样觉得用rsync更合适，rsync有很多参数可以使用，限速的参数也有
|
 |
11
bertram 2014 年 11 月 24 日 1
用rsync比vsftp靠谱。既然是日志收集的活儿，怎么不用rsyslog, syslog这些专门工具呢
|
 |
12
msg7086 2014 年 11 月 24 日 via iPhone
我会建议用nfs？
|
 |
13
ryd994 2014 年 11 月 24 日 via Android
客户端加随机延迟，打散开
|
Select Language