这是一个创建于 1788 天前的主题，其中的信息可能已经有所发展或是发生改变。
我有三台服务器 128g 内存 24 核 cpu
其中一台是 mongodb，大约有 60 亿数据，我用另一台单机部署 datax，现在写了个脚本，从 mongodb 同步数据到 hdfs，hdfs 分布式部署在这三台机器上，速度非常慢，稳定在 800 条 /秒，我尝试修改 datax 的 speed 、channel 、byte 、record，效果都不佳。
启动命令是 datax.py --jvm="-Xms8G -Xmx8G" mongo2hdfs.json 也调整过 8G 这个参数，也没效果，请问大佬们，这是为什么呢，这个速度正常吗？
目前尚无回复
Select Language