公司 Flink 集群(单机)和其他组件部署在一台服务器上,嫌弃我占用 CPU 过高,有什么办法优化吗?

2023-04-14 11:39:26 +08:00
 gzk329
数据计算压力不小的,16 小时 760GB 数据过去,我看了下 CPU 占用高的线程,调用栈就是在执行计算,代码应该没有漏洞的,可能就是性能不行?
但是我的理解,流计算这种本来不就是计算密集型的吗,我吃 CPU 很正常啊,还是说能优化下?求指教
904 次点击
所在节点    问与答
3 条回复
sadfQED2
2023-04-14 11:56:27 +08:00
除了加机器,还能有其他优化?数仓这一套,本来就是堆机器换性能啊
daxin945
2023-04-14 13:52:26 +08:00
换 Spark ?单机的话感觉 flink 的优势没法完全体现出来啊
kkkiio
2023-04-14 22:49:50 +08:00
Flink 也是普通程序,想优化就 profile 看看瓶颈咯

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/932471

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX