目前快离职半年了,一直磨磨蹭蹭,心态不怎么好,总感觉找不到工作,事实证明真的如此,太菜了, 之前是用 spark sql 做 数据报表, 真的是 sql boy /笑哭,整个项目组都是从 0 开始的,踩了不少坑,; 我主要是负责数据读取,计算的优化,还有一些 spark 的配置参数,调参无限好,只是费时间 ,哈哈,最后还好,解决了不少性能瓶颈上的问题,缩短了不少整个项目的读取计算时间,还算蛮有收获的,到现在我也想不通为什么,当时我 leader 让我上,明明是个菜鸡.
目前快离职半年了,一直磨磨蹭蹭,心态不怎么好,总感觉找不到工作,事实证明真的如此,太菜了, 之前是用 spark sql 做 数据报表, 真的是 sql boy /笑哭,整个项目组都是从 0 开始的,踩了不少坑,; 我主要是负责数据读取,计算的优化,还有一些 spark 的配置参数,调参无限好,只是费时间 ,哈哈,最后还好,解决了不少性能瓶颈上的问题,缩短了不少整个项目的读取计算时间,还算蛮有收获的,到现在我也想不通为什么,当时我 leader 让我上,明明是个菜鸡.
Select Language