想学大数据,求推荐学习路线,学习资料,测试数据

2023-08-25 11:59:55 +08:00
 qviqvi

想学一下大数据,感觉比较好找工作

现在 hadoop 和 hive 刚入门。感觉大数据相关的学习资料好少,求推荐

另外也求实战项目、测试数据推荐

1396 次点击
所在节点    程序员
3 条回复
NickYUyu
2023-08-25 12:25:12 +08:00
几年工作经验了
xinxingi
2023-08-25 18:10:45 +08:00
数据开发现状
我:这次换工作大概投了多少家,接到多少面试
我朋友:几百家,面试个位数,我个人感觉,有效面试不到 5 家,3 家这样

先列举大数据必知必会的几个组件给你 Spark(计算引擎)、Flink(计算引擎)、Datax(抽数工具只列举一种)、Hadoop(MR 引擎淘汰,大部分企业不用了,但你要会,这是大数据鼻祖了)、Hive(OLAP)、Clickhouse(OLAP)、Doris(OLAP)、DolphinSchduler(调度比较多只列举一种)、Iceberg 。就先围绕着这些学习吧,JAVA SE 、SCALA 必学,这两门语言在大数据领域很重要。python 会不会看你了,我反正没怎么学,工作中没用到主要。还有以前很火现在逐渐退出历史舞台的我没列举了,毕竟有更好的东西替代。

近几年 AI 崛起,大数据也要开始摸索 AI 在大数据的应用,这个都还没开始做或者刚开始做,但我估计只是时间问题。

基本的那些算法要会。

如果你偏向平台方向,你要会 spring

如果你偏向业务方向,你要会 BI(比较出名的 BI 报表国内有帆软等、国外 Apache 也有开源 Bi)。
qviqvi
2023-08-26 21:24:48 +08:00
@NickYUyu 两三年后端

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/968241

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX