各位 spark 上用的语言是 Python 还是 scala

2017-11-28 07:08:04 +08:00
 ufo22940268

我们用的是 Python,但是 python 上还是少了一些功能,比如说 udaf

想问下大家用的是哪个语言,有没有必要从 python 切换到 scala

21265 次点击
所在节点    程序员
35 条回复
echo1937
2017-11-28 07:16:28 +08:00
用的 Java,学习 Scala 的成本有点高
tinybaby365
2017-11-28 07:18:04 +08:00
Scala,越用越喜欢
ihainan
2017-11-28 07:29:42 +08:00
Scala。
anjunecha
2017-11-28 07:39:43 +08:00
python 和 java 都有,想学 Scala
kuroismith
2017-11-28 07:41:19 +08:00
我们用的 kotlin, scala 学习成本太高了
kotlin 非常容易上手, 写起来至少有 scala 8 成体验
teloti
2017-11-28 07:46:42 +08:00
python+spark 有性能问题,java 和 Scala 靠谱一些,Scala 是 spark 标配
knightdf
2017-11-28 09:58:31 +08:00
必须 scala, 再怎么也得 java,不会选择 python
burnex
2017-11-28 10:00:17 +08:00
网上看大家都用 scala,就用的 scala
lianxiaoyi
2017-11-28 10:54:41 +08:00
python 最简单。。。所以用的 python。。。。。
wusuopuBUPT
2017-11-28 11:22:23 +08:00
Scala,可以用最新的 feature
bnbvb
2017-11-28 11:40:52 +08:00
python 可以,听了前两天 java 迭代计划,新的 feature 出的会比以前快多了,而就新公布的语法糖来看,会跟 scala 之类的语言越长越像(chao de kuai),学习 scala 动力不足了。
90928yao
2017-11-28 12:08:36 +08:00
@kuroismith kotlin 还是用的 JAVARDD 把,还是有点蹩脚把
bramblex
2017-11-28 12:13:14 +08:00
被 Haskell 虐过的表示...
楼上说学 scala 学习成本高?
ufo22940268
2017-11-28 12:37:49 +08:00
@bnbvb 能不能发个链接给我
bigknife
2017-11-28 13:35:18 +08:00
首选 Scala !

如果把 Scala 当作 Better Java 其实学起来并不难,仅仅是一些语法上的变换,一旦学会了 Scala 的语法以后,再也不想写 Java 代码了,然后真的理解了为什么那么多人说 Java 非常啰嗦!

如果把编程范式一起也变了(命令式 -> 函数式),那还是有一定难度的,关键是思想的改变,推荐 Scala 的红宝书《 Functional Programming in Scala 》,https://www.manning.com/books/functional-programming-in-scala 网上也有英文的 pdf 版本,国内有一个翻译版,英文好的同学建议看英文版,因为有些东西翻译过来后,感觉怪怪的,不容英文容易懂。

另外我们团队有一个分享视频集合,对大家学习 Scala 有帮助: http://v.youku.com/v_show/id_XMzExNTk5MDUzMg==.html?spm=a2hzp.8244740.0.0&f=51304613 如果大家发现里面有什么错误可以跟我交流:bigknife AT outlook.com
bigknife
2017-11-28 13:39:31 +08:00
@bramblex 学会 Haskell,走遍天下都不怕,上通 Scala,下探 Rust
hwsdien
2017-11-28 13:49:09 +08:00
scala
wilsonwen
2017-11-28 13:59:50 +08:00
人生苦短,我用 scala
Todd_Leo
2017-11-28 14:14:46 +08:00
写了几年 Scala 之后再写 Python 感觉动态类型语言随时都是心惊肉跳...
linuxchild
2017-11-28 14:28:12 +08:00
最近开始写 spark,前两天看同时写了一下午 Scala,然后发现有点问题,和我之前写的 python 程序做一下对比,发现 py 2 行就搞定了,他有一些崩溃……

不过我还是开始学习 Scala 了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/410076

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX