spark 的开发环境应该是怎样的？

2017-03-13 09:58:59 +08:00
 twogoods

在看 spark 的 mlib 包，用的是 Java 语言，发现把包导入后本地机器直接 run 就可以跑出结果，看日志感觉是每次都启动 spark 进程， helloworld 级别的跑一次也要好几秒，这里是不是 spark 的启动花了不少时间？想问问你们一般是怎么开发调试的

1439 次点击
所在节点    程序员
2 条回复
mind3x
2017-03-13 10:54:02 +08:00
用 Scala ，小东西直接在 spark-shell 下面试
qfdk
2017-03-13 15:49:40 +08:00
@mind3x 一楼真理了

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/346989

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX