spark 的开发环境应该是怎样的?

2017-03-13 09:58:59 +08:00
 twogoods

在看 spark 的 mlib 包,用的是 Java 语言,发现把包导入后本地机器直接 run 就可以跑出结果,看日志感觉是每次都启动 spark 进程, helloworld 级别的跑一次也要好几秒,这里是不是 spark 的启动花了不少时间?想问问你们一般是怎么开发调试的

1383 次点击
所在节点    程序员
2 条回复
mind3x
2017-03-13 10:54:02 +08:00
用 Scala ,小东西直接在 spark-shell 下面试
qfdk
2017-03-13 15:49:40 +08:00
@mind3x 一楼真理了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/346989

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX