关于 spark 应用的请教

2016-05-10 12:50:24 +08:00
 chy373180

现有如下场景: mongo 中有大量记录,现在需要计算两两之间的相似度,用 spark 合适么,我觉得不是典型的 map reduce ,不知道是不是不适合用 spark 计算。希望大家给点思路。

2403 次点击
所在节点    程序员
2 条回复
lsnl8480
2016-05-10 13:17:38 +08:00
1 ,合适
2 , spark 实现了一些协同推荐的算法
3 , spark 读取 mongo 数据: https://databricks.com/blog/2015/03/20/using-mongodb-with-spark.html
chy373180
2016-05-10 14:29:40 +08:00
@lsnl8480 可以加个扣扣什么的 详细请教下么

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/277594

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX