Spark

  Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算， 拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS， 因此Spark能更 好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法

4
投票
13
已解决
20579
浏览

超级菜鸟怎么学习数据分析？数据挖掘、工具、技术、所需知识点等？

2018-01-08 14:44 提问
0
投票
0
回答
1082
浏览

spark中的Accumulator怎么创建为 HashMap类型的啊

2017-01-13 09:18 提问
0
投票
0
回答
879
浏览

请问我Spark要往mongo里面写数据要怎么写啊，需要哪个包？

2017-01-10 13:10 提问
0
投票
0
回答
1410
浏览

spark 总是 lost task 和 lost executor，，内存调大也没用......有解决方案么.....

2017-01-05 18:39 提问
0
投票
0
回答
1050
浏览

大神们，请教一个问题，能不能在spark streaming处理的同时，让spark从cassandra中读取数据，并合并数据

2017-01-04 15:34 提问
0
投票
0
回答
866
浏览

recurrent和recuror和recurrence. 有啥区别?

2017-01-03 08:58 提问
0
投票
0
回答
832
浏览

在Intellij IDEA中调试spark中的SparkPI报错

2016-12-29 17:38 提问
0
投票
0
回答
1625
浏览

spark邮件怎么快速让全部的未读邮件变成已读？

2016-12-28 09:30 提问
0
投票
0
回答
1161
浏览

请教个问题：spark streaming在计算时会出现数据重复的问题（也有人把这种情况叫”重复输出”），现在有办法解决吗？

2016-11-29 16:28 提问
0
投票
0
回答
940
浏览

大家好，我是一个初学者，有个问题想请教一下：用spark统计一个文本，怎么样得到每一行的行号，比如读取一个文本，得到的key是行号，value是该行的内容。

2016-11-18 17:33 提问
0
投票
0
回答
1675
浏览

询问一下spark streaming的问题，使用textfilestream 读不进去文件

2016-10-24 10:03 提问
0
投票
0
回答
1171
浏览

spark中的TFIDF的结果集每项参数是什么？

2016-08-23 10:56 提问
0
投票
0
回答
979
浏览

关于spark的延迟计算问题?

2016-06-22 10:31 提问
0
投票
0
回答
1876
浏览

如何在spark邮箱软件上添加未开启iMAP的POP3公司邮箱？

2016-06-15 20:37 提问
0
投票
0
回答
1505
浏览

如何在 Spark 的 Dataset 中保存超过 22 列的数据？

2016-05-31 16:49 提问
0
投票
0
回答
1127
浏览

大家好，问下的我的spark连接oracle取数据非常慢，数据很少，但是达到5秒了，用的.jdbc那个方式，有谁知道怎么回事

2016-05-25 14:12 提问

相关话题

887 人关注

最佳回复者

改版

反馈