Spark

  Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算， 拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS， 因此Spark能更 好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法

4
投票
13
已解决
20623
浏览

超级菜鸟怎么学习数据分析？数据挖掘、工具、技术、所需知识点等？

2018-01-08 14:44 提问
0
投票
1
已解决
1696
浏览

hadoop、spark等作业调度平台现在流行哪些开源框架？

2016-08-15 11:01 提问
0
投票
1
已解决
1538
浏览

使用IDEA编写的scala程序，放到服务器上运行一直报错

2016-08-10 20:41 提问
0
投票
1
已解决
2028
浏览

spark 一般是和hadoop安装在相同的主机上吗，分开部署好不好？

2016-07-27 11:27 提问
0
投票
1
已解决
2269
浏览

请教一下，spark sql能查询到大数据大家前端一般用什么工具展示呢？

2016-07-14 15:43 提问
0
投票
1
已解决
1344
浏览

请教一个问题，spark 1.6 on yarn的历史服务器总看不到历史日志，参考了很多资料都没出来，有什么关键配置的吗？ 在spark histroy server可以看到历史job了，在yarn的就是看不到

2016-07-11 16:47 提问
0
投票
1
已解决
923
浏览

spark如何分析hdfs 的txt文件

2016-07-01 15:23 提问
0
投票
4
已解决
1150
浏览

spark部署选型问题

2016-05-20 15:33 提问
0
投票
1
回答
2253
浏览

CDH5安装后，在HUE中启动spark后，怎么运行spark shell和执行spark sql

2016-06-22 18:05 提问
0
投票
0
回答
981
浏览

关于spark的延迟计算问题?

2016-06-22 10:31 提问
0
投票
1
已解决
1280
浏览

进入pyspark报错了，求救啊？

2016-06-21 09:36 提问
0
投票
0
回答
1878
浏览

如何在spark邮箱软件上添加未开启iMAP的POP3公司邮箱？

2016-06-15 20:37 提问
0
投票
1
已解决
1791
浏览

spark如何实现key value对换？

2016-06-04 10:28 提问
0
投票
1
已解决
1688
浏览

spark sql查询千万级别的数据1-2秒算不算很慢？

2016-06-03 14:27 提问
0
投票
0
回答
1506
浏览

如何在 Spark 的 Dataset 中保存超过 22 列的数据？

2016-05-31 16:49 提问
0
投票
0
回答
1127
浏览

大家好，问下的我的spark连接oracle取数据非常慢，数据很少，但是达到5秒了，用的.jdbc那个方式，有谁知道怎么回事

2016-05-25 14:12 提问

相关话题

887 人关注

最佳回复者

改版

反馈