Spark

  Spark是UC Berkeley AMP lab所开源的类Hadoop MapReduce的通用的并行计算框架，Spark基于map reduce算法实现的分布式计算， 拥有Hadoop MapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS， 因此Spark能更 好地适用于数据挖掘与机器学习等需要迭代的map reduce的算法

4
投票
13
已解决
20640
浏览

超级菜鸟怎么学习数据分析？数据挖掘、工具、技术、所需知识点等？

2018-01-08 14:44 提问
0
投票
1
已解决
3460
浏览

spark 里面，如何并行插入数据到数据库的不同表，表结构一样

2017-06-15 18:52 提问
0
投票
2
回答
4291
浏览

java.lang.ClassNotFoundException: kafka.serializer.StringDecoder对应的jar包是存在类的，但是找不到类，这是为什么？

2017-04-21 17:24 提问
0
投票
1
回答
1392
浏览

Spark 动态UDF

2017-04-20 09:03 提问
0
投票
1
回答
1213
浏览

没有java基础如何学习spark scala？

2017-04-19 14:26 提问
0
投票
1
回答
1691
浏览

spark mongodb 集群部署

2017-04-18 09:15 提问
0
投票
2
已解决
3094
浏览

spark中如何看有多少个并发的task啊

2017-04-06 10:05 提问
0
投票
0
回答
969
浏览

有没有谁用spark-launcher提交过SPARK任务的哦，我现在想用程序提交任务，并且要知道任务的执行情况，这个怎么考虑哦？

2017-04-11 10:27 提问
0
投票
1
已解决
2109
浏览

Microsoft R Server for Hadoop 与 R的sparklyr有什么区别？

2017-04-06 16:05 提问
0
投票
1
回答
2746
浏览

一个spark项目local启动不了，求大神指导（win10+idea2017+spark-core-2.10-1.6.1）

2017-04-05 17:14 提问
0
投票
1
已解决
1777
浏览

spark中如何看有多少个并发的task啊

2017-04-03 18:39 提问
0
投票
1
回答
1036
浏览

hive不建立在Spark的Master上，而是建立在worker上，后面存表可以吗？怎么指定hive的节点呢

2017-04-03 19:23 提问
0
投票
2
回答
1285
浏览

现阶段，请问一下 hadoop和spark分别用什么版本合适呢？

2017-03-24 10:37 提问
0
投票
1
回答
1036
浏览

IntelliJ IDEA安装scala插件问题

2017-03-28 14:17 提问
0
投票
1
已解决
1956
浏览

spark 一条数据格式为A:b,c,d 变成 (k,v) (A,b)(A,c)(A,d)

2017-03-27 17:23 提问
0
投票
2
已解决
1636
浏览

Scala中map(r=>(r(0),r(1))),与map(r=>(r._1,r._2))有什么不同呢？什么场景用呢？

2017-03-15 19:49 提问

相关话题

887 人关注

最佳回复者

改版

反馈