MarsJ

大数据玩家~DS

始于: 2015-10-13

广东省 广州市

发私信

1580

总声望

216

次被推荐

0

粉丝

他的回答
排序:

0
投票

hive建表的时候用location,和用load file导数,有什么区别?

首先,这俩有一定的联系,但联系不大。 1,location建表时表示该表的数据内容具体存放的HDFS目录位置,即便不设置location,Hive会为其制定默认...

2016-11-28 09:15 回复了该问题
0
投票

各位大神问一下spark-submit提交程序出现错误,求指导

你提交的作业中应该缺少类,本地运行可以正常执行吗?

2016-11-28 09:13 回复了该问题
0
投票

问下大数据面试一般都问什么啊

大数据很多不同方向,不同方向侧重点不同,例如数据挖掘与机器学习,侧重于算法;大数据开发,侧重于数据处理和开发;数据分析,侧重于SQL等。

2016-11-28 09:12 回复了该问题
0
投票

怎么调整一个map的内存呢,mapred.map.child.java.opts mapreduce.task.io.sort.mb 试了,没效果

MapReduce的内存可以通过下面4个配置选项 mapreduce.reduce.memory.mb mapreduce.map.memeory.mb map...

2016-11-14 14:38 回复了该问题
0
投票

求助HbaseUI上显示的这些waiting是什么意思

你是在做什么操作的时候发生的吧? Regionserver状态全部正常吗?

2016-11-09 19:11 回复了该问题
0
投票

Hadoop集群有一个机器DataNode(总共有1个master,2个slave )启动不了,怎么回事?求大神解答

首先可以查看该机器上的DataNode相关的日志找出错误信息分析,有可能的原因是该机器上的防火墙开着了,或SSH没做好,通信有问题,无法启动起来

2016-11-09 19:11 回复了该问题
0
投票

我搭建没问题呀,目前hadoop集群,hbase集群,flume,zookeeper,spark都搭建起了,而且也实现了flume入库到hbase了,但是不知道下步做什么了

你好,你的集群环境不是应该与你的业务或学习需求有关系吗?或者自己找些Task来做

2016-11-07 14:15 回复了该问题
0
投票

我用sqoop从hdfs导数据到mysql时报的错,这是怎么回事

反序列化。。。有配置过任何跟序列化有关的项吗? 按照错误日志,跟HBase配置有关系,不太清楚你使用sqoop导出时似乎什么环境,为啥会跟HBase的相关属性有...

2016-11-07 14:14 回复了该问题
0
投票

各位大神,请问我这个是端口原因吗 还是配置环境java路径有错误?

9000端口拒绝连接。 1,检查你的HDFS是否正常启动,包括Nameonode和DataNode 2,检查一下防火墙

2016-11-03 11:46 回复了该问题
0
投票

sparksql 和hive 同一个sql查询同一个表得出的结果不一样,各位大神有解决思路吗?

最好把Sparksql实现代码和HiveQL代码贴出来

2016-11-03 11:44 回复了该问题
0
投票

最近在搭建hadoop集群 运行实例时一直报这个错 请帮忙看看

DataNode异常

2016-11-03 11:43 回复了该问题
0
投票

sqoop mysql hdfs 提示超时

看着像MySQL数据库连接的问题,具体环境不一样不知道会怎么样,我这里MySQL5.1

2016-11-02 14:58 回复了该问题
0
投票

大神们,hive导数据到oracle中,hive中为string,oracle为date类型的如何转换啊

可以多参考Hive的官方文档手册上的各种UDF函数,字符串、时间等函数的具体部分。 https://cwiki.apache.org/confluence/di...

2016-11-02 08:42 回复了该问题
0
投票

从MySQL导入数据到hive,显示成功了,为什么在hive里面没有数据

导入命令是什么?默认情况下会导到hdfs的/user/$USER/目录下,导入是成功了,需要根据你的导入命令具体分析。

2016-11-02 08:41 回复了该问题
0
投票

sqoop job -exec job1提示输入密码,能否在命令行直接将密码补全

sqoop job执行时要求输入密码,即便在create job的时候有设置密码,仍然会要求输入。如楼上波波老师所说,可以试一下密码文件

2016-11-02 08:39 回复了该问题

改版

反馈