Hadoop

  Hadoop 是 Apache 软件基金会所研发的开放源码并行运算编程工具和分布式档案系统,与 MapReduce 和 Google 档案系统的概念类似

1
推荐
1727
阅读

PeopleRank从社交网络中发现个体价值

前言如果说Google改变了互联网,那么社交网络就改变人们的生活方式。通过社交网络,我们每个个体,都是成为了网络的中心。我们的生活半径,被无限放大,通过6...
1
推荐
2412
阅读

RHadoop实践系列之一:Hadoop环境搭建

第一篇 Hadoop环境搭建部分,分为3个章节。Haddop环境准备 Hadoop完全分步式集群搭建 HDFS测试 每一章节,都会分为”文字说明部分”和”代码部分”,保持文字说明...
1
推荐
2809
阅读

RHadoop实践系列之二:RHadoop安装与使用

第二篇 RHadoop安装与使用部分,分为3个章节。1. 环境准备 2. RHadoop安装 3. RHadoop程序用例 每一章节,都会分为”文字说明部分”和”代码部分”,保持文字说明...
1
推荐
2307
阅读

RHadoop实践系列之四 rhbase安装与使用

第四篇 HBase和rhbase的安装与使用,分为3个章节。 1. 环境准备及HBase安装 2. rhbase安装 3. rhbase程序用例 每一章节,都会分为”文字说明部分”和”代码部分”...
1
推荐
1907
阅读

RHadoop培训 之 Linux基础课

前言覆盖Linux基础知识,快速上手,搭建RHadoop环境的基础课。目录背景知识文件系统常用命令vi编辑器用户管理磁盘管理网络管理系统管理软件包管理常用软件1. ...
1
推荐
2263
阅读

RHadoop培训 之 Java基础课

前言覆盖java基础知识,快速上手,RHadoop环境的搭建基础课。目录背景知识开发环境JAVA的编译及运行环境JAVA语法JDK基本包介绍JAVA项目(ant, maven)1. 背景知...
1
推荐
2117
阅读

让Hadoop跑在云端系列文章 之 创建Hadoop母体虚拟机

前言通过虚拟化技术,我们可轻松的增加或删除一台虚拟机。结合hadoop技术,我们需要先创建一台配置好hadoop环境虚拟机,作为克隆的母体。非虚拟化安装Hadoop...
1
推荐
1998
阅读

让Hadoop跑在云端系列文章 之 克隆虚拟机增加Hadoop节点

前言通过虚拟化技术,我们可轻松的增加或删除一台虚拟机。像hadoop技术,安装,配置,运维,管理都很复杂,如果能通过虚拟化技术,降低运维成本,是多么开心...
1
推荐
1952
阅读

让Hadoop跑在云端系列文章 之 增加删除hadoop节点

前言让Hadoop跑在云端系列文章,经过前面几篇文章的介绍,我们已经可以创建并管理虚拟机,增加hadoop节点。本文只是把操作过程整理一下,做一个操作总结,让...
1
推荐
2086
阅读

Hive导入10G数据的测试

前言Hadoop和Hive的环境已经搭建起来了,开始导入数据进行测试。我的数据1G大概对应500W行,MySQL的查询500W行大概3.29秒,用hive同样的查询大概30秒。如果我...
1
推荐
2352
阅读

ZooKeeper伪分步式集群安装及使用

前言ZooKeeper是Hadoop家族的一款高性能的分布式协作的产品。在单机中,系统协作大都是进程级的操作。分布式系统中,服务协作都是跨服务器才能完成的。在ZooK...
1
推荐
2815
阅读

ZooKeeper实现分布式FIFO队列

前言ZooKeeper是一个强大的分布式协作系统,用ZooKeeper可以方便地实现先进先出(FIFO)队列。给“队列”的技术现实多一种选择,标准化我们的程序结构。另一篇,...
1
推荐
2882
阅读

hadoop设置用户

异常:org.apache.hadoop.security.AccessControlException: Permission denied: user=zhangsan, access=WRITE, inode="/":hdfs:supergroup:drwxr-xr-x通常的...
1
推荐
1588
阅读

【数据蒋堂】第47期:Hadoop – 一把杀鸡用的牛刀

Hadoop是个庞大的重型解决方案,它的设计目标本来就是大规模甚至超大规模的集群,面对的是上百甚至上千个节点,这样就会带来两个问题:1. 自动化管理管任务分...
0
推荐
2285
阅读

[转]Connecting OBIEE 11.1.1.7 to Hadoop Data Sources

Connecting OBIEE 11.1.1.7 to Hadoop Data SourcesIn my introduction to the topic I said that whilst writing MapReduce routines in Java, and then orc...

1102 人关注

最佳回复者

改版

反馈