Hadoop

  Hadoop 是 Apache 软件基金会所研发的开放源码并行运算编程工具和分布式档案系统,与 MapReduce 和 Google 档案系统的概念类似

25
推荐
19016
阅读

Hadoop集群搭建笔记

1、安装虚拟机VMware workstationCentOS 镜像 安装Linux虚拟机:(在Win7上)1)安装VMwareWorkstations(可修改配置)2)添加CentOS镜像(启动安装 ->...
14
推荐
3762
阅读

YARN笔记

hadoopYARN 笔记1. YARN的产生背景2. YARN的设计思想3. YARN的基本架构4. YARN的工作流程(小结)YARN课程地址:https://edu.hellobi.com/course/93/play/les...
11
推荐
1772
阅读

PageRank算法并行实现

前言Google通过PageRank算法模型,实现了对全互联网网页的打分。但对于海量数据的处理,在单机下是不可能实现,所以如何将PageRank并行计算,将是本文的重点...
10
推荐
3023
阅读

Hadoop介绍

Hadoop 介绍1、Hadoop的前世今生2、Hadoop架构变化3、Hadoop 的主要模块大数据系列视频教程 https://edu.hellobi.com/course/931、Hadoop的前世今生Hadoop :&...
9
推荐
3953
阅读

数据开发系列篇(1):大数据处理和编程实践Hadoop(一)

—————————————————禁止转载———————————————————————————#作者:面包君#时间:2016-4-7#知乎专栏:数据分析侠http://zhuanlan.zhihu.com/dataman首先也是非常...
9
推荐
12420
阅读

Hadoop的几种运行模式

Hadoop的几种运行模式1、Hadoop集群学院视频链接:https://edu.hellobi.com/course/93/play/lesson/14001、Hadoop集群Master:主节点,对Hadoop来说,运行着N...
7
推荐
4030
阅读

Hadoop概括——学习笔记<一>

前言第一章主要讲的是hadoop基础知识。老师讲的还是比较全面简单的,起码作为一个非专业码农以及数据库管理人员,也能狗大致了解其特点首先是概括图(以hadoo...
7
推荐
10508
阅读

Sqoop 1.4.6 导入实战 (RDB含MySQL和Oracle)

Sqoop-1.4.6使用手册-v1.0-import部分安装使用Sqoop-1.4.6.jarJDBC包导入从RDB导入数据至HDFSOracleMySQL从RDB导入数据至HiveOracleMySQL导入全部表空值处理...
7
推荐
2452
阅读

hadoop学习第一天-linux虚拟机安装,网卡设置,linux目录介绍

一,下载安装介质01.安装介质:    centos镜像文件(文件名为:CentOS-6.6-x86_64-bin-DVD1.iso):链接:http://pan.baidu.com/s/1qXBmPg4 ...
7
推荐
2448
阅读

大数据环境-快速安装使用

安装大数据环境的技术博文、甚至视频课在网上有太多太多啦。还是有很多小伙伴很头疼环境安装配置,怎么安装怎么配置,总有出错的地方,都其中最头疼的莫过于L...
7
推荐
4804
阅读

实现Hive查询操作HBase中的数据

今天主要给大家讲解一下,如何使用Hive来查询及操作HBase里面的数据,也就是实现二者的数据互通互导,相互操作。首先不了解HBase的亲可以看一下我之前写过的...
6
推荐
3908
阅读

Hadoop集群系列(目录)

下面是Hadoop集群系列的目录安排,按照一星期发布一期的原则进行。希望大家的关注。  目录安排:  1)Hadoop集群_第1期_CentOS安装配置_V1.0  2)Hadoo...
6
推荐
3295
阅读

那些年踩过的hadoop坑

      首先说明一下,只想分享一下关于hadoop在实际应用的时候选择问题。其实目前主流的hadoop选择主要有两种:       1...
6
推荐
2288
阅读

Hive实战技能 第一部

课程终于上线了,自己的第一部课,算是对自己这几年职业生涯的一次总结。接触Hive比较久,一个版本一个版本的跟到现在,从最初连NOT IN 和 NOT LIKE都不支持...
6
推荐
2979
阅读

三步构建Hive自己的dual

       dual表的概念来自oracle,数据库建立时即与数据字典一起初始化,该表只有一个varchar2类型名为dummy的字段,表数据只有一行“X”,...

1102 人关注

最佳回复者

改版

反馈