Sqoop – HADOOP和RDBMS数据交换

Sqoop1:wget http://mirrors.ustc.edu.cn/apache/sqoop/1.4.4/sqoop-1.4.4.bin__had...

Hadoop原理及部署初探(转)

HadoopHadoop为何物Hadoop是一个分布式系统基础架构,由Apache基金会所开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的...

hadoop tez-ui 编译安装错误

hadoop tez-ui 编译安装错误错误一问题描述tez-ui编译命令mvn clean package -DskipTests=true -Dmaven.jav...

大数据技术③|大数据第13章|Hadoop 分布式文件系统|20:30~20:55

13章的习题——Hadoop 分布式文件系统 目录 13章的习题——Hadoop 分布式文件系统 13.1 Hadoop 分布式文件系统有何特点和基本功能&...

从零开始搭建hadoop集群

本文主要记叙了如何在centos7.2上搭建cdh平台,使用mysql为元数据管理库(官方推荐),安装了Spark2和Kafka组件。一、软件准备cdh5.13.3-...

docker搭建hadoop和hive集群

一、安装docker并生成相关的镜像 (1)安装docker安装docker教程https://www.runoob.com/docker/centos-docker...

用Maven构建Hadoop项目

 前言Hadoop的MapReduce环境是一个复杂的编程环境,所以我们要尽可能地简化构建MapReduce项目的过程。Maven是一个很不错的自动化项目构...

Hive 报错 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaExce

FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask....

Hadoop 的 NameNode 节点的备份机制与恢复方法

NameNode 出现问题了如何恢复?NameNode的守护进程可以通过人工的方式从SecondaryNameNode上拷贝一份fsimage来恢复数据1、hadoo...

Hadoop 下 WordCount 程序运行方法及过程分析

1 WordCount 程序运行方法现在有四个小的文本文本内容分别是把这四个文件所在的文件夹 input 放在 HDFS 中运行 Hadoop 自带的 WordCou...