#
Idea+Centos7+hadoop-2.7.3源码阅读环境搭建 1.环境准备 安装maven 3.5.4 下载地址: http://mirrors.shu.edu.cn/apache/maven
主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项
版本选择选择 Hadoop 版本对HBase部署很关键。下表显示不同HBase支持的Hadoop版本信息。基于HBase版本，应该选择合适的Hadoop版本。HBase-0.92.xHBase-0.9
大数据架构图从底层往上到应用层Hive(SQL like HiveSQL)Map/Reduce Tez Spark (计算引擎)Yarn（资源调度引擎）HDFS（文件系统）
1.HA配置(1).high availability,高可用 持续服务的能力 多台主机之间进行
折腾了三天，编译成功，并通过测试了，有需要的可以下载。#######################################################################【1
我口才不好，文字描述也不行，但是基本逻辑是通的。 导出jar包1.首先完成mapper和reducer还有main方法的编码2。右键点击peopleinfo的包，选择export-》Java-》JAR
Hadoop是一个开源框架，它允许在整个集群使用简单编程模型计算机的分布式环境存储并处理大数据。它的目的是从单一的服务器到上千台机器的扩展，每一个台机都可以提供本地计算和存储。“90％的世界数据在过去
大数据定义是：大量的非结构话的数据。量要大，要非结构化。Hadoop 分三部分组成，1.hdfs hadoop分布式文件系统。2.MapReduce 分布式计算。3.hive 分布式存储。操作系统：c
1、NamenodeHDFS的守护进程记录文件时如何分割成数据块的，以及这些数据块被存储到哪些节点上对内存和I/O进行集中管理是个单点，发生故障将使集群崩溃2、Secondary Namenode监控
