#
NameNode在启动的时候，需要将Mettadata加载到内存中去，随着集群扩大，元数据的量也随之增加，内存压力过大。Hadoop1.x的缺点和解决办法：单点故障------à HA 一
Kcptun介绍Kcptun 是一个非常简单和快速的，基于 KCP 协议的 UDP 隧道，它可以将 TCP 流转换为 KCP+UDP 流。而 KCP 是一个快速可靠协议，能以比 TCP 浪费
重点组件：HDFS：分布式文件系统MAPREDUCE：分布式运算程序开发框架Hive：基于大数据技术（文件系统+运算框架）的SQL数据仓库工具Hbase：基于Hadoop的分布式海量数据库
【io.file.buffer.size】(core-site.xml)用来设置缓存的大小，较大的缓存提供更高效的数据传输，但也意味着更大的内存消耗和延迟默认值为4KB，一般情况下设置为64KB(65
DB2-HADR搭建1、系统环境搭建系统版本：CentOS-6.7-x86_64-bin-DVD1 1、选择 minimal2、安装完成配置IP、主机名 （/etc/hosts
1 概述 Yarn 是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而 MapReduce 等运算程序则相当于运行于操作系统之上的应用程序。 2 Yarn 基本架
01 hadoop伪分布式模型配置环境node1: 192.168.1.131 CentOS Linux release 7.21、安装hadoop#安装[root@node1 ~]# vim /et
setup 函数原码:（摘自《hadoop实战》）*Called once at the start of the task. protected void setup(Context context
闲来无事，突然看到关于Hadoop集群。以前也了解过，网上找过一些关于百度，谷歌等底层hadoop集群的文档，可是面对很多陌生的技术，看不太通透。所有想自己动手虚拟机试试。经常听到这么高大上的名词，H
今天小编就为大家带来一篇配置Hadoop HA 集群文件的文章。小编觉得挺不错的，为此分享给大家做个参考。一起跟随小编过来看看吧。> 1、hadoop-env.sh配置export JAVA_H
