#

hadoop

  • HDFS HA架构

    HA背景对于HDFS、YARN的每个角色都是一个进程,比如HDFS:NN/SNN/DN   老大是NNYARN:RM/NM   老大是RM对于上面,都会存在单点故障的问题,假如老大NN或者RM挂了,那

    作者:xiao酒窝
    2020-06-30 18:39:45
  • Hadoop HDFS Balancer

    Hadoop HDFS Balancer    Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点。当HDFS出现不平衡状况的时

    作者:zlfwmm
    2020-06-30 15:16:04
  • 安装hadoop伪分布式模式(Single Node Cluster)

    目的本文档介绍如何去安装单节点hadoop集群,以便你可以的了解和使用hadoop的HDFS和MapReduce.环境:os: CentOS release 6.5 (Final)ip: 172.16

    作者:Darren_Chen
    2020-06-30 09:33:34
  • 大数据Hadoop集群搭建

    大数据Hadoop集群搭建 一、环境 服务器配置: CPU型号:Intel(R) Xeon(R) CPU E5-2620 v4 @ 2.10GHzCPU核数:16内存:64GB 操作系统 版本:Cen

    作者:898009427
    2020-06-30 09:08:45
  • Mysql java JDBC驱动jar包

    mysql-connector-java- 8.11.tar .gz mysql-connector-java-8.0.11.zip 说明:在学习Hive时,需要用mysql存储元数据,需要用到jav

    作者:京斗码农
    2020-06-29 23:28:42
  • Hadoop HA 双namenode搭建

    机器分布hadoop1 192.168.56121hadoop2 192.168.56122hadoop3 192.168.56123准备安装包jdk-7u71-linux-x64.tar.gzzoo

    作者:hbxztc
    2020-06-29 14:54:45
  • 在Impala 和Hive里进行数据分区(1)

    进行数据分区将会极大的提高数据查询的效率,尤其是对于当下大数据的运用,是一门不可或缺的知识。那么数据怎么创建分区呢?数据怎样加载到分区呢?Impala/Hive按State分区Accounts(1)示

    作者:caosheng03
    2020-06-29 12:02:30
  • hadoop环境安装配置介绍与步骤

    在上一篇的分享文章中我是给大家分享了运行部署hadoop的一些安装准备工作,这篇接上一篇继续为大家分享一些个人的学习经验总结。我学习用的是大快发行版DKHadoop,所以所有的经验分享都是以DKHad

    作者:adnb34g
    2020-06-29 11:31:42
  • 大数据学习系列之七 ----- Hadoop+Spark+Zookeeper+HBase+Hive集

    引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试。其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式。至于为什

    作者:虚无境
    2020-06-29 06:45:22
  • 想学大数据发展的小伙伴注意了,这十大点你清楚吗

    现在由于人工智能的大热,这方面的人才稀缺,薪资水平不用说,行业中的NO.1,所以各路人马纷纷集结互联网行业,有转行的,有转岗的。对于初学者在学习这方面肯定有许多疑问,是什么疑问呢,我在这里一 一给你解

    作者:编程南风
    2020-06-29 06:27:44