#

hadoop

  • 大数据之HDFS命令行基本操作

    1、 课程简介 HDFS是Hadoop大数据平台中的分布式文件系统,为上层应用或其他大数据组件提供数据存储,如Hive,Mapreduce,Spark,HBase等。 本文章中所有命令均在CentO

    作者:万和IT教育
    2020-07-27 18:27:38
  • hadoop-env.sh配置

    1.hadoop的hadoop-env.sh配置,主要配置内容如下,指定jdk目录export JAVA_HOME=/usr/java/jdk1.7.0_79

    作者:素颜猪
    2020-07-27 17:09:55
  • HADOOP监控

    Hadoop负载均衡均衡器(balancer)是一个Hadoop守护进程,它将块从忙碌的datanode移到相对空闲的datanode,从而重新分配块。同时坚持块副本放置策略,将副本分散到不同机架,以

    作者:谁伴我闯荡
    2020-07-27 16:14:10
  • Hadoop1.x版本升级Hadoop2.x

    引言随着企业数据化和Hadoop的应用越加广泛,hadoop1.x的框架设计越来越无法满足人们对需求,Apache一直在对Hadoop1.x进行修改,最后推出了新一代的Hadoop2.x。从业界使用分

    作者:YU文武貝
    2020-07-27 15:13:08
  • Hadoop 系列(三)—— 分布式计算框架 MapReduce

    一、MapReduce概述 Hadoop MapReduce 是一个分布式计算框架,用于编写批处理应用程序。编写好的程序可以提交到 Hadoop 集群上用于并行处理大规模的数据集。 MapReduce

    作者:heibaiying
    2020-07-27 11:34:00
  • 安装hadoop图文

    1.下载hadoop-2.5.1,存放根目录2.通过tar -zxvf 包名 来进行解压3.通过mv命令将解压后的hadoop包移动到/home下4.修改hadoop-en.sh配置文件,添加jdk的

    作者:素颜猪
    2020-07-27 05:20:21
  • hadoop3种集群方式

     hadoop3种集群方式包括独立模式、伪分布式模式和完全分布式模式  1独立模式安装  a)下载jdk-8u65-linux-x64.tar.gz  b)tar开  $>su centos ;

    作者:大数据部落
    2020-07-27 04:37:51
  • 大数据技术Hadoop入门理论系列之一----hadoop生态圈介绍

       Technorati 标记: hadoop,生态圈,ecosystem,yarn,spark,入门 1. hadoop 生态概况Hadoop是一个由Apache基

    作者:gridmix
    2020-07-27 00:11:20
  • MapReduce编写wordcount程序代码实现

    MapReduce经典案例代码(wordcount) 以经典的wordcount为例,通过自定义的mapper和reducer来实现单词计数 package com.fwmagic.mapreduce

    作者:兴趣e族
    2020-07-26 20:20:59
  • hadoop多次格式化namenode造成datanode无法启动问题解决

    由于之前安装hadoop-2.5.0版本,一直都可以相关节点都可以起来。今天手贱格式化namenode,造成datanode启动失败。[root@xp hadoop-2.5.0]# sbin/hado

    作者:jiaohuanji88
    2020-07-26 16:37:44