#

hadoop

  • 大数据服务 hadoop+spark

    博文后续编辑中

    作者:LANTIANFEIYING
    2020-07-12 17:15:07
  • HDFS的Shell操作(笔记)

    *基本操作(单集群):***1、创建文件夹命令[hadoop@master ~]$ hadoop fs -mkdir -p /201910212、上传文件命令[hadoop@master ~]$ h

    作者:wx5da03a3bd2999
    2020-07-12 13:16:33
  • 搭建部署Hadoop 之Yarn

    Yarn 集群资源管理系统Yarn 角色及概念•Yarn 是 Hadoop 的一个通用的资源管理系统• Yarn 角色    – Resourcema

    作者:Xuenqlve
    2020-07-12 12:25:16
  • dkhadoop大数据处理架构详解

    大数据的时代已经来了,信息的爆炸式增长使得越来越多的行业面临这大量数据需要存储和分析的挑战。Hadoop作为一个开源的分布式并行处理平台,以其高拓展、高效率、高可靠等优点越来越受到欢迎。这同时也带动了

    作者:adnb34g
    2020-07-12 10:28:01
  • Hadoop 系列(八)—— 基于 ZooKeeper 搭建 Hadoop 高可用集群

    一、高可用简介 Hadoop 高可用 (High Availability) 分为 HDFS 高可用和 YARN 高可用,两者的实现基本类似,但 HDFS NameNode 对数据存储及其一致性的要求

    作者:heibaiying
    2020-07-12 10:15:04
  • 【3】搭建HA高可用hadoop-2.3(部署配置hadoop--cdh5.1.0)

    【1】搭建HA高可用hadoop-2.3(规划+环境准备)【2】搭建HA高可用hadoop-2.3(安装zookeeper)       【3】搭建HA高可用h

    作者:酱酱酱子啊
    2020-07-12 08:48:17
  • yarn任务调度--capacity scheduler(容量调度) / fair schedule

    2019/2/19 星期二 yarn任务调度--capacity scheduler(容量调度) / fair scheduler(公平调度)由于集群资源有限,当无法满足众多application 的

    作者:马吉辉
    2020-07-12 05:03:54
  • hadoop分布式安装

    分布式安装(至少三台主机):环境所需软件:CentOS7hadoop-2.7.3.tar.gzjdk-8u102-linux-x64.tar.gz 安装前准备工作: 修改 /etc/hosts 文件

    作者:菜鸟的征程
    2020-07-11 21:02:03
  • 零基础如何学好大数据?必备需要学习知识

    大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段,处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统数据处理手段所无法完成的,其涉及的技术有分布式计算、高并发处理、高可用处理

    作者:a大数据
    2020-07-11 18:32:12
  • 大数据入门——搭建Hadoop处理环境

    由于Hadoop需要运行在Linux环境中,而且是分布式的,因此个人学习只能装虚拟机,本文都以VMware Workstation为准,安装CentOS7,具体的安装此处不作过多介绍,只作需要用到的知

    作者:Hjiangxue
    2020-07-11 17:13:28