#

hadoop

  • Hadoop集群问题集

    1、bigdata is not allowed to impersonate xxx 原因:用户代理未生效。检查core-site.xml文件是否正确配置。 &

    作者:蜷缩的蜗牛
    2020-08-11 06:52:07
  • YARN 内存参数终极详解

    很多朋友在刚开始搭建和使用 YARN 集群的时候,很容易就被纷繁复杂的配置参数搞晕了:参数名称相近、新老命名掺杂、文档说明模糊 。特别是那几个关于内存的配置参数,即使看好几遍文档也不能完全弄懂含义不说

    作者:cymvp
    2020-08-11 04:41:09
  • 解析RDD在Spark中的地位

    1.Spark的核心概念是RDD (resilient distributed dataset),指的是一个 只读的,可分区的分布式数据集,这个数据集的全部或部分可以缓存在内存中,在多次计算间重用。2

    作者:Hjiangxue
    2020-08-11 00:01:28
  • 让我们一起走进大数据开源项目--第2节

    看了上一节,这节我们来讲解一下: 数据可视化 在大数据的海洋中,如何更直观对数据进行探索和可视化也是目前最值得关注的方向,这类开源项目包括D3,Chart.js, Arbor, DC.js, Sigm

    作者:哈斗篷
    2020-08-10 10:16:14
  • 大数据之---hadoop问题排查汇总终极篇---持续更新中

    1、软件环境 RHEL6 角色 jdk-8u45hadoop-2.8.1.tar.gz   sshxx.xx.xx.xx ip地址 NN hadoop1xx.xx.xx.xx ip地址 DN hado

    作者:ycwyong
    2020-08-10 04:36:45
  • Hadoop集群(二) HDFS搭建

       HDFS只是Hadoop最基本的一个服务,很多其他服务,都是基于HDFS展开的。所以部署一个HDFS集群,是很核心的一个动作,也是大数据平台的开始。   

    作者:hsbxxl
    2020-08-09 16:33:49
  • 大数据测试之hadoop单机环境搭建(超级详细版)

    友情提示:本文超级长,请备好瓜子Hadoop的运行模式单机模式是Hadoop的默认模式,在该模式下无需任何守护进程,所有程序都在单个JVM上运行,该模式主要用于开发和调试mapreduce的应用逻辑;

    作者:小强测试
    2020-08-09 12:19:02
  • Hadoop文件存储的葵花宝典

    文件存储分行存储和列存储,每个存储格式里面又分不同的类型,在实际的应用中如何去使用?怎样去使用?快来围观吧!文件存储格式,我们在什么时候去指定呢?比如在Hve和Ipala中去创建表的时候,我们除了指定

    作者:caosheng03
    2020-08-09 00:14:41
  • hbase和hive的基本配置

    hadoop配置在上篇博客已介绍,此处直接配置hbase和hivemaster节点:lab201,slave节点:lab201,lab202,lab203三个节点均执行如下操作( 以下以master结

    作者:201209171411
    2020-08-08 16:41:40
  • hadoop环境搭建

    一 hadoop 简介 1 Hadoop 整体框架 Hadoop 由HDFS 、MapReduce、HBASE、hive 和zookeeper 等成员组成,其中最基础最重要的元素是底层用于存储集群中所

    作者:长跑者1号
    2020-08-08 14:51:57