#

hadoop

  • 学习Hive和Impala必看经典解析

    Hive和Impala作为数据查询工具,它们是怎样来查询数据的呢?与Impala和Hive进行交互,我们有哪些工具可以使用呢?我们首先明确Hive和Impala分别提供了对应查询的接口:(1)命令行s

    作者:caosheng03
    2020-10-24 21:10:24
  • 大数据开发都需要什么技术?

      大数据是对海量数据存储、计算、统计、分析等一系列处理手段,处理的数据量是TB级,甚至是PB或EB级的数据,是传统数据处理手段无法完成的,大数据涉及分布式计算、高并发处理、高可用处理、集群、实时性计

    作者:mo默羽
    2020-10-24 03:37:42
  • 使用docker部署hadoop集群的详细教程

    最近要在公司里搭建一个hadoop测试集群,于是采用docker来快速部署hadoop集群。 0. 写在前面 网上也已经有很多教程了,但是其中都有不少坑,在此记录一下自己安装的过程。 目标:使用doc

    作者:upupfeng
    2020-10-23 11:38:21
  • Java执行hadoop的基本操作实例代码

    Java执行hadoop的基本操作实例代码 向HDFS上传本地文件 public static void uploadInputFile(String localFile) throws IOEx

    作者:lqh
    2020-10-23 01:14:29
  • 在Docker中跑Hadoop与镜像制作方法

    重复造轮子,这里使用重新打包生成一个基于Docker的Hadoop镜像;   Hadoop集群依赖的软件分别为:jdk、ssh等,所以只要这两项还有Hadoop相关打包进镜像

    作者:LxFly
    2020-10-18 02:12:26
  • Linux64位操作系统(CentOS6.6)上如何编译hadoop2.4.0

    一、准备编译软件1.在官网下载jdk1.7、maven3.2.1、ant1.9.4,解压设置好环境变量就可以用。  环境变量设置如下:(1)执行vim /etc/profile  

    作者:liyong0802
    2020-10-17 15:46:23
  • Hadoop学习--通过API访问本地文件系统--day04

    import java.io.ByteArrayOutputStream;import java.io.InputStream;import java.net.URL;import org.apach

    作者:zhicx
    2020-10-16 15:56:08
  • Hadoop上Data Locality的详解

    Hadoop上Data Locality的详解 Hadoop上的Data Locality是指数据与Mapper任务运行时数据的距离接近程度(Data Locality in Hadoop refer

    作者:csguo007
    2020-10-12 13:05:59
  • 大数据hadoop入门之hadoop家族详解

    大数据这个词也许几年前你听着还会觉得陌生,但我相信你现在听到 hadoop 这个词的时候你应该都会觉得“熟悉”!越来越发现身边从事 hadoop 开发或者是正在学习 hadoop 的人变多了。作为一个

    作者:首席数据师
    2020-10-11 21:16:02
  • Apache Hive启动报NoClassDefFoundError错误

    hive启动报Exception in thread "main" java.lang.NoClassDefFoundError错误 原因:配置问题,Hadoop缺少相应的hiv

    作者:爱情89757
    2020-10-09 02:36:58