#

大数据

  • 什么是大数据测试?它的发展前景如何?

    随着大数据技术的日益深入发展,大数据测试应运而生。可以预见,大数据测试将成为软件测试工程师的发展目标之一。可能对于许多人来讲,大数据测试还是一个十分陌生的概念。实际上,大数据测试不同于传统的软件测试,

    作者:鸽子
    2020-05-25 21:41:12
  • AIOps,未来正来

    Gartner预测,到2019年底,全球四分之一的企业将策略性地实施AIOps,支持两个或更多的IT运营功能。而到2022年,40%的大型企业将结合大数据和机器学习功能,支持和部分替代监测、服务台和自

    作者:华青融天
    2020-05-25 16:38:42
  • 精通大数据需要学会哪些核心技术?

      程序员必须掌握的大数据分析核心技术有哪些?大数据分析技术现是一种传统的技术分析模型,主要对数据进行筛选、过滤之后进行分析。随着银行业、保险业,电子商务的不断发展,非结构数据的数量越来越多,增加了大

    作者:鸽子
    2020-05-25 15:43:26
  • Sqoop新品来了

    Sqoop尽管稳定的应用于生产环境很多年,但是它自身存在的一些缺陷给实际操作带来了不便。Sqoop2便成为了研究使用的对象,那么Sqoop2有什么优势呢?首先我们先来了解一下Sqoop的使用情况,使用

    作者:caosheng03
    2020-05-25 12:15:40
  • 想学习大数据?这才是完整的大数据学习体系

    干货走起,闲话不多说,以下就是小编整理的大数据学习思路 第一阶段:linux系统 本阶段为大数据学习入门基础课程,帮大家进入大数据领取打好Linux基础,以便更好的学习Hadoop、habse、NoS

    作者:a大数据
    2020-05-25 09:27:00
  • spark2.x由浅入深深到底系列七之py4j在spark中python api的使用

    学习spark的任何技术前请先正确理解spark,可以参考: 正确理解Spark我们知道spark的RDD支持scala api、java api以及python api,我们分别对scal

    作者:tangweiqun
    2020-05-24 08:56:17
  • 什么是流式计算?

    一、流式计算的背景 在日常生活中,我们通常会先把数据存储在一张表中,然后再进行加工、分析,这里就涉及到一个时效性的问题。如果我们处理以年、月为单位的级别的数据,那么多数据的实时性要求并不高;但如果我们

    作者:先荐
    2020-05-24 01:56:15
  • ELK 实验(六)elasticsearch集群搭建

    本次实验使用3台虚拟机192.168.209.168 192.168.209.169 192.168.209.170 cp /usr/elasticsearch-6.2.3/config/elasti

    作者:pcdog
    2020-05-23 20:51:17
  • 基于MySQL和Otter实现生产环境安全的数据同步及查询

    前言在云平台的日常运维工作中,有很多故障排查和数据核对的场景,为了给全线运维人员(含部分开发和运营分析人员)提供现网数据的实时查询,我们使用MySQL和开源工具otter搭建了一套数据查询和管理系统,

    作者:金鑫8
    2020-05-23 16:13:41
  • Spark SQL笔记整理(二):DataFrame编程模型与操作案例

    [TOC] DataFrame原理与解析 Spark SQL和DataFrame 1、Spark SQL是Spark中的一个模块,主要用于进行结构化数据的处理。它提供的最核心的编程抽象,就是Data

    作者:xpleaf
    2020-05-22 11:26:15