天富娱乐注册注册开户 世博会现场管理图片？2023最新大数据入门教程一套通关

  01    第一章 Hello大数据&分布式

* 对大数据、分布式有基础的认知，了解大数据的诞生、作用

* 对大数据的技术体系进行入门认知，了解大数据技术体系的各类技术框架

* 对Apache Hadoop有基本的认知，了解Hadoop的发展和作用

  02   第二章 分布式文件存储系统 HDFS

* 了解分布式系统的基础架构

    * 掌握HDFS的基本架构

    * 完成HDFS集群环境的部署

    * 学习HDFS系统的shell命令

    * 对HDFS系统的运行原理进行深入学习

  03   第三章 MapReduce & YARN 入门

        * 了解分布式计算的基本概念

        * 认知MapReduce分布式计算框架

        * 认知YARN分布式资源调度框架

        * 掌握YARN的基本架构

        * 完成MapReduce & YARN集群的部署

        * 在部署集群内完成MapReduce和YARN的初体验

  04   第四章 分布式SQL计算 Hive入门

      * 了解Apache Hive的作用

      * 以抽象视角讨论如何实现分布式SQL计算

      * Hive基础架构分析

     * 部署Hive

      * Hive初体验，完成使用Hive进行分布式的SQL计算

      * 掌握各类Hive客户端的使用

  05   第五章 分布式SQL计算 Hive语法与概念

     * 掌握Hive数据库的相关操作语法

      * 掌握Hive数据表的相关操作语法(内部表、外部表、修改表、分区表、分桶表等)

      * 掌握Hive数据查询的相关操作语法(基本查询、UNION、虚拟列、数据抽样、RLINK正则)

           * 掌握Hive常用的内置函数

          * 完成Hive综合案例开发(数据统计、BI可视化展现)

  06   第六章 分布式高阶原理深入

    * MapReduce执行原理分析

    * Hive的各类排序

    * Hive的数据压缩

    * Hive的各类数据存储(ORC、列存储)

    * Hive调优(MapJoin、BucketMapJoin、动态分区、数据倾斜等)

    * YARN的队列和调度器分析

    * HDFS HA分析

    * Hadoop集群调优

  06   第七章 云原生大数据开发

    * 掌握云原生大数据的各类组件(DataWorks、MaxComputer等)

    * 基于云原生组件进行大数据实战案例的开发