水电知识网——水电知识的资源中心和服务中心

 




  



 

           　

　

        6.2-大数据分析引擎Pig

　

              

　

               　

　

        6.3-大数据分析引擎Presto

　

            

　

       　

　

        6.4-大数据分析引擎Spark SQL

　

               　

　

               　

　

        6.5-大数据分析引擎Flink Table & SQL

　

         

　

 

　

七、分布式协调服务ZooKeeper

　

     

　

 

　

八、数据的ETL采集框架

　

       

　

       　

　

九、消息系统Kafka

　

   

　

 

　





  



　

 

　

 

　

 

1. 大数据核心理论基础与架构


1.1-什么是大数据


1.2-Hadoop的理论基础


1.3-大数据生态圈组件


1.4-基于大数据平台组件的平台架构


2. 大数据存储系统


2.1-分布式文件系统HDFS


2.2-NoSQL数据库之HBase


3. 大数据离线计算引擎


3..1-分布式计算模型MapReduce


3.2-离线计算引擎Spark Core


3.3-批处理引擎Flink DataSet API


4. 大数据实时计算引擎


4.1-大数据流式计算引擎Spark Streaming


4.2-大数据流式计算引擎Flink DataStream API


5. 大数据分析引擎


5.1-大数据分析引擎Hive


5.2-大数据分析引擎Pig


5.3-大数据分析引擎Presto


5.4-大数据分析引擎Spark SQL


5.5-大数据分析引擎Flink Table & SQL