大数据图片汇总


1、大数据课程概述与大数据背景知识

(1)数据仓库与大数据

数据仓库与大数据

(2)PageRank

PageRank

(3)MR基本原理

MR基本原理

(4)HDFS原理

HDFS原理

(5)bigtable与Habase

bigtable与Habase

2、搭建Hadoop的环境

(1)1.PNG

1

(2)2.PNG

2

(3)3.PNG

3

(4)4.PNG

4

3、HDFS基础与操作

(1)startup

startup

4、HDFS上传与下载的原理

(1)HDFS_Upload

HDFS_Upload

(2)HDFS_DownLoad

HDFS_DownLoad

5、HDFS-工作机制

(1)namenode工作机制

namenode工作机制

(2)datanode工作机制

datanode工作机制

6、MapReduce基础

(1)mapreduce思想

mapreduce思想

7、MapReduce分布式编程模型

(1)maptask决定机制

maptask决定机制

8、MapReduce案例分析

(1)yarn工作流程

yarn工作流程

(2)日志格式

日志格式

9、分区排序

(1)mapreduce流程

mapreduce流程

10、Shuffle机制

(1)shuffle机制

shuffle机制

11、mapjoin与reducejoin

(1)yarn架构介绍

yarn架构介绍

12、Zookeeper介绍

(1)zookeeper功能

zookeeper功能

(2)选举机制

选举机制

13、Hive

(1)Hive架构原理

Hive架构原理

14、Flume

(1)多channel多sink流程

多channel多sink流程

15、HBase

(1)HBase架构图

HBase架构图

(2)HBase数据读取流程

HBase数据读取流程

(3)HBase读取数据的详细流程

HBase读取数据的详细流程

(4)HBase写入数据的详细流程

HBase写入数据的详细流程

16、Scala

(1)Scala高阶函数

Scala高阶函数

(2)Actor01

Actor01

(3)NewAkkaSystem

NewAkkaSystem

(4)PingPongExample

PingPongExample

17、Spark

(1)Spark体系架构

Spark体系架构

(2)大数据HA

大数据HA

(3)蒙特卡洛求PI

蒙特卡洛求PI

(4)spark的调用任务过程

spark的调用任务过程

(5)RDD

RDD

(6)WordCount程序分析

WordCount程序分析

(7)aggregate聚合操作

aggregate聚合操作


文章作者: 谢舟
版权声明: 本博客所有文章除特別声明外,均采用 CC BY 4.0 许可协议。转载请注明来源 谢舟 !
 上一篇
私有网络软件仓库搭建和挂载网络系统镜像 私有网络软件仓库搭建和挂载网络系统镜像
一、私有网络软件仓库在集群安装的过程中,要求每个节点都必须挂载光驱, 而对于每台节点都手动的去挂载光驱太麻烦,也不方便。这里使用每个节点都指向同一个私有网络镜像来解决这个问题 我们的集群采用的是全离线安装,也不可能逐个节点的安装,同样是也使
2019-05-10
下一篇 
Storm基础 Storm基础
流式计算专题批量计算、实时计算、离线计算、流式计算 共同点:数据源 –> 采集数据 –> task worker –> task worker –> sink 输出 批量计算和流式计算区别:处理
2019-05-04
  目录