大数据概念及Hadoop介绍
- 大数据概念
- 数据存储单位
- 大数据定义
- 大数据的特点(5V特征)
- 大数据部门组织架构
- 分布式技术
- 负载均衡
- 故障转移
- 伸缩性
- 分布式技术总结
- 分布式和集群的区别
- Hadoop介绍
- Hadoop核心组件
- Hadoop发展简史
- Hadoop特性优点与行业应用
- Hadoop特性优点
- 行业应用
- Hadoop发行版本及架构变迁
- Hadoop发行版本
- Hadoop架构变迁
大数据概念
什么是数据?
数据的产生
数据存储单位
大数据定义
大数据的特点(5V特征)
大数据部门组织架构
分布式技术
负载均衡
故障转移
伸缩性
分布式技术总结
分布式和集群的区别
分布式
是多台机器,每台机器上部署不同的组件, 不同机器和组件相互配合。相当于把一个整体拆碎分布在不同的机器上。
集群
也是多台机器,每台机器上的组件和功能是一样的,一个任务所有机器一起参与工作。
Hadoop介绍
Hadoop核心组件
- Hadoop HDFS(分布式存储系统): 解决海量数据存储
- Hadoop YARN(集群资源管理和任务调度框架): 解决资源任务调度
- Hadoop MapReduce(分布式计算框架): 解决海量数据计算
Hadoop发展简史
Hadoop特性优点与行业应用
Hadoop特性优点
行业应用