视频课林子雨老师 大数据导论
网页笔记预习大数据导论 大数据导论复习笔记
一、大数据概述
1.数据的概念、类型和组织形式
- 数据概念
- 数据类型
(1)数据基本类型
数据类型包括文本,图片,音频,视频等
- 数据组织形式
2.数据的使用、数据的价值性和数据爆炸
- 把数据变得可用需要经过的步骤:
数据清洗,数据管理,数据分析
3.第三次信息化浪潮
- 人类IT发展史上3次信息化浪潮的发生时间、标志及其解决的问题
第一次:1980年前后,标志:个人计算机,解决问题:信息处理
第二次:1995年前后,标志:互联网,解决问题:信息传输
第三次:2010年前后,标志:互联网,云计算和大数据,解决问题:信息爆炸
4.信息科技为大数据时代提供技术支撑
- 请阐述信息科技是如何为大数据时代的到来提供技术支撑的:
存储设备容量不断增加
CPU处理能力大幅提升
网络宽带不断增加
5.数据产生方式的变革促成大数据时代的来临
- 阐述人类社会的数据产生方式大致经历了哪3个阶段:
运营式系统阶段
用户原创内容阶段
感知式系统阶段
总体而言,数据的产生经历了被动、主动到自动的3个阶段。
6.大数据的发展历程
- 阐述大数据发展的3个重要阶段:
萌芽期:数据挖掘理论和数据库技术逐步成熟
成熟期:web2.0
大规模应用期:大数据应用渗透各行各业
7.世界各国的大数据发展战略
8. 大数据的概念
- 阐述大数据的“4V”特性。
4v:数据量大,数据类型繁多,处理速度快,价值密度低
(量大,类型多,处理快,价值密度弟中弟)
9.大数据的影响
- 科学研究四种范式
实验
理论
计算
数据
计算:推测理论,搜集数据来计算 验证
数据:由大量数据计算理论
10. 大数据的应用
11.大数据产业
12.高校大数据专业
- 阐述高校大数据专业的知识体系。
数据采集与预处理
数据存储与管理
数据处理与分析
数据可视化