大数据导论笔记

视频课林子雨老师 大数据导论
网页笔记预习大数据导论 大数据导论复习笔记

一、大数据概述

1.数据的概念、类型和组织形式

• 数据概念
  
• 数据类型
  （1）数据基本类型

数据类型包括文本，图片，音频，视频等

• 数据组织形式
  

2.数据的使用、数据的价值性和数据爆炸

• 把数据变得可用需要经过的步骤:

数据清洗，数据管理，数据分析

3.第三次信息化浪潮

• 人类IT发展史上3次信息化浪潮的发生时间、标志及其解决的问题

第一次：1980年前后，标志：个人计算机，解决问题：信息处理

第二次：1995年前后，标志：互联网，解决问题：信息传输

第三次：2010年前后，标志：互联网，云计算和大数据，解决问题：信息爆炸

4.信息科技为大数据时代提供技术支撑

• 请阐述信息科技是如何为大数据时代的到来提供技术支撑的：

存储设备容量不断增加

CPU处理能力大幅提升

网络宽带不断增加

5.数据产生方式的变革促成大数据时代的来临

• 阐述人类社会的数据产生方式大致经历了哪3个阶段：
  运营式系统阶段
  用户原创内容阶段
  感知式系统阶段
  总体而言，数据的产生经历了被动、主动到自动的3个阶段。

6.大数据的发展历程

• 阐述大数据发展的3个重要阶段:
  萌芽期：数据挖掘理论和数据库技术逐步成熟
  成熟期：web2.0
  大规模应用期：大数据应用渗透各行各业

7.世界各国的大数据发展战略

8. 大数据的概念

• 阐述大数据的“4V”特性。
  4v：数据量大，数据类型繁多，处理速度快，价值密度低
  （量大，类型多，处理快，价值密度弟中弟）

9.大数据的影响

• 科学研究四种范式
  实验
  理论
  计算
  数据
  
  计算：推测理论，搜集数据来计算 验证
  数据：由大量数据计算理论

10. 大数据的应用

11.大数据产业

12.高校大数据专业

• 阐述高校大数据专业的知识体系。
  数据采集与预处理
  数据存储与管理
  数据处理与分析
  数据可视化

二、大数据与其他新兴技术的关系

1.云计算概念

• 概念（理解上借助 自来水）
  云计算实现通过网络提供可伸缩的，廉价的分布式计算能力，用户只需要在具备网络接入条件的地方，就可以随时随地获得所需的各种IT资源
• 特点
  

2.云计算服务模式和类型

• 请阐述云计算有哪几种服务模式和哪几种类型。
  服务模式：基础设施即服务，平台即服务，软件即服务
  类型：公有云，私有云，混合云