大数据之数据可视化

数据科学第三周笔记

数据可视化

1.可视化的概念： （1）数据可视化是一项致力于把抽象的数据或概念转化为适于人类理解和接受的视觉化的信息的技术。 （2）数据可视化不算是新的内容，很早历史上就有。属于交叉学科。 （3）涉及数据处理、算法设计、软件开发、人机交互等多种知识和技能。 可视化是通过图像、图表、动画的形式展示具体数据，诠释数据之间的关系和发展趋势，以期更好地理解和使用数据。

2可视化的作用

（1）可视化最重要的作用是能够帮助我们理解海量的数据，达到一图知天下的效果。 （2）可视化技术可以支持实现多种不同目标 （3）分析数据

（4）发现隐藏模式

（5）辅助理解数据/分析推理

 

3.人眼视觉 （1）人眼识别可见光，波长  400nm---700nm （2）视网膜用于将光刺激转化为神经信号，包括盲点、黄斑

（3）感光细胞有视锥细胞和视杆细胞。

总结：从本质上来说，可视化架起了人与数据之间沟通的桥梁，有助于发挥人类专家的领域知识和主观能动性。同时，可视化贯穿于从对原始数据的直观描述到对数据挖掘过程的理解，再到数据分析结果的展示，这一完整过程，是数据科学领域不可或缺的一部分。

4.云计算概念 （1）通过整合、管理、调配分布在网络各处的计算资源，通过互联网以统一界面、同时向大量的用户提供服务。 （2）云计算实现了通过网络提供可伸缩的、廉价的分布式计算能力，用户只需要在具备网络接入条件的地方，就可以随时随地获得所需的各种IT资源。

5.云的分类

 

 

6.什么是物联网：物联网是物物相连的互联网，是互联网的延伸，它利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式连在一起。 7.云计算、物联网和大数据关系：

 

 

8.大数据的技术

（1）两大核心技术：分布式存储和分布式处理。

（2）大数据计算模式：

批处理计算：针对大规模数据得批量处理问题

流计算：针对流数据得实时计算问题

图计算：针对大规模结构数据的处理问题

查询分析计算：解决大规模数据的存储管理和查询分析问题