了解大数据的特点、来源与数据呈现方式

摘要：本次作业来源于https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/2639

作业要求：

1.浏览2019春节各种大数据分析报告，例如：

2.这些分析所采用数据的来源是什么？

《 这世间，再无第二个国家有能力承载如此庞大的人流量》所采用的数据来源主要是各大售票系统和售票站；

《春节人口迁徙大数据报告！》所采用的数据来源主要还是各大售票系统和售票站；

《春节大数据:消费首破万亿 最佳伴手礼竟是教辅书?》所采用的数据来源主要是淘宝、京东等各大网上商城；

《大数据中的春节》所采用的数据来源主要是各大售票网站、售票中心、各大旅游景点、各大电影院等；

《春节年味大数据都有啥 90后年味就是抢红包》所采用的数据来源主要是腾讯公司；

《春节大数据出炉》所采用的数据来源主要是各大超市、饭店、电影院等消费中心；

《2019年微信春节大数据：收发红包人数超8亿》所采用的数据来源主要是腾讯公司。

3.大数据的呈现方式有哪些？

<1>通过图表呈现

      比如统计图、统计表、热力图等。

<2>通过数据呈现

       比如数据的分类、数据的归纳等。

4.大数据的特点是什么？对思维方式有何影响?

 大数据的特点：

1．大量。大数据的特征首先就体现为“大”，从先Map3时代，一个小小的MB级别的Map3就可以满足很多人的需求，然而随着时间的推移，存储单位从过去的GB到TB，乃至现在的PB、EB级别。随着信息技术的高速发展，数据开始爆发性增长。社交网络（微博、推特、脸书）、移动网络、各种智能工具，服务工具等，都成为数据的来源。淘宝网近4亿的会员每天产生的商品交易数据约20TB；脸书约10亿的用户每天产生的日志数据超过300TB。迫切需要智能的算法、强大的数据处理平台和新的数据处理技术，来统计、分析、预测和实时处理如此大规模的数据。

2．多样。广泛的数据来源，决定了大数据形式的多样性。任何形式的数据都可以产生作用，目前应用最广泛的就是推荐系统，如淘宝，网易云音乐、今日头条等，这些平台都会通过对用户的日志数据进行分析，从而进一步推荐用户喜欢的东西。日志数据是结构化明显的数据，还有一些数据结构化不明显，例如图片、音频、视频等，这些数据因果关系弱，就需要人工对其进行标注。

3．高速。大数据的产生非常迅速，主要通过互联网传输。生活中每个人都离不开互联网，也就是说每天个人每天都在向大数据提供大量的资料。并且这些数据是需要及时处理的，因为花费大量资本去存储作用较小的历史数据是非常不划算的，对于一个平台而言，也许保存的数据只有过去几天或者一个月之内，再远的数据就要及时清理，不然代价太大。基于这种情况，大数据对处理速度有非常严格的要求，服务器中大量的资源都用于处理和计算数据，很多平台都需要做到实时分析。数据无时无刻不在产生，谁的速度更快，谁就有优势。

4.价值。这也是大数据的核心特征。现实世界所产生的数据中，有价值的数据所占比例很小。相比于传统的小数据，大数据最大的价值在于通过从大量不相关的各种类型的数据中，挖掘出对未来趋势与模式预测分析有价值的数据，并通过机器学习方法、人工智能方法或数据挖掘方法深度分析，发现新规律和新知识，并运用于农业、金融、医疗等各个领域，从而最终达到改善社会治理、提高生产效率、推进科学研究的效果。

对思维方式的影响：

       近年来大数据技术的快速发展深刻改变了我们的生活、工作和思维方式。大数据研究专家舍恩伯格指出，大数据时代，人们对待数据的思维方式会发生如下三个变化：第一，人们处理的数据从样本数据变成全部数据；第二，由于是全样本数据，人们不得不接受数据的混杂性，而放弃对精确性的追求；第三，人类通过对大数据的处理，放弃对因果关系的渴求，转而关注相关关系。事实上，大数据时代带给人们的思维方式的深刻转变远不止上述三个方面。笔者认为，大数据思维最关键的转变在于从自然思维转向智能思维，使得大数据像具有生命力一样，获得类似于“人脑”的智能，甚至智慧。其中可以概括为四个方面的思维方式.总体思维.相关思维.容错思维.智能思维.

       总体思维指的是对于事物有一个全面并且整体的看法。相关思维更加注重事物之间的联系，容错思维指的是对于事物拥有一个容错的思维，不再单一追求数据精准。智能思维指的是数据时代的思维方式也要求从自然思维转向智能思维，不断提升机器或系统的社会计算能力和智能化水平，从而获得具有洞察力和新价值的东西，甚至类似于人类的“智慧”。

 

 

2.简单的输入输出编程练习

设计完成一个Mad Libs游戏：

1）.创造一个让人欢乐的有趣的故事；

2）.提示伙伴输入相应类别的词；

3）.将故事完整地输出。

代码：

name1=input('请输入一个动物：')
name2=input('请输入一个形容词：')
print('说有一只{}，因为雪地太刺眼了，必须要戴墨镜才能看东西， 可是他找不到墨镜，于是闭着眼睛爬来爬去在地上找，爬呀爬呀，把手脚都爬的{}才找到墨镜。 戴上墨镜，对着镜子一照，这才发现：哦，原来我是一只熊猫'.format(name1,name2))

运行截图：

 

posted @ 2019-03-01 16:18  张倩倩  Views(1109)  Comments(0)  Edit  收藏  举报