【数据分析】【戴戴戴师兄】什么是数据分析
一、为什么要数据分析? 数据分析是客观认识数据、改造世界的方法
- 观测:对事物才形成客观量化的过程
- 实验:发现规律、验证假设(A/B测试) 哪些方法能让事物根据人为的设计更好的发展
- 应用:不断基于数据反馈迭代产品,实现数据分析的价值
二、观测
(一)观察:
-
采集数据
-
解析系统日志、自定义日志--埋点获取新数据(基于系统日志新增数据的过程叫做埋点,是数据分析师获取新数据的方式)
-
通过传感器采集
-
爬虫(解析别人呈现数据的网站)
-
API----应用程序接口
-
-
存储数据:各种类型的数据库(hive、mysql、SQL Server...)所需数据库的sql代码、获取下载
-
展示数据:可视化高效传达信息
(二)测量: 分析数据的目的是什么?及时发现异常;找到数据之间的因果关系。(因为数据是客观统一的才能实现上述两点,有统一的认知才能有共同的目标)
-
设定标准:(benchmark)设置标准才能知道异常
-
发现异常:研究异常形成的原因和运行的机制--解决异常或发现异常新的价值
-
研究关系:可视化查看相关性、建模推导相关性
三、实验 所有未经事实数据验证的想法都是假设
-- 观察数据后产生疑问,解决疑问的方法是提出合理的假设,然后验证假设(eg.观测差评飙升,假设由恶劣天气引起,通过天气数据假设验证--多次)
-- 数据分析师的工作是提出假设、验证假设,找到客观规律和解决问题的方法
-
拆解方法:提出可能优化问题的假设
-
流程拆解法、二分法、象限拆解法、杜邦分析法、AARRR、PEST、RFM、SWOT、5W1H
-
拆解只要符合MECE法即可
-
-
获取数据:
-
现有数据
-
设计实验获取数据:设计A/B测试
-
(补坑:1.如何在业务只有少量数据时设计数据实验?2.如何在无法同时测试两个版本时比较数据?)
- 实验后:验证假设的方法、发现一些规律
四、应用 创造数据价值
-
方向一:基于数据反馈不断迭代产品和业务策略;(让业务看见数据、明确业务目标、拆解标准值{怎么做是比较合理的,做成什么样,什么样是标准的})
-
数据应用于业务(产品上线数据表现更好、业务方法的有效传达和业务的有效执行)
-
-
方向二:基于数据训练算法,让及其自动化地完成工作
基于数据和算法的竞争无时不刻在互联网行业上演,数据分析将会成为职场人的必备技能
链接:https://www.bilibili.com/video/BV1ZM4y1u7uF?p=1
--------------------------------------------------分割线---------------------------------------------
第二天早上就只记得这么多了/(ㄒoㄒ)/~~
----》需要艾宾浩斯复习法