1.数据分析的全貌
1.1观测
1.1.1 观察
(1)采集数据
a.采集数据:解析系统日志
当你在看视频的时候———就会产生日志———解析日志———得到数据
b.采集数据:埋点获取新数据(自定义记录新的信息)
日志记录你观看视频的ip,通过ip的解析,就可以知道你的观看地址。而这整个基于系统日志新增的数据过程,就称为埋点。
埋点是分析师获取新数据的主要方式,也是最可控、最可靠的方式。
c.采集数据:通过传感器采集
d.采集数据:爬虫
e.采集数据:api(application programing interface)
(2)储存数据
a.储存数据:各种类型的数据库
数据采集得到的数据都放在数据库,由专门另外的程序员去维护开发,而不是放在本地磁盘里。
b.储存数据:连接数据库取数
(3)展示数据
a.展示数据:可视化高效传达信息
1.1.2 测量
设定标准、发现异常、研究关系
(1)设定标准+发现异常
(2)研究关系
1.2实验
1.2.1 拆解问题、提出假设、设计实验
(a)提出假设,然后验证假设
提示:所有未经事实数据验证的想法都是假设
1.2.2 收集数据、分析数据、验证假设
1.3 应用
- 制定策略、实施策略、反馈迭代
- 训练算法、优化算法、使用算法
1.3.1 拆解方法(自己整理)
(1)流程拆解法
流程拆解法就是按照事情发展的时间、流程、程序,对过程进行逐一的拆解。
例如:分解消费者的购物过程:看见广告->点进-点击购买->付款->下单->支付。类似于漏斗分析法,是一种流程分析,适用于流程长,环节较多,并且随着环节的进行,留存率越来越少的场景。
(2)二分法
二分法在日常生活中比较常见,就是把事物分成a和非a两个部分,如“白天、黑夜”、“男人、女人”、“国内、国外”、“内部、外部”等。
二分法用于简化思维,当一件事情很复杂,超出理解范围,又需要快速做出决策,那么就可以用二分法来简化事物,快速完成决策。
(3)象限拆解法
象限拆解法是数据分析中常用的一种方法,主要用于分析数据集中的趋势、关联或者特征。它通常应用于二维数据,将数据分布根据两个维度进行分类,形成四个象限。
采用横向坐标法,将所要分析的信息分为四个象限,从高到低分别进行分析。
- 有助于发现问题的共同成因:采用象限分析方法,对具有相似特点的事件进行归因分析,归纳出共同的成因。
- 建立分类最优策略:根据输入的象限分析方法,可以根据不同的象限来确定最优策略。
例如:x轴从左到右的点击率的高低,y轴从下到上是转化率的高低,形成了4个象限,这就是我们要说的象限分析法。针对每次营销活动的点击率和转化率找到相应的数据标点,然后将这次营销活动的效果归到每个象限,4个象限分别代表了不同的效果评估。
(4)杜邦分析法
杜邦分析法是利用几种主要的财务比率之间的关系来综合地分析企业的财务状况,具体来说,是一种用来评价公司盈利能力和股东权益回报水平,从财务角度评价企业绩效的一种经典方法。
其基本思想是将企业净资产收益率逐级分解为多项财务比率乘积,这样有助于深入分析比较企业经营业绩。
(5)aarrr模型
aarrr是一个用于研究用户增长的数据分析模型,是acquisition、activation、retention、revenue、refer这五个单词的缩写,分别对应用户生命周期的用户获取、用户激活、用户存留、获得收益、推荐传播这五个环节。
(6)pest模型
pest分析法就是从政治(political)、经济(economic)、社会(society)、技术(technology)四个方面,基于公司战略的眼光来分析企业外部宏观环境的一种方法。
公司的发展战略与宏观环境息息相关,pest分析可以更好地把握宏观经济形势和发展趋势,从而更好地把握公司的生存发展机遇,及时发现和规避环境的潜在风险。
(7)rfm模型
rfm模型是指根据客户活跃度和交易金额贡献,进行客户价值细分的一种方法。主要应用于精细化运营、用户分层分析、用户会员体系建立。
根据美国数据库营销研究所arthur hughes的研究,客户数据库中有三个神奇的要素,这三个要素构成了数据分析最好的指标:
- 最近一次消费(recency)
- 消费频率(frequency)
- 消费金额(monetary)
(8)swot模型
swot模型分析法代表企业优势(strength)、劣势(weakness)、机会(opportunity)和威胁(threats)。
swot分析实质上是一种综合和总结企业外部环境的各种因素,从而分析企业的优势、劣势、机遇和威胁的一种方法,可以通过分析帮助企业把资源和行动集中在自己的强项和有最多机会的地方。
(9)5w1h模型
who(分析对象) 确定主题对象
where(从哪里获取数据)进行数据集成
when(获取哪些时间段的数据)确定时间间隔
what(用什么分析方法)具体的手段方法
why (什么原因导致的)背景和根本原因
how (如何呈现最终结果)分析报告
1.3.2 将数据应用于业务
1.3.3 将数据应用于算法
发表评论