数据分析
数据分析的核心解释,6个字,观测、实验、应用。
1、观测:数据观测又可以分为两部分,即观察和测量,观察负责采集数据、储存数据、展示数据;测量负责设定标准、发现异常、研究关系
1.1采集数据:解析系统日志【埋点获取新数据】、传感器采集、爬虫、API
1.2储存数据:各种类型数据库;MySQL、PgSQL、SQLServer...
1.3展示数据:可视化高效传达数据,报表、图表、仪表盘...
1.4设定标准+发现异常: 及时发现异常、找到数据之间的因果关系;
1.5研究关系:可视化查看相关性
分析数据的目的:及时发现异常、找到数据之间的因果关系;数据是客观统一的,树立统一的目标。
2、实验:拆解问题、提出假设、设计实验;收集数据、分析数据、验证假设
提出假设,验证假设
3、应用:制定策略、实施策略、反馈迭代;训练算法、优化算法、使用算法