指标预警和指标归因分析

2024-05-27 06:52
文章标签 分析 指标 预警 归因

本文主要是介绍指标预警和指标归因分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

  • 1 指标预警的基本方法
    • 1.1 数据值异常的定义
    • 1.2 异常诊断
      • 1.2.1 经典分析方法
      • 1.2.2 阈值诊断
      • 1.2.3 预测模型
  • 2 指标归因问题的分析框架
    • 2.1 明确问题
    • 2.2 分析定位
    • 2.3 解决问题
  • 3 指标归因的基本方法
    • 3.1 确定性推断
      • 3.1.1 加|减法类
        • 3.1.1.1 静态拆解 - 解决变化量问题
        • 3.1.1.2 动态拆解(单因素拆解) - 解决变化率问题
      • 3.1.2 乘法类
        • 3.1.2.1 替换法
        • 3.1.2.2 LMDI- 乘积因子拆解
        • 3.1.2.3 双因素法
    • 3.2 可能性推断
      • 3.2.1 机器学习 + SHAP
      • 3.2.2 因果推断
        • 3.2.2.1 ABTest
        • 3.2.2.2 DID
    • 3.3 猜测性推断
  • 4 指标拆解的基本方法
    • 4.1 总体原则
    • 4.2 举例

1 指标预警的基本方法

1.1 数据值异常的定义

  1. 绝对值异常点
  2. 同环比异常
  3. 趋势异常

1.2 异常诊断

1.2.1 经典分析方法

  1. 首先我们通过预测模型进行值的预测
  2. 计算预测残差 = 预测值 - 真实值 ,这一步同时也可以使用滑动窗口的 3 σ 3\sigma 3σ原理进行判断
  3. 结合 3 σ 3\sigma 3σ原理判断残差是否偏离模型
  4. 结合同环比表现综合判断是否是应当关注的异常值

1.2.2 阈值诊断

1.2.3 预测模型

2 指标归因问题的分析框架

2.1 明确问题

  1. 首先我们要明确解决什么问题
  2. 其次我们要对问题进行数学建模
  3. 最后我们要针对问题选择数据,对模型选择参数(即收集足够多的信息)

2.2 分析定位

  1. 首先我们要从方法库中选择分析问题最合适的方法进行问题拆解
  2. 其次我们要通过方法定位到具体原因
  3. 最后我们要论证原因是否具有明确的业务含义

2.3 解决问题

  1. 首先我们要解释该原因如何回答原始问题
  2. 其次我们要通过原因寻求解决问题的方案
  3. 最后推动执行落实下来的方案

3 指标归因的基本方法

在指标归因中,我们常用到指标拆解和漏斗分析等方法对核心指标进行归因分析,

两种方式对于所处理的数据都有着很强的解释性,结果也相当直观。

漏斗分析实质上是指标拆解的一个特殊情况,其关注点不仅仅在于贡献度,还在每环节漏出,因此在转化场景下有更为突出的使用效能

3.1 确定性推断

  1. 确定性判断主要采用的原则是指标拆解和贡献度可量化
  2. 在进行指标拆解的过程中,我们要注意满足MECE原则(Mutually Exclusive and Collectively Exhaustive)

3.1.1 加|减法类

3.1.1.1 静态拆解 - 解决变化量问题

X = x 1 + x 2 + x 3 + ⋯ + x n Δ X = Δ x 1 + Δ x 2 + Δ x 3 + ⋯ + Δ x n X = x_1 + x_2 + x_3 + \cdots + x_n \\ \Delta X = \Delta x_1 + \Delta x_2 + \Delta x_3 + \cdots + \Delta x_n X=x1+x2+x3++xnΔX=Δx1+Δx2+Δx3++Δxn
其中, X X X是总指标值, { x 1 , ⋯ , x n } \{x_1, \cdots, x_n\} {x1,,xn}是维度拆分后各因素的值,

那么,各个因素的贡献度可以通过以下公式进行计算:
C n = Δ x n Δ X C_n = \frac{\Delta x_n}{\Delta X} Cn=ΔXΔxn
其中, C n C_n Cn即为第 n n n个维度的贡献度

3.1.1.2 动态拆解(单因素拆解) - 解决变化率问题

3.1.2 乘法类

3.1.2.1 替换法
3.1.2.2 LMDI- 乘积因子拆解
3.1.2.3 双因素法

3.2 可能性推断

3.2.1 机器学习 + SHAP

3.2.2 因果推断

3.2.2.1 ABTest
3.2.2.2 DID

3.3 猜测性推断

能够提供一定的信息增量

4 指标拆解的基本方法

4.1 总体原则

  1. 首先要定位核心变化场景
  2. 通过横向拆解和纵向下钻进行综合分析
  3. 指标需要有意义
  4. 指标能够定位到明确团队
  5. 指标不宜过多

4.2 举例

某短视频平台GMV拆解

GMV = 曝光数 * OPM(千次曝光订单量) * 单均价

曝光数 = 供给因素+流量因素

OPM = CTR(点击率) * 次均观流时长 * OPH(单位时长订单量)

这篇关于指标预警和指标归因分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1006750

相关文章

python panda库从基础到高级操作分析

《pythonpanda库从基础到高级操作分析》本文介绍了Pandas库的核心功能,包括处理结构化数据的Series和DataFrame数据结构,数据读取、清洗、分组聚合、合并、时间序列分析及大数据... 目录1. Pandas 概述2. 基本操作:数据读取与查看3. 索引操作:精准定位数据4. Group

MySQL中EXISTS与IN用法使用与对比分析

《MySQL中EXISTS与IN用法使用与对比分析》在MySQL中,EXISTS和IN都用于子查询中根据另一个查询的结果来过滤主查询的记录,本文将基于工作原理、效率和应用场景进行全面对比... 目录一、基本用法详解1. IN 运算符2. EXISTS 运算符二、EXISTS 与 IN 的选择策略三、性能对比

MySQL 内存使用率常用分析语句

《MySQL内存使用率常用分析语句》用户整理了MySQL内存占用过高的分析方法,涵盖操作系统层确认及数据库层bufferpool、内存模块差值、线程状态、performance_schema性能数据... 目录一、 OS层二、 DB层1. 全局情况2. 内存占js用详情最近连续遇到mysql内存占用过高导致

深度解析Nginx日志分析与499状态码问题解决

《深度解析Nginx日志分析与499状态码问题解决》在Web服务器运维和性能优化过程中,Nginx日志是排查问题的重要依据,本文将围绕Nginx日志分析、499状态码的成因、排查方法及解决方案展开讨论... 目录前言1. Nginx日志基础1.1 Nginx日志存放位置1.2 Nginx日志格式2. 499

Olingo分析和实践之EDM 辅助序列化器详解(最佳实践)

《Olingo分析和实践之EDM辅助序列化器详解(最佳实践)》EDM辅助序列化器是ApacheOlingoOData框架中无需完整EDM模型的智能序列化工具,通过运行时类型推断实现灵活数据转换,适用... 目录概念与定义什么是 EDM 辅助序列化器?核心概念设计目标核心特点1. EDM 信息可选2. 智能类

Olingo分析和实践之OData框架核心组件初始化(关键步骤)

《Olingo分析和实践之OData框架核心组件初始化(关键步骤)》ODataSpringBootService通过初始化OData实例和服务元数据,构建框架核心能力与数据模型结构,实现序列化、URI... 目录概述第一步:OData实例创建1.1 OData.newInstance() 详细分析1.1.1

Olingo分析和实践之ODataImpl详细分析(重要方法详解)

《Olingo分析和实践之ODataImpl详细分析(重要方法详解)》ODataImpl.java是ApacheOlingoOData框架的核心工厂类,负责创建序列化器、反序列化器和处理器等组件,... 目录概述主要职责类结构与继承关系核心功能分析1. 序列化器管理2. 反序列化器管理3. 处理器管理重要方

SpringBoot中六种批量更新Mysql的方式效率对比分析

《SpringBoot中六种批量更新Mysql的方式效率对比分析》文章比较了MySQL大数据量批量更新的多种方法,指出REPLACEINTO和ONDUPLICATEKEY效率最高但存在数据风险,MyB... 目录效率比较测试结构数据库初始化测试数据批量修改方案第一种 for第二种 case when第三种

解决1093 - You can‘t specify target table报错问题及原因分析

《解决1093-Youcan‘tspecifytargettable报错问题及原因分析》MySQL1093错误因UPDATE/DELETE语句的FROM子句直接引用目标表或嵌套子查询导致,... 目录报js错原因分析具体原因解决办法方法一:使用临时表方法二:使用JOIN方法三:使用EXISTS示例总结报错原

MySQL中的LENGTH()函数用法详解与实例分析

《MySQL中的LENGTH()函数用法详解与实例分析》MySQLLENGTH()函数用于计算字符串的字节长度,区别于CHAR_LENGTH()的字符长度,适用于多字节字符集(如UTF-8)的数据验证... 目录1. LENGTH()函数的基本语法2. LENGTH()函数的返回值2.1 示例1:计算字符串