智能分析最佳实践——指标逻辑树

最新推荐文章于 2024-08-20 16:31:28 发布

liuhuiteng

最新推荐文章于 2024-08-20 16:31:28 发布

阅读量1.6k

点赞数 2

分类专栏：美团技术文章标签：美团技术

本文链接： https://blog.csdn.net/liuhuiteng/article/details/107013250

版权

美团技术专栏收录该内容

378 篇文章 71 订阅

订阅专栏

所有业务都会面对“为什么涨、为什么降、原因是什么？”这种简单粗暴又不易定位的业务问题。为了找出数据发生异动的原因，业务人员会通过使用多维查询、dashboard等数据产品锁定问题，再辅助人工分析查找问题原因，这个过程通常需要一天时间。几乎每种业务角色的用户都在做相似的分析，但在业务方分析人员发生工作变动时，分析方法难以得到较好传承。因此我们需要一款自动给出分析结论的智能化数据产品来解决上面的问题，产品的基本功能如图1所示。 arch

图1 产品架构图

由上图可知，指标逻辑树就是我们抽象出来的智能异动分析数据产品的最佳实践。它将固定的分析方法和业务场景抽象出来，套用灵活的数据源（包含Kylin、MySQL、Elasticsearch、Druid等），自动生成符合各类用户的异动分析报告；它能够直接给出分析结论进而快速落实业务行动，降低分析成本和决策周期。选定两个时间周期，指定指标顺序，通过指标逻辑树就可找出导致核心指标发生异动的关键指标，同时可对单一指标进行细分维度拆分，锁定细分维度对整体的影响。

指标逻辑树作为一款支持酒旅各业务线的异动分析数据产品，面临的挑战如下：

基础指标多、维度多，且来自于不同的数据源。
支持多种异动分析算法。
自定义计算指标。

针对上面的挑战，我们给出如下的解决方案。

体系架构

arch

图2 指标逻辑树体系架构

如图2所示： 1. 指标计算，用于解决基础指标多、维度多，且来自于不同数据源的问题以及自定义计算指标的问题； 2. 分析算法，用于支持多种异动分析算法； 3. 计算服务，采用master-work的方式解决查询性能的问题。

具体方案

指标计算

指标计算包含指标漏斗、基础指标序列、指标分类，它们之间的关系如图3所示。 yg-datasources

图3 指标计算

如图3所示，指标漏斗为用户自定义的有序指标序列，包含基础指标和计算指标（如，B=(L+H)*Y）；基础指标序列，是将指标漏斗中的计算指标按照顺序拆分之后的指标序列；指标分类采取大圣魔方（可以参考大圣魔方：https://tech.meituan.com/dsmf.html ）配置的规则对基础指标进行分类。