抖音指标体系是怎么长出来的
第 10 课 · 第九阶段 · 组织开始围绕指标分化

最高领导不看完所有数

大产品不是靠一个人控制所有局部,而是靠统一的数据底座、嵌入业务的数据伙伴和明确的决策权分层。

接着上一课的问题,这么多指标,究竟由谁来管

字节数据平台的四个阶段

字节数据平台负责人讲过他们自己的四个阶段1,我觉得拿来当这一课的开头挺合适。

2014 前一个 Hive几张基础报表,DAU 和时长
2015–2017基础建设搭引擎,做产品
2018–2019平台阶段数据 BP 出现
2020 后对外输出火山引擎

据 InfoQ 对字节数据平台负责人的访谈1

你看这个时间线,2018 年,正好是抖音从 3000 万冲到 1 亿的那一年。第 4 课那 7000 万是那一年,第 8 课的商业化也是从那前后开始大规模进来的。也就是在那个时候,字节的数据组织出现了一个新角色。为什么是那时候。因为到了那个阶段,指标已经多到任何一个人都不可能逐项管理了。用户侧的,创作者侧的,算法的,广告的,电商的,直播的,基础体验的,安全的。一个人的脑子装不下。老板不可能每天看几百个数然后逐个拍板。所以组织开始分层。

为什么不选纯中台制

先说那个数据 BP。BP 是 business partner,业务伙伴。字节的说法是,数据 BP 是中台能力与业务的桥梁,对业务直接输出平台已经沉淀的能力,再把业务的场景和方向带回中台。人话就是,这个人组织上归统一的数据团队管,但平时坐在业务团队旁边,跟业务一起找问题。

字节有篇文章标题就叫为什么不选纯中台制2纯中台的问题是不懂业务,业务要个数得排队等;每个业务自己养数据团队的问题是重复造轮子,口径各算各的,第 9 课那个音乐投稿率就是这么来的。中台加 BP,是想两头都要。

0稳定性,0 个事故9需求满足率 90%8数仓覆盖 80% 的分析需求7用户满意度 70%

他们给这套服务定了一个量化标准,叫0987。我提这个不是让你记数字,是想说,连数据团队服务业务这件事本身,他们都给它定了指标。这很字节。

分层之后,每一层管什么

最高业务负责人系统目标、权重、资源、裁决
业务负责人 × N每人经营自己的一棵指标树,增长、推荐、创作者、商业
跨职能团队产品、运营、算法、研发,做具体的产品和实验
数据 BP + 数据平台贯穿三层。BP 管口径、归因、证据;平台管统一的基础设施和工具

这一课我最想让你看清的是最上面那一层。最高领导最关键的权力,不是批准每个按钮,也不是看完所有的数。他要做的是几个判断。现在这个阶段,更重增长、生态还是商业化?哪几条护栏不能破?资源往哪放?

回到第 8 课那个没回答的问题。广告负载往上拧,收入涨,主站留存轻微掉。数据 BP 能算出来收入涨多少、留存掉多少,能归因到是广告负载引起的,能告诉你按这个趋势三个月后 DAU 会怎样。这些都是证据。但要不要上,不是证据能回答的。那是一个取舍。你愿意用多少留存换多少收入。这个取舍取决于公司现在更需要什么,取决于今年是要冲规模还是要赚钱,取决于竞争对手在干什么。

数据能告诉你发生了什么、为什么。「值得牺牲什么去换取什么」,仍然是管理判断。

数据 BP 提供证据和归因,他不应该替业务负责人做战略取舍。反过来,业务负责人也不能因为自己是老板就不看证据。这两边的边界,就是这一课的全部内容。

你来判断

数据 BP 发现,增加广告能增收,但会轻微损害留存。最终要不要上,谁负责决定?

B。数据 BP 给证据和归因,业务负责人承担价值取舍和业务结果。C 听起来很「数据驱动」,其实是把判断外包给了一个指标,第 5 课讲时长做王会怎样,你已经知道了。

所有业务共用的基础护栏

这一课还顺带引进几个前面一直没正式讲的指标,崩溃率、启动时延、卡顿率、违规曝光率。它们有个共同点,都是所有业务共同的基础护栏。App 崩了,内容再好也白搭。打开等 5 秒才有第一条视频,用户在进入价值环节之前就走了。这些指标不属于哪个业务团队,属于整个系统,所以它们一般归基础体验和安全治理团队,而那两个团队在第 11 课的 OKR 网络里,会出现在一个很特别的位置。

启动时延有个细节我觉得值得说。它一般不看平均值,看 P50、P90、P99,就是 50%、90%、99% 的用户在多少秒以内。因为平均数会把那批弱网、旧机型的用户藏起来。

平均2.1 秒
P50 · 一半用户1.6 秒
P904.4 秒
P998.0 秒

示意数字。平均 2.1 秒看着不错,但有 1% 的人等了 8 秒,他们被 1.6 秒的人平均掉了。第 5 课说人均时长要看中位数和分层,同一个道理。平均数是指标体系里最会藏事的东西。

这一课,指标多到人装不下,组织分层。数据 BP 嵌在业务旁边管口径、归因、证据;业务负责人管取舍;最高领导决定什么更重要、哪条护栏不能破。数据说发生了什么,值得牺牲什么换什么是管理判断。

这课认识的指标和角色
数据 BP组织上属统一数据团队、工作时嵌入业务的数据伙伴
为什么要它避免纯中台不懂业务,也避免每个业务重复造轮子。
BP 提供证据和归因,不应替业务负责人做战略取舍。
崩溃率App 异常退出的会话、用户或设备比例
会话崩溃率 = 崩溃会话 ÷ 总会话
用户口径和会话口径不能混,平均值掩盖特定机型。
启动时延打开到第一条内容可消费要等多久
看 P50 / P90 / P99,不看平均
平均数藏住弱网旧设备用户。
卡顿率播放时重新缓冲的次数、时长或受影响播放比例
卡顿时长占比 = 卡顿总时长 ÷ 播放总时长
只看次数漏长卡顿,只看时长漏频繁短卡顿。
违规曝光率用户实际看到的违规内容曝光占全部有效曝光的比例
违规曝光率 = 违规内容曝光 ÷ 总有效曝光
规则版本和抽检覆盖变化会造成波动。

这一课的数字从哪来

  1. 数据平台四阶段、数据 BP 定义原话、0987:InfoQ 字节跳动数据平台九年演进
  2. 火山引擎 字节跳动数据平台为什么不选纯中台制
  3. 「2018 年数据 BP 出现恰逢抖音冲 1 亿和商业化」是时间线并置,因果是教学推断。四层分层模型是教学模型。启动时延的分位数是示意。

最后一课,我们看这些判断是怎么变成每个团队手里的目标的。