exp_001|

新增年轻内容召回,修复新用户画风偏老

|目标:视频播放量|提升:+26.3%|风险:2|卡点:recall|01/09 09:30

决策摘要

北极星
基线200,279
实验组252,907
提升+26.3%
护栏指标
次日留存18.218
早退率2122.4
投诉率1.11.2
卡点环节
召回
延迟上升/超时
影响 fill / CTR / 收入
天花板
当前提升26.3%
天花板45.0%
Gap18.7%
限制:recall+latency

下一步动作

1.
分层定位:人群/供给/召回源/时段
负责人: Algo验证: 离线模拟
2.
把“卡点”变成可量化过程指标(召回超时率/返回率)
负责人: ADX验证: 离线模拟
3.
上线前做离线模拟 + 小流量验证
负责人: Infra验证: 小流量验证
4.
提高出价 / ocpx 倍率或放宽目标
负责人: DSP验证: 离线模拟
5.
检查预算节奏(pacing)是否过早打光
负责人: DSP验证: 小流量验证

出价 & 预算

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

DSP(需求方平台)

暂无可展示指标

Pipeline 流程图

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

召回
延迟: 6ms → 13ms
候选数: 15000 → 22000
延迟上升/超时;影响 fill / CTR / 收入
粗排
延迟: 8ms → 10ms
候选数: 260 → 310
精排
延迟: 28ms → 31ms
候选数: 28 → 33
重排
延迟: 4ms → 6ms
候选数: 30 → 30
拍卖
延迟: 6ms → 7ms
候选数: 0.86 → 0.85

漏斗分析(Funnel)

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要(Top3):最终展示: 107.1% → 90.9% (-15.1%);召回后: 1.5% → 2.2% (+46.7%);粗排后: 1.7% → 1.4% (-18.5%)

搜索词&意图(Query & Intent)

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 流量结构分析:匹配率 +11.3%,转化率 +3.6%

搜索词分布

匹配效果

匹配率(Match Rate)
基线
62.0%
实验组
69.0%
点击后转化率(Post-Click CVR)
基线
2.80%
实验组
2.90%

意图分类

其他
占比: 77.0%
查询数: 8

排序策略(Ranking / Relevance)

内容分布

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要(Top3):产品学习: 1350.0% → 2050.0% (↑700.0%);美妆穿搭: 2300.0% → 1800.0% (↓500.0%);职场成长: 600.0% → 1100.0% (↑500.0%)

TopN 模拟信息流(TopN Feed)

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要:平均时长: 31.4s → 31.4s;类目熵: 0.00 → 0.00;分数陡峭度: 0.000 → 0.000

#1 排名(Rank)20秒(Duration)
(Category)
评分(Score): 0.694
弱网友好测评
#2 排名(Rank)90秒(Duration)
(Category)
评分(Score): 0.683
新手入门复盘
#3 排名(Rank)15秒(Duration)
(Category)
评分(Score): 0.703
深度干货
#4 排名(Rank)12秒(Duration)
(Category)
评分(Score): 0.628
男生向
#5 排名(Rank)20秒(Duration)
(Category)
评分(Score): 0.620
情绪价值

出价策略(Bidding / Pacing / Auction)

拍卖&出价

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要:胜率 +5.6%;超时率 +50.0%;底价 +0.0%;填充率 -1.2%

拍卖监控

基线(Baseline)

胜率(Win Rate)
18.00%
底价 eCPM(Floor eCPM)
1150.00
填充率(Fill Rate)
86.00%
超时率(Timeout Rate)
1.20%
出价 eCPM 分位数
10%分位数(最低10%的出价)12.20
50%分位数(中位数)38.10
90%分位数(最高10%的出价)103.40

实验组(Treatment)

胜率(Win Rate)
19.00%
底价 eCPM(Floor eCPM)
1150.00
填充率(Fill Rate)
85.00%
超时率(Timeout Rate)
1.80%
出价 eCPM 分位数
10%分位数(最低10%的出价)12.80
50%分位数(中位数)39.00
90%分位数(最高10%的出价)104.10

拍卖拒绝原因

出价过低(BID_TOO_LOW)-4.0pp
基线
46.0%
实验组
42.0%
请求超时(TIMEOUT)+4.0pp
基线
32.0%
实验组
36.0%
预算耗尽(BUDGET_EXHAUSTED)+2.0pp
基线
8.0%
实验组
10.0%

出价策略&节奏

出价策略

类型:oCPM(oCPX)
目标:有效播放/完播
倍率范围:0.85 - 1.25
新增召回后需防止延迟导致的超时与 fill 下滑

预算节奏

类型:smooth
日预算:50,000
早时段上限:12%
晚高峰保量,避免上午过早打光

OCPX 曲线

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要:倍率波动: 0.037 → 0.062;CPA偏离: 0.00 → 0.00

倍率(Multiplier)

实际 CPA(Cost Per Action)

消耗(Spend)

视角切换:

原因分布

观察到新用户(18-24)画风偏老,学习/职场内容占比不足,导致首刷停留与 CTR 低

📊 差异摘要(Top3)

重排:多样性换位: 18.0% → 26.0% (↑8.0%);质量门槛过滤: 34.0% → 28.0% (↓6.0%);去重过滤: 22.0% → 20.0% (↓2.0%)

拍卖:出价不足/低于floor: 46.0% → 42.0% (↓4.0%);超时未返回: 32.0% → 36.0% (↑4.0%);预算耗尽: 8.0% → 10.0% (↑2.0%)

重排原因

拍卖原因

原因诊断(证据闭环)

大原因并列展示,点击查看该类下的证据与检查项(已去重)

检查项(已去重)
出价过低
BID_TOO_LOW
预算耗尽
BUDGET_EXHAUSTED
超时
TIMEOUT
证据
pipeline.reasons.*.auction
breakdown.by_hour.*.fill_rate
联系作者
myrawzm0406@163.com
15301052620