参考消息
建议结合具体业务场景,从一🎆个较窄的实验维度(例如🍀仅针对某个分类下的Top词)开始验证方法论,再逐步推广
这能够平衡两组用户在搜索意图、设备类型、历史点击率等方面📢的分布差异,从而使因果估计更可靠
以PSM为例,要求满足 条件可忽略性 ——即给定🌟观测到的协变量后,干预分配与潜在结果独立
在实际百度搜索数据中,这意味着我们需要尽可能多地收集可能影响点击的行为特征:用户的长期搜索模式、当前🎉查询词深度、结⭐果页面中的位置顺序等
传统A/B测试在流量分配不均、用户行为🚀异质性高时,容易产生偏差
如果遗漏了关键🎵混杂因子,因果估计仍然会有偏
建议在实验前通过仿真或历史数据推算所需用户量级,并在实验中持续监测假设的有效性:例如检查匹配后的协变量平衡性(标准化均值差是否低于0