上下文：
- 我们在Firebase中跟踪我们的广告收入，我们在Firebase Analytics中看到的“每日广告收入”与我们在广告管理器（AppLovin）平台中看到的相匹配。
- 我们有一个firebase远程配置A/B测试运行，我们的目标之一是“估计广告收入”。
- 到目前为止，我们已经运行了超过12天的测试，“每个用户的平均收入”数字现在在A/B测试中相当稳定。
问题：
在A/B测试的观察数据中，总收入和每用户平均收入远远高于真实的数字。例如，两个变体的总收入之和比我们在广告平台或firebase分析中看到的总收入高出30%以上。
问题：
我可能误解了“观察数据”在此上下文中的含义，我希望总广告收入和每个用户的平均收入是“看到的”，而建模数据是预计的估计，但由于它总体上谈论的是“估计的广告收入”，我感到困惑，我不知道如何阅读A/B测试结果中的广告收入数字。
关于这个主题的文档相当少。有人知道吗？
1条答案
按热度按时间ej83mcc01#
“观察数据”是指在A/B测试期间收集的原始数据，没有任何统计建模或调整。这是直接从每个变体组中的用户观察到的数据。重要的是要注意，由于各种因素，如抽样误差或数据收集问题，观察数据可能并不总是准确的。
另一方面，“模型数据”是指经过统计调整以估计每个变体的实际性能的数据。这可能涉及去除离群值，控制混杂变量，或使用其他统计技术来提供对真实性能的更准确估计。
A/B测试中的总收入和每用户平均收入与广告平台的实际数字之间的差异可能是由于以下几个原因造成的。一些可能的解释包括：