04
业务价值
基于前面介绍的主播诉求，以及针对主播诉求数据助理产品的内容和架构 。经统计发现有非常多的主播在直播过程中或下播后，真的是在使用数据助理产品的 。那接下来我们想知道主播用了数据助理产品，是不是真的影响到了主播的决策，真的为主播的直播带来了一些价值 。所以我们想通过课题实验的方式，进行实验，分析数据，用数据来说明数据助理产品的业务价值 。于是我们与清华大学经管学院电子商务实验室的同学和老师一起来实现了课题的内容 。
1. 实验过程
① 提出问题

文章插图

因为数据助理已经提供给主播，所以在不影响主播使用的前提下，我们选择了双十二版本的数据助理实时场次报告的内容来做验证 。双十二版本的实时场次报告与之前的版本相比是增加了实时预售信息的，双十二版本的实时预售信息主要体现在这两个地方：第一个是指标总览的成交是可以看到本场次所有预售商品的总的成交情况的；第二部分是在商品分析模块中，每个预售商品都可以实时地查看预售的金额，笔数等指标 。
② 实验设计
实验设计部分，我们的实验方案是根据主播帐号尾号随机分组，尾号0、1、3、8的主播在12月1号到12月3号的预售期间进行直播使用数据助理的实时场次报告的时候是可以看到实时预售信息的，而其他尾号的主播在相同的时间进行直播使用数据助理是看不到实时预售信息的 。能看到的主播即实验组，看不到的即对照组 。如下图所示：

文章插图

③ 数据分析
a. 基础数据准备
实验结束以后进行了如下的数据分析：
统计发现主播使用数据助理且场次中含有预售商品的实验组直播场次有737场，对照组直播场次有1051场 。
对实验组和对照组而进行了主播粉丝数、预售商品数、主播等级、上月播出时长等关键指标的对比分析，发现实验组和对照组在这些指标上的表现是不存在显著差异的 。指标的定义和分析结果如下图所示：

文章插图


文章插图

又作了进一步的过滤，只关注预售商品销量大于1的直播间 。进一步过滤之后，我们又做了以上关键指标的对比分析，确认实验组和对照组在关键指标上不存在显著差异，至此保证两组可比 。
具体指标的分析是通过T检验的方式，详细的分析数值如上图所示 。这个实验课题分析目前已经完成，且对外发表了：
Y. He et al., “The Sales Data Sells : Effects of Real-Time Sales Analytics on Live Streaming Selling,” in AMCIS, 2021, pp. 1-10.
https://aisel.aisnet.org/amcis2021/data_science_decision_support/data_science_decision_support/12/
b. 主分析-数据助理有效
在保证了实验组和对照组可比之后，我们进行了商品销量的分析 。下图圈选部分为预售商品销量的分析结论 。Model 1代表的是引入了是否达人，主播等级，还有商品种类等直播间特征的回归分析的结论 。Model 2是不考虑直播间以上特征的分析结论 。P value都是小于0.01的，P value越小，结果越显著 。

文章插图

另外，我们又做了进一步的鲁棒性校验：在实验组和对照组中，没有使用数据助理的直播重复主分析，发现预售商品销量不存在显著差异 。

• 风水先生说我的房子不能住 生过小孩的房子风水好
• 动车上不能带什么化妆品 动车不能带什么化妆品和水乳
• 淘宝超级推荐退款多久到账？超级推荐怎么收费？
• 大专能不能考公务员 大专怎么考公务员
• 淘宝嘉年华活动怎么取消报名？报名有何要求？
• 淘宝主图打标软件有影响吗？主图打标有什么用？
• 淘宝店铺基本设置在哪里？店铺基本设置可以修改吗？
• 淘宝食品类目怎么选择？食品类目好做吗？
• 淘宝开厨具店流程是什么？附详细步骤
• 淘宝开文具店新手如何进货？有哪些渠道？