Safety & Civility
Data Science
在不进行随机分组的情况下测量公民沟通的因果效应
Author
Venue
AAAI ICWSM 2024
Abstract
在分析在线社交沟通时，理解文明行为的因果效应至关重要，但因果关系的测量却颇具挑战。A/B测试及其他随机实验虽是确立因果效应的黄金标准，但在本研究场景中却难以适用，原因在于：1) 实验中无法控制文明行为水平；更重要的是，2) 故意随机分配文明行为水平存在伦理限制。 我们开发了一种创新的准实验方法，无需显式随机化即可量化Roblox社交3D平台在线社区中文明程度的因果效应。该方法利用用户分配至服务器的“匹配”过程中的残余随机性，作为观察性历史数据中的准随机化机制。 我们发现，将用户分配到文明交流水平更高的服务器上，在特定体验中可使参与时间增加多达1.5%。鉴于该平台每月累计用户时长达48亿小时，这意味着每月潜在增加的社交互动时间超过8,000人年。 此外，非因果方法往往会低估这一效应。准实验方法为衡量在线社区中用户行为的因果影响开辟了新途径，且无需通过随机实验对用户造成负面影响。
