Đo lường tác động nhân quả của giao tiếp dân sự mà không cần ngẫu nhiên hóa
Author
Venue
AAAI ICWSM 2024
Abstract
Việc hiểu rõ tác động nhân quả của sự lịch sự là rất quan trọng khi phân tích giao tiếp xã hội trực tuyến, song việc đo lường nhân quả lại rất khó khăn. Các thử nghiệm A/B và các thí nghiệm ngẫu nhiên khác là tiêu chuẩn vàng để xác định tác động nhân quả, nhưng chúng không thể áp dụng trong bối cảnh này do 1) không thể kiểm soát mức độ lịch sự trong thí nghiệm, và quan trọng hơn là 2) những hạn chế về mặt đạo đức khi cố ý ngẫu nhiên hóa mức độ lịch sự. Chúng tôi phát triển một phương pháp bán thực nghiệm mới để định lượng tác động nhân quả của sự lịch sự trong các cộng đồng trực tuyến trên nền tảng xã hội 3D Roblox mà không cần ngẫu nhiên hóa rõ ràng. Phương pháp này sử dụng sự ngẫu nhiên còn lại trong quá trình "ghép đôi" người dùng với máy chủ như một cơ chế bán ngẫu nhiên hóa trong dữ liệu quan sát lịch sử. Chúng tôi phát hiện ra rằng việc phân bổ người dùng vào máy chủ có mức độ giao tiếp lịch sự cao hơn có thể tăng thời gian tương tác lên tới 1,5% trong một số trải nghiệm cụ thể. Với 4,8 tỷ giờ người dùng được dành hàng tháng trên nền tảng này, điều này ngụ ý tiềm năng tăng thêm hơn 8.000 năm người tương tác xã hội mỗi tháng. Hơn nữa, hiệu ứng này bị đánh giá sai bởi các phương pháp phi nhân quả. Các phương pháp bán thực nghiệm hứa hẹn những hướng tiếp cận mới để đo lường tác động nhân quả của hành vi người dùng trong các cộng đồng trực tuyến mà không gây ảnh hưởng tiêu cực đến người dùng thông qua các thí nghiệm ngẫu nhiên.
