การวัดผลกระทบเชิงสาเหตุของการสื่อสารทางพลเรือนโดยไม่มีการสุ่ม
Author
Venue
AAAI ICWSM 2024
Abstract
การเข้าใจผลกระทบเชิงสาเหตุของความสุภาพเป็นสิ่งสำคัญอย่างยิ่งเมื่อวิเคราะห์การสื่อสารทางสังคมออนไลน์ อย่างไรก็ตาม การวัดความสัมพันธ์เชิงสาเหตุนั้นเป็นเรื่องที่ยาก การทดสอบ A/B และการทดลองแบบสุ่มอื่น ๆ เป็นมาตรฐานทองคำสำหรับการกำหนดผลกระทบเชิงสาเหตุ แต่ไม่สามารถนำไปใช้ในบริบทนี้ได้เนื่องจาก 1) ไม่สามารถควบคุมระดับความสุภาพในการทดลองได้ และที่สำคัญกว่า 2) ข้อจำกัดทางจริยธรรมในการสุ่มระดับความสุภาพโดยเจตนา เราพัฒนาวิธีการเชิงทดลองกึ่งทดลองแบบใหม่เพื่อวัดผลกระทบเชิงสาเหตุของความสุภาพในชุมชนออนไลน์บนแพลตฟอร์มโซเชียล 3 มิติ Roblox โดยไม่จำเป็นต้องมีการสุ่มตัวอย่างอย่างชัดเจน วิธีการนี้ใช้ความสุ่มที่เหลืออยู่ในกระบวนการจับคู่ผู้ใช้กับเซิร์ฟเวอร์ (matchmaking) เป็นกลไกการสุ่มแบบกึ่งสุ่มในข้อมูลเชิงประวัติศาสตร์ที่สังเกตได้ เราพบว่า การมอบหมายผู้ใช้ให้ไปอยู่กับเซิร์ฟเวอร์ที่มีการสื่อสารทางสังคมที่สูงขึ้น สามารถเพิ่มเวลาการมีส่วนร่วมได้ถึง 1.5% ในประสบการณ์บางประการ โดยเฉพาะอย่างยิ่ง เมื่อพิจารณาถึงจำนวนชั่วโมงที่ผู้ใช้ใช้บนแพลตฟอร์มถึง 4.8 พันล้านชั่วโมงต่อเดือน นั่นหมายถึงการเพิ่มขึ้นของเวลาการมีปฏิสัมพันธ์ทางสังคมมากกว่า 8,000 ปีของผู้ใช้ทุกเดือน นอกจากนี้ ผลกระทบนี้ยังถูกประเมินผิดพลาดโดยวิธีการที่ไม่ใช่เชิงสาเหตุ วิธีการกึ่งทดลองสัญญาว่าจะเปิดแนวทางใหม่ในการวัดผลกระทบเชิงสาเหตุของพฤติกรรมผู้ใช้ในชุมชนออนไลน์โดยไม่ส่งผลกระทบเชิงลบต่อผู้ใช้ผ่านการทดลองแบบสุ่ม
