Vì sao Data Analyst cần biết experimentation
A/B testing là cách kiểm chứng liệu một thay đổi có thật sự tạo tác động hay chỉ là nhiễu. Với Data Analyst, kỹ năng quan trọng không chỉ là chạy kiểm định thống kê, mà là giúp team trả lời: có nên rollout, rollback, iterate hay cần thêm dữ liệu?
Trong thực tế, experiment tốt phải kết nối đủ 4 lớp:
| Lớp | Câu hỏi cần trả lời |
|---|---|
| Business | Quyết định nào sẽ thay đổi sau test? |
| Product/Marketing | Thay đổi cụ thể là gì và ảnh hưởng ai? |
| Data | Metric nào đo tác động chính và rủi ro phụ? |
| Decision | Ngưỡng nào đủ để ship hoặc dừng? |
Không phải phân tích nào cũng là A/B test
| Phương pháp | Khi nào dùng | Rủi ro chính |
|---|---|---|
| A/B test | Có thể randomize user/session/order |
