Đội bạn có test rung, mọi người đã quen bấm retry. Bạn xử lý thế nào?

Nguyên nhân rung tập trung vào bốn nhóm. Thời gian: sleep cố định thay vì chờ điều kiện, hoặc test phụ thuộc vào thời điểm chạy. Thứ tự: test chia sẻ trạng thái nên chạy riêng thì xanh mà chạy cùng nhau thì đỏ — chạy bộ test theo thứ tự ngẫu nhiên sẽ phơi bày ngay. Đồng thời: hai test dùng chung một bản ghi database. Và môi trường: phụ thuộc mạng, múi giờ, locale của máy chạy.

Nhóm thời gian đáng nói riêng vì cách sửa gần như luôn giống nhau: thay sleep(500) bằng chờ có điều kiện với thời hạn (waitFor cho tới khi phần tử xuất hiện, tối đa 5 giây). Nó vừa nhanh hơn ở trường hợp thường vừa ổn định hơn khi máy CI chậm — mà máy CI thì luôn chậm hơn máy dev đúng vào lúc bạn không mong đợi.

Phần khó nhất không phải sửa mà là giữ cho nó không quay lại. Nếu không ai sở hữu sức khoẻ bộ test thì tỷ lệ rung sẽ bò lên lại trong vài tháng. Cách hiệu quả mình thấy là để nó thành một chỉ số hiển thị công khai cùng với thời gian chạy CI, và coi một test rung mới như một lỗi cần sửa chứ không phải phiền toái cần chịu đựng.