Log, metric và trace khác nhau ở đâu? Bạn dùng cái nào cho việc gì?

Sai lầm tốn kém nhất là dùng log để làm việc của metric: ghi một dòng log cho mỗi request rồi đếm bằng truy vấn tìm kiếm. Nó chạy được ở quy mô nhỏ và trở nên vô lý ở quy mô lớn — bạn trả tiền lưu trữ theo gigabyte để có một con số mà một counter làm được với chi phí gần bằng không. Ngược lại, dùng metric để tìm nguyên nhân cũng bế tắc, vì metric đã mất hết ngữ cảnh của từng request.

Điều làm cả ba trở nên hữu ích gấp bội là tương quan: trace id đi cùng mỗi log dòng, và metric có exemplar trỏ tới một trace mẫu. Khi đó từ một điểm nhọn trên biểu đồ bạn nhảy thẳng tới đúng request gây ra nó rồi tới log của nó, thay vì đoán theo mốc thời gian. Đây là lợi ích lớn nhất của việc dùng OpenTelemetry thay vì ba công cụ rời rạc.

Về log có cấu trúc: ghi JSON với các trường cố định thay vì chuỗi tự do. Nghe hình thức nhưng nó là khác biệt giữa việc lọc theo user_id=123 trong một giây và việc viết regex lúc đang có sự cố. Và nhớ giới hạn: log mọi thứ ở mức debug trên production là cách nhanh nhất để hoá đơn quan sát vượt hoá đơn máy chủ.