Nên báo cáo phân vị cao hay khoảng dao động khi thử phản hồi?

By admin
Tóm tắt

Không có một thống kê duy nhất phù hợp cho mọi phép thử phản hồi. Trung vị mô tả vị trí giữa của các quan sát; phân vị cao giúp nhìn phần đuôi chậm; khoảng dao động cho biết các giá trị trải rộng đến đâu nhưng dễ bị ảnh hưởng bởi ngoại lệ. Thay vì chọn chỉ số có vẻ thuận lợi, hãy nêu câu hỏi đo lường, công bố số lần thử và cách lấy mẫu, rồi trình bày thống kê phù hợp cùng giới hạn của nó.

Điểm chính

  1. Trung vị và phân vị trả lời câu hỏi về vị trí trong phân bố; chúng không thay thế việc công bố dữ liệu và phương pháp lấy mẫu.
  2. Phân vị cao có thể làm rõ phần quan sát chậm hơn, nhưng cần nêu cách tính và số mẫu để người đọc hiểu độ tin cậy.
  3. NVIDIA Reflex SDK mô tả các công cụ marker dành cho đo lường độ trễ trong tích hợp phát triển; không phải chuẩn phổ quát để xếp hạng mọi thiết bị. [1]
  4. Khoảng dao động phụ thuộc cách xác định hai đầu mút và có thể bị một quan sát bất thường chi phối.
  5. Không suy ra hiệu năng mọi game hoặc trải nghiệm mọi người dùng từ một tập thử đơn lẻ.

Trước hết xác định câu hỏi phép đo

Một phép thử có thể muốn biết giá trị điển hình, mức chậm thường gặp ở phần đuôi, hay độ ổn định giữa các lần chạy. Trung vị phù hợp khi cần tóm tắt vị trí trung tâm mà không để một ngoại lệ đơn lẻ kéo mạnh giá trị. Phân vị cao trả lời câu hỏi khác: một tỷ lệ quan sát nằm ở hoặc dưới một ngưỡng nào đó ra sao. Còn khoảng dao động cho biết span giữa các giá trị được chọn, nhưng không mô tả nơi phần lớn dữ liệu tập trung.

Vì mỗi chỉ số làm nổi bật khía cạnh khác nhau, đừng dùng chúng như các tên gọi thay thế cho nhau. Nếu câu hỏi là về sự chậm bất thường, trung bình hoặc trung vị đơn độc có thể che phần đuôi. Nếu câu hỏi là mức điển hình, chỉ báo một cực trị có thể phóng đại một lần chạy khác thường. Cần nói rõ “độ phản hồi” đang được đo từ mốc nào đến mốc nào, thay vì coi mọi công cụ đo latency là tương đương.

Đọc trung vị, phân vị và khoảng dao động

Trung vị chia tập quan sát đã sắp xếp thành hai nửa theo thứ tự. Chỉ số này dễ diễn giải như một điểm giữa, song không cho biết toàn bộ độ phân tán hay hình dạng phần đuôi. Phân vị cao bổ sung thông tin về các quan sát ở phía chậm hơn; nhưng báo cáo cần ghi rõ phân vị nào, thuật toán nội suy nếu quan trọng, và số mẫu. Với mẫu nhỏ, một vài quan sát có thể làm thay đổi đáng kể ước lượng ở phần đuôi.

Illustration: Đọc trung vị Decorative illustration for the section "Đọc trung vị"; visual only, carries no data.

Khoảng dao động có thể là min–max hoặc một khoảng giữa hai phân vị; hai cách đó khác nhau. Min–max nhạy với lỗi đo, lần chạy bất thường và điều kiện khởi động. Khoảng giữa các phân vị thường bền hơn với cực trị nhưng bỏ qua phần nằm ngoài. Vì vậy, hãy viết cụ thể hai đầu mút được tính như thế nào, không chỉ ghi “range”. Nếu có thể, kèm biểu đồ phân bố hoặc bảng các lần đo để độc giả tự thấy mức độ phân tán.

Tài liệu NVIDIA Reflex SDK trình bày marker và công cụ cho nhà phát triển quan sát các giai đoạn liên quan đến độ trễ trong bối cảnh tích hợp. Điều đó nhắc rằng vị trí bắt đầu/kết thúc và cách instrument hóa ảnh hưởng ý nghĩa con số; trang này không xác lập một thước đo thống nhất cho mọi phần mềm hay hệ thống. [1]

Báo cáo sao cho có thể kiểm tra lại

Ghi thiết bị đầu vào, cấu hình phần mềm có liên quan, phiên bản ứng dụng, điều kiện thử và định nghĩa hai mốc đo. Nêu số lần lặp, cách loại bỏ mẫu lỗi (nếu có), đơn vị, thống kê chính và một chỉ số bổ sung. Không âm thầm xóa các lượt chậm chỉ vì chúng làm kết quả kém đẹp; nếu loại mẫu theo quy tắc định trước, công bố quy tắc đó và số mẫu bị loại.

Một bảng gọn có thể gồm trung vị, phân vị đã chọn, khoảng giữa phân vị hoặc min–max có định nghĩa, cùng cỡ mẫu. Nếu chỉ được phép nêu một số, chọn theo câu hỏi đã nêu và nói rõ điều số đó không đại diện. Kết quả đo độ trễ không tự động chứng minh người chơi sẽ phản ứng nhanh hơn, cũng không xếp hạng cấu hình khác chưa thử.

Bạn có thể Theo dõi thêm kết quả thi đấu thể thao cùng KLIVE trong khi tách bạch nội dung sự kiện với phép đo thiết bị; liên kết này không khẳng định KLIVE cung cấp công cụ đo độ trễ hay số liệu benchmark.

Nguồn tham khảo

  1. NVIDIA — Reflex SDK

Câu hỏi thường gặp

Chỉ báo trung vị có đủ không?

Chỉ khi mục tiêu là tóm tắt vị trí trung tâm và giới hạn đó được nói rõ. Nếu độ trễ ở phần đuôi quan trọng, nên bổ sung phân vị hoặc phân bố.

Phân vị cao có luôn tốt hơn khoảng dao động không?

Không. Phân vị tập trung vào một vị trí trong phân bố; khoảng dao động tóm tắt span theo định nghĩa đã chọn. Chỉ số phù hợp phụ thuộc câu hỏi.

Cần ghi cỡ mẫu vì sao?

Cỡ mẫu giúp đánh giá mức vững của thống kê, nhất là phân vị cao. Thiếu số mẫu, người đọc khó biết một con số đại diện cho bao nhiêu lần thử.