tình trạng thiếu bao phủ

Thiếu bao phủ không phải là chuyện người được chọn từ chối trả lời.

Hai lỗi này xảy ra ở hai thời điểm khác nhau: thiếu bao phủ xuất hiện ngay từ lúc lập khung lấy mẫu (sampling frame), khi một nhóm nào đó của tổng thể không hề có cơ hội được chọn; còn thiên lệch do không phản hồi (nonresponse bias) chỉ xuất hiện sau khi mẫu đã được chọn xong, lúc người trong danh sách im lặng hoặc từ chối. Khảo sát qua điện thoại bàn bỏ sót người chỉ dùng di động — đó là thiếu bao phủ. Cũng khảo sát ấy, gọi tới nhà nhưng không ai nhấc máy — đó lại là không phản hồi. Trong bài tự luận, gọi sai tên sẽ mất điểm dù phần mô tả hậu quả có đúng.

Tăng cỡ mẫu không sửa được tình trạng thiếu bao phủ.

Đây là lỗi sửa bài phổ biến nhất: học sinh thấy kết quả lệch liền đề nghị lấy thêm người. Nhưng nếu vẫn lấy từ đúng cái khung đã bỏ sót nhóm đó, thì lấy thêm bao nhiêu cũng chỉ là lấy thêm từ phần dân số đã có mặt sẵn. Cỡ mẫu lớn chỉ làm hẹp độ biến động ngẫu nhiên, còn thiên lệch (bias) thì giữ nguyên hướng và gần như nguyên độ lớn. Cách sửa duy nhất là mở rộng hoặc thay khung lấy mẫu sao cho mọi nhóm đều có cơ hội được chọn.

Chọn ngẫu nhiên không tự động loại bỏ thiếu bao phủ.

Ngẫu nhiên hóa chỉ đảm bảo công bằng giữa những cái tên đã nằm trong danh sách; nó hoàn toàn bất lực với những cái tên chưa bao giờ được đưa vào. Một mẫu ngẫu nhiên đơn giản rút từ danh bạ điện thoại vẫn là mẫu thiếu bao phủ, vì danh bạ không phải là tổng thể. Do đó khi đề mô tả một quy trình có bốc thăm, bấm nút ngẫu nhiên trên máy tính, đừng vội kết luận phương pháp là hợp lệ; hãy hỏi trước rằng danh sách được bốc thăm ấy đến từ đâu.

Nói "mẫu bị thiên lệch" là cách diễn đạt bị trừ điểm.

Thiên lệch là tính chất của phương pháp lấy mẫu và của ước lượng sinh ra từ nó, chứ không phải tính chất của một mẫu cụ thể nào. Cách viết được chấp nhận là: phương pháp này có xu hướng tạo ra ước lượng thấp hơn thực tế (underestimate) hoặc cao hơn thực tế cho tham số của tổng thể. Ngoài ra, cũng đừng nhầm thiếu bao phủ với mẫu phản hồi tự nguyện (voluntary response): loại sau vẫn cho mọi người cơ hội tham gia, chỉ là những người tham gia có quan điểm cực đoan hơn phần còn lại.