Khảo sát thử nghiệm (pilot): 6 bước kiểm tra phiếu trước khi thu dữ liệu chính thức

Khảo sát thử nghiệm (pilot survey) là lần chạy phiếu ở quy mô nhỏ trước khi thu dữ liệu chính thức. Nó giống buổi tổng duyệt trước đêm diễn: bạn phát hiện câu hỏi khó hiểu, thời lượng thật dài hơn dự tính, mã tham gia không ghi vào dữ liệu, hay trang cuối thiếu mã hoàn thành. Sửa những lỗi này khi mới có vài chục phiếu rẻ hơn rất nhiều so với phát hiện chúng sau khi đã thu vài trăm phiếu.

Bài viết này hướng dẫn bạn làm khảo sát thử nghiệm theo 6 bước: mục đích, cỡ pilot thường dùng, đo thời lượng thật để khai đúng "thời lượng phiếu", kiểm tra mã tham gia và mã hoàn thành, chỉnh câu hỏi, rồi mới mở thu thập. Cuối bài là cách chạy một dự án nhỏ trên KhảoSát với người thật trả lời, đúng đối tượng, và bạn chỉ trả tiền cho phiếu hợp lệ.

Khảo sát thử nghiệm là gì và để làm gì?

Trong nghiên cứu định lượng, khảo sát thử nghiệm là bước dùng phiếu gần như hoàn chỉnh với một nhóm nhỏ người có đặc điểm giống mẫu chính. Mục tiêu không phải là kiểm định giả thuyết, mà là kiểm tra xem bộ công cụ có vận hành đúng như bạn thiết kế hay không. Nói gọn: pilot kiểm tra phiếu, chưa kiểm tra mô hình.

Một lần khảo sát thử nghiệm tốt thường trả lời được các câu hỏi sau:

• Người trả lời có hiểu đúng từng câu hỏi, đặc biệt các câu dịch từ thang đo nước ngoài không?
• Thời lượng thật là bao nhiêu phút, có khớp con số bạn định khai không?
• Rẽ nhánh, câu sàng lọc, câu bắt buộc có chạy đúng không?
• Mã tham gia có xuất hiện trong file dữ liệu xuất ra không?
• Người trả lời có thấy và nhập lại được mã hoàn thành không?
• Phiếu hiển thị thế nào trên điện thoại?

Cỡ mẫu khảo sát thử nghiệm bao nhiêu là đủ?

Không có một con số bắt buộc cho mọi đề tài. Trong thực hành phổ biến, nhiều tài liệu phương pháp gợi ý khảo sát thử nghiệm với khoảng vài chục người, thường trong khoảng 10 đến 30 người, hoặc lấy một tỷ lệ nhỏ so với cỡ mẫu chính. Mục đích là đủ để thấy các lỗi lặp lại, chứ không phải để có ý nghĩa thống kê.

Cách chọn cỡ pilot hợp lý phụ thuộc vào điều bạn muốn kiểm tra:

Trên KhảoSát, mỗi dự án có từ 20 đến 2000 phiếu. Vì vậy, nếu muốn khảo sát thử nghiệm với người trả lời thật thông qua nền tảng, cỡ nhỏ nhất bạn có thể đặt là 20 phiếu. Con số này nằm trong khoảng thường dùng cho pilot đo thời lượng và kiểm tra kỹ thuật. Để xác định cỡ mẫu chính, bạn đọc thêm bài cỡ mẫu.

Bước 1: Tự làm thử và nhờ người quen làm thử

Trước khi chi tiền cho khảo sát thử nghiệm, hãy tự làm phiếu một lần từ đầu đến cuối với tốc độ đọc bình thường, bấm giờ và ghi lại mọi chỗ vướng. Sau đó nhờ hai đến ba người không quen đề tài làm thử, tốt nhất là người có đặc điểm gần với đối tượng nghiên cứu.

1. 1
   Mở bằng trình duyệt ẩn danh: kiểm tra phiếu mở cho mọi người, không yêu cầu đăng nhập tài khoản tổ chức.
2. 2
   Làm trên điện thoại: nhiều người trả lời dùng điện thoại, bảng Likert phải hiển thị gọn, không phải kéo ngang.
3. 3
   Đi hết mọi nhánh: chọn thử từng phương án ở câu sàng lọc để chắc rẽ nhánh đúng.
4. 4
   Gửi phiếu và xuất dữ liệu: mở file xuất ra, kiểm tra cột "Mã tham gia" có giá trị.
5. 5
   Ghi nhật ký: mỗi lỗi một dòng, kèm cách sửa.

Vòng làm thử nội bộ này miễn phí và loại được phần lớn lỗi hiển nhiên. Nó chưa phải khảo sát thử nghiệm đầy đủ, vì người quen thường đọc kỹ hơn, kiên nhẫn hơn và hiểu ý bạn hơn người trả lời thật.

Bước 2: Chạy khảo sát thử nghiệm với người đúng đối tượng

Người quen giúp tìm lỗi kỹ thuật, nhưng không thay được người trả lời thật. Một lần khảo sát thử nghiệm với đúng nhóm đối tượng cho bạn thời lượng gần với thực tế hơn, cách hiểu câu hỏi của người ngoài cuộc, và các tình huống kỹ thuật mà bạn không nghĩ tới.

Trên KhảoSát, bạn có thể tạo một dự án nhỏ (tối thiểu 20 phiếu) dùng chính phiếu sẽ thu chính thức. Người trả lời khai hồ sơ (năm sinh, giới tính, quốc gia, tỉnh, nghề, học vấn, lĩnh vực, ngôn ngữ) và chỉ người có hồ sơ khớp tiêu chí mới thấy khảo sát. Mỗi số điện thoại chỉ được một tài khoản người trả lời. Như vậy pilot của bạn đến với người thật, đúng đối tượng.

1. 1
   Tạo dự án pilot: đặt tên rõ, ví dụ "Pilot - Ý định dùng ví điện tử", điền link phiếu, link điền trước, thời lượng ước tính.
2. 2
   Chọn đối tượng giống mẫu chính: cùng nhóm nghề, độ tuổi, tỉnh thành bạn dự định dùng.
3. 3
   Đặt số phiếu nhỏ: tối thiểu 20 phiếu.
4. 4
   Cam kết liêm chính và thanh toán: chuyển khoản theo mã đơn, chờ quản trị duyệt nội dung.
5. 5
   Theo dõi tiến độ: xem thời gian làm phiếu và cảnh báo của từng lượt.

Chi tiết từng ô khi tạo dự án có trong bài tạo dự án khảo sát.

Ví dụ minh họa chi phí: khảo sát thử nghiệm 20 phiếu, đối tượng sinh viên (nhóm phổ thông, hệ số x1), phiếu khoảng 10 phút. Giá mỗi phiếu hợp lệ là 22.000 đ, tổng 20 phiếu là 440.000 đ. Giá có thể thay đổi; hãy xem báo giá chính xác ở bảng giá khi tạo dự án.

Bước 3: Đo thời lượng thật và khai đúng "thời lượng phiếu"

Đây là lợi ích rất thực tế của khảo sát thử nghiệm. Trên KhảoSát, thời lượng phiếu bạn khai ảnh hưởng trực tiếp đến hai thứ: giá mỗi phiếu hợp lệ và ngưỡng cảnh báo làm quá nhanh.

Hệ thống cảnh báo khi một lượt làm xong dưới 30% thời lượng dự kiến. Nếu bạn khai 10 phút, lượt nào xong dưới 3 phút sẽ bị gắn cảnh báo. Khai quá thấp thì người đọc kỹ vẫn bị coi là bình thường dù phiếu thực tế dài hơn; khai quá cao thì bạn trả giá cao hơn cần thiết và ngưỡng cảnh báo bị đẩy lên.

Khi khảo sát thử nghiệm xong, bạn có thời gian làm phiếu của từng lượt (khách hàng thấy mã tham gia, thời gian làm phiếu và cảnh báo, không thấy danh tính người trả lời). Hãy dùng số liệu này như sau:

1. Bỏ các lượt rõ ràng bất thường (quá nhanh hoặc để treo rất lâu).
2. Lấy trung vị thời gian thay vì trung bình, vì trung bình dễ bị kéo lệch bởi vài người để phiếu mở rồi quay lại sau.
3. Làm tròn lên mốc phút hợp lý và khai con số đó cho dự án chính.

Ví dụ minh họa: 20 lượt pilot có thời gian từ 6 đến 19 phút, trung vị khoảng 11 phút. Bạn đã định khai 10 phút. Kết quả khảo sát thử nghiệm cho thấy nên rút gọn phiếu xuống dưới 10 phút, hoặc khai 15 phút cho đúng thực tế. Cả hai cách đều trung thực; cách thứ nhất thường giúp dữ liệu tốt hơn vì người trả lời ít mệt.

Bước 4: Kiểm tra mã tham gia và mã hoàn thành

Khảo sát thử nghiệm là lúc tốt nhất để chắc chắn khâu đối soát sẽ chạy trơn tru. KhảoSát không xem, không lưu nội dung câu trả lời; câu trả lời nằm trên form của bạn. Hệ thống chỉ quản lý mã tham gia dạng KSxxxxxxxx (KS + 8 ký tự), riêng cho từng lượt làm phiếu, để bạn đối soát sau này.

Sau khi có vài lượt khảo sát thử nghiệm, hãy làm đúng quy trình đối soát: xuất CSV hoặc Excel từ form, tải lên KhảoSát, xem mã nào khớp. Mã có trong dữ liệu là hợp lệ; mã không có bị từ chối kèm lý do. Nếu nhiều mã không khớp, rất có thể link điền trước sai hoặc câu "Mã tham gia" không ghi giá trị. Quy trình đầy đủ ở bài đối soát phiếu khảo sát.

Hướng dẫn chi tiết từng nền tảng ở trang hướng dẫn và bài Google Forms. Tài liệu gốc của nhà cung cấp: trợ giúp Google Docs, Qualtrics Support, Microsoft Forms.

Bước 5: Chỉnh câu hỏi dựa trên kết quả khảo sát thử nghiệm

Khi có dữ liệu khảo sát thử nghiệm, đừng chỉ nhìn thời gian. Hãy mở file dữ liệu và đọc từng cột. Các dấu hiệu sau gợi ý câu hỏi cần chỉnh:

Nếu phiếu có câu mở cuối "Bạn có góp ý gì về phiếu này không?", hãy đọc kỹ mọi góp ý trong khảo sát thử nghiệm. Đây là nguồn phát hiện lỗi diễn đạt rất quý. Khi chuyển sang thu chính thức, bạn có thể giữ hoặc bỏ câu này.

Bước 6: Quyết định dữ liệu pilot và mở thu thập chính thức

Sau khảo sát thử nghiệm, một câu hỏi thường gặp là có gộp dữ liệu pilot vào mẫu chính không. Thực hành phổ biến là không gộp nếu bạn đã sửa câu hỏi, đổi thang đo hay thay đổi thứ tự phiếu, vì người trả lời pilot đã làm một phiên bản khác. Nếu phiếu giữ nguyên hoàn toàn, việc gộp cần được nêu rõ và có lý do trong phần phương pháp.

Trước khi tạo dự án chính, hãy rà lại checklist:

• Đã tự làm thử trên máy tính, điện thoại và trình duyệt ẩn danh.
• Đã chạy khảo sát thử nghiệm với người đúng đối tượng.
• Đã có thời gian trung vị, khai thời lượng phiếu đúng thực tế.
• Mã tham gia xuất hiện trong file xuất, đối soát khớp.
• Mã hoàn thành hoặc chuyển hướng Qualtrics hoạt động.
• Đã sửa câu khó hiểu, bổ sung phương án thiếu, xem lại câu bắt buộc.
• Đã ghi nhật ký thay đổi sau khảo sát thử nghiệm.
• Phiếu có trang giới thiệu, xin đồng ý, quyền dừng bất kỳ lúc nào.
• Không thu mật khẩu, số tài khoản, số căn cước, ảnh giấy tờ.

Khảo sát thử nghiệm trên KhảoSát: những điều cần biết

Tóm tắt các điểm vận hành liên quan đến khảo sát thử nghiệm trên KhảoSát:

Vì phần chưa thu được hoàn vào số dư khi dự án kết thúc, bạn có thể dùng số dư đó cho dự án chính sau khảo sát thử nghiệm. Dịch vụ không làm hộ phiếu, không tạo, bán hay sửa dữ liệu; mọi câu trả lời đến từ người trả lời tự nguyện. Đọc thêm trang liêm chính và dịch vụ.

Mô tả khảo sát thử nghiệm trong phần phương pháp

Hội đồng và phản biện thường đánh giá cao khi bạn nêu rõ đã làm khảo sát thử nghiệm. Hãy mô tả ngắn gọn: thời điểm, số người, cách tuyển, những gì đã sửa. Đồng thời nêu trung thực đặc điểm mẫu: tuyển qua nền tảng trực tuyến, người trả lời tự nguyện và nhận điểm thưởng, đây là chọn mẫu phi xác suất (thuận tiện có kiểm soát tiêu chí), không phải mẫu xác suất.

Ví dụ cách viết: "Trước khi thu chính thức, phiếu được khảo sát thử nghiệm với 20 người trả lời có đặc điểm tương tự mẫu chính, tuyển qua nền tảng khảo sát trực tuyến. Kết quả pilot dẫn đến việc viết lại 3 câu hỏi và điều chỉnh thời lượng dự kiến từ 10 lên 12 phút. Dữ liệu pilot không được gộp vào mẫu chính."

Cách trích dẫn và trình bày có thể tham khảo APA Style. Khi cần hỗ trợ phân tích dữ liệu sau thu thập, bạn có thể tham khảo ResearchSTAT trong cùng hệ sinh thái.

Câu hỏi thường gặp

Khảo sát thử nghiệm có bắt buộc không?

Không có quy định chung bắt buộc mọi đề tài, nhưng khảo sát thử nghiệm là thực hành tốt và thường được hội đồng đánh giá cao. Nó giúp phát hiện lỗi câu chữ, lỗi kỹ thuật và đo thời lượng thật trước khi bạn chi phí cho mẫu lớn.

Khảo sát thử nghiệm nên có bao nhiêu người?

Ở mức phổ biến, pilot thường có khoảng 10 đến 30 người, đủ để thấy thời gian điển hình và lỗi lặp lại. Trên KhảoSát, dự án nhỏ nhất là 20 phiếu, phù hợp cho pilot đo thời lượng và kiểm tra mã.

Có gộp dữ liệu khảo sát thử nghiệm vào mẫu chính được không?

Nếu sau pilot bạn đã sửa câu hỏi hoặc thang đo, thực hành phổ biến là không gộp. Nếu phiếu giữ nguyên, việc gộp cần được nêu rõ và giải thích trong phần phương pháp.

Khảo sát thử nghiệm trên KhảoSát tính tiền thế nào?

Như mọi dự án: giá theo thời lượng phiếu và đối tượng, chỉ phiếu hợp lệ tính tiền. Ví dụ 20 phiếu sinh viên, phiếu 10 phút, là 440.000 đ. Xem báo giá chính xác ở trang bảng giá.

Vì sao nên lấy trung vị thời gian thay vì trung bình?

Một vài người có thể mở phiếu rồi quay lại sau, làm thời gian trung bình bị kéo dài. Trung vị phản ánh thời gian điển hình tốt hơn, giúp bạn khai thời lượng phiếu sát thực tế.

KhảoSát có làm khảo sát thử nghiệm hộ không?

Không. Bạn tự thiết kế phiếu và tự đánh giá kết quả pilot. KhảoSát tuyển người thật đúng đối tượng trả lời phiếu của bạn, không làm hộ phiếu và không tạo hay sửa dữ liệu.