Có một kiểu thất bại rất phổ biến ở luận văn và đề tài cấp cơ sở: dữ liệu đã thu xong, phiếu khảo sát đã phát cho vài trăm người, rồi đến lúc phân tích mới thấy thiếu một biến quan trọng, hoặc thang đo không cho phép dùng phép kiểm định đã định, hoặc một câu hỏi nghiên cứu không có dữ liệu nào trả lời. Lúc đó chỉ còn hai lựa chọn, đều tệ: thu lại, hoặc sửa câu hỏi nghiên cứu cho khớp với dữ liệu đã có.
Cách phòng đơn giản đến mức nhiều người bỏ qua: trước khi thu bất cứ dữ liệu nào, lập một bảng nối từng câu hỏi với thứ cần đo và cách phân tích. Cố vấn có kinh nghiệm thường yêu cầu bảng này trước cả khi đọc bảng hỏi.
Bảng bốn cột
Mỗi hàng là một câu hỏi nghiên cứu (hoặc một giả thuyết). Bốn cột:
- Câu hỏi hoặc giả thuyết, viết đúng như trong đề cương.
- Biến hoặc khái niệm cần đo: tên biến, vai trò (phụ thuộc, độc lập, kiểm soát, trung gian), định nghĩa thao tác.
- Nguồn và công cụ: câu nào trong bảng hỏi, câu nào trong hướng dẫn phỏng vấn, trường nào trong bộ dữ liệu thứ cấp; thang đo gì, mấy mức.
- Phép phân tích: kiểm định hay mô hình cụ thể, và kết quả trông thế nào thì được coi là trả lời câu hỏi.
Ví dụ với một đề tài về sự gắn kết của sinh viên năm nhất:
| Câu hỏi | Biến | Công cụ | Phân tích |
|---|---|---|---|
| Mức gắn kết của sinh viên năm nhất khác nhau theo hình thức ở (ký túc xá, nhà trọ, gia đình) không? | Gắn kết (phụ thuộc, thang tổng); hình thức ở (độc lập, định danh 3 nhóm) | Thang gắn kết 12 câu, Likert 5 mức; câu hỏi chọn một về nơi ở | So sánh trung bình ba nhóm (ANOVA một chiều hoặc kiểm định phi tham số nếu vi phạm giả định) |
| Thời gian đi làm thêm có liên quan đến gắn kết không, sau khi kiểm soát giới tính và ngành? | Giờ làm thêm/tuần (liên tục); giới tính, ngành (kiểm soát) | Câu hỏi mở số giờ; hai câu nhân khẩu | Hồi quy tuyến tính đa biến |
| Sinh viên mô tả điều gì giúp họ thấy thuộc về trường? | Trải nghiệm thuộc về (định tính) | Phỏng vấn bán cấu trúc 12–15 người, 3 câu chính | Phân tích chủ đề |
Chỉ riêng việc điền bảng đã làm lộ ra vài vấn đề. Câu thứ hai cần số giờ là con số, nên câu hỏi kiểu “làm thêm ít / vừa / nhiều” sẽ không dùng được cho hồi quy như dự định. Câu thứ ba cần chọn người phỏng vấn sao cho có đủ cả ba hình thức ở, tức là phải nối với dữ liệu định lượng.
Năm phép kiểm khi bảng đã điền xong
1. Mỗi câu hỏi có ít nhất một hàng
Nghe hiển nhiên, nhưng đề cương hay có một câu hỏi “cho đủ bộ”, kiểu “đề xuất giải pháp nâng cao…”, mà không có dữ liệu nào trả lời. Nếu câu đó dựa vào thảo luận kết quả chứ không dựa vào dữ liệu riêng, nên chuyển nó thành mục khuyến nghị thay vì để làm câu hỏi nghiên cứu.
2. Mỗi câu trong bảng hỏi nằm ở ít nhất một hàng
Đây là chiều ngược lại. Câu nào trong bảng hỏi không phục vụ hàng nào thì hoặc bỏ, hoặc bạn đang thiếu một câu hỏi nghiên cứu. Bảng hỏi càng dài, tỷ lệ người trả lời qua loa càng tăng, nên mỗi câu thừa đều có giá.
3. Loại thang đo khớp với phép phân tích
Biến định danh không tính trung bình. Biến thứ bậc ba mức không nên đưa vào hồi quy như biến liên tục. Biến phụ thuộc nhị phân cần hồi quy logistic chứ không phải hồi quy tuyến tính. Ghi rõ loại thang vào cột ba giúp bắt lỗi này ngay trên giấy.
4. Cỡ mẫu đủ cho phép phân tích phức tạp nhất
Cỡ mẫu thường được tính cho câu hỏi chính, nhưng phép phân tích nặng nhất mới là thứ quyết định. Một mô hình có tám biến độc lập và tương tác cần nhiều quan sát hơn hẳn một phép so sánh hai nhóm. Nếu muốn so sánh theo nhóm nhỏ, chẳng hạn ba ngành, mỗi nhóm cũng cần đủ người. Dùng phần mềm tính cỡ mẫu theo hiệu ứng dự kiến thay vì lấy con số theo thói quen.
5. Biết trước kết quả nào là “trả lời được”
Ở cột bốn, viết thêm một dòng: nếu hệ số dương và có ý nghĩa thì kết luận gì, nếu không có ý nghĩa thì kết luận gì. Việc này buộc bạn nghĩ về kết quả âm tính trước khi thấy nó, và tránh tình trạng thấy kết quả không như ý rồi mới đi tìm cách phân tích khác.
Với nghiên cứu định tính, bảng vẫn cần nhưng khác cột
Nghiên cứu định tính không có biến theo nghĩa thống kê, nhưng vẫn cần nối câu hỏi với dữ liệu. Thay cột “biến” bằng “khái niệm định hướng” (khái niệm từ khung lý thuyết sẽ dùng làm điểm tựa), thay “công cụ” bằng câu hỏi phỏng vấn hoặc tình huống quan sát cụ thể, và thay “phép phân tích” bằng cách mã hoá dự kiến (theo khung có sẵn, mở hoàn toàn, hay kết hợp). Thêm một cột về chọn người tham gia: ai, bao nhiêu, vì sao họ có thông tin cho câu hỏi đó.
Lỗi hay gặp ở đây là hướng dẫn phỏng vấn có hai mươi câu, mỗi câu hỏi một chuyện, không nối về câu hỏi nghiên cứu nào. Kết quả là bản ghi âm dài mà phần trả lời được câu hỏi chính chỉ vài phút.
Dữ liệu thứ cấp: kiểm tra trước khi tin
Khi dùng bộ dữ liệu có sẵn (khảo sát quốc gia, dữ liệu doanh nghiệp, cơ sở dữ liệu trích dẫn), bảng bốn cột còn quan trọng hơn, vì bạn không kiểm soát được cách đo. Với mỗi biến, mở tài liệu mô tả của bộ dữ liệu và kiểm:
- Biến được hỏi đúng như bạn nghĩ không, hay chỉ có tên giống?
- Có được hỏi ở mọi năm, mọi vòng khảo sát bạn định dùng không?
- Tỷ lệ thiếu dữ liệu bao nhiêu, thiếu có theo quy luật không?
- Đơn vị quan sát là gì: cá nhân, hộ, doanh nghiệp? Có khớp với câu hỏi của bạn không?
Nhiều đề tài vướng ở câu cuối: câu hỏi ở cấp cá nhân nhưng dữ liệu ở cấp hộ, hoặc ngược lại.
Khi bảng làm lộ ra câu hỏi quá rộng
Điền bảng thường làm lộ một vấn đề sâu hơn lỗi thang đo: câu hỏi nghiên cứu rộng đến mức một hàng không chứa nổi. Dấu hiệu dễ thấy là cột hai của một câu hỏi phải liệt kê sáu, bảy biến phụ thuộc, hoặc cột bốn ghi “phân tích tổng hợp các yếu tố”. Một câu hỏi như “các yếu tố ảnh hưởng đến chất lượng đào tạo” không có phép phân tích nào trả lời gọn được, vì chất lượng đào tạo chưa được định nghĩa thành thứ đo được.
Cách xử là tách câu hỏi thành vài câu nhỏ, mỗi câu một biến phụ thuộc rõ ràng, rồi chọn ra một hoặc hai câu làm trọng tâm. Những câu còn lại có thể giữ làm phân tích phụ hoặc để dành cho nghiên cứu sau. Người học thường tiếc vì thấy đề tài bị thu hẹp, nhưng một đề tài hẹp mà trả lời chắc chắn có giá trị hơn một đề tài rộng mà câu nào cũng trả lời nửa vời.
Ngược lại, nếu cả bảng chỉ có một hàng với một phép so sánh đơn giản, có thể đề tài đang quá mỏng so với yêu cầu của bậc học. Lúc đó hãy hỏi thêm: kết quả ấy có khác nhau theo nhóm nào không, cơ chế nào giải thích nó, và có thể bổ sung một phần định tính để hiểu vì sao không.
Mang bảng đi xin góp ý
Bảng bốn cột là tài liệu tốt nhất để mang đến người hướng dẫn hoặc cố vấn trước khi thu dữ liệu, tốt hơn đề cương hai mươi trang. Người đọc nhìn một trang là thấy logic từ câu hỏi đến phân tích, và góp ý trúng chỗ. Hãy gửi kèm bảng hỏi nháp và hỏi cụ thể: “Anh chị xem giúp em hàng hai, em lo câu hỏi giờ làm thêm sẽ có nhiều người bỏ trống.”
Nếu có thể, chạy thử bảng hỏi với năm đến mười người giống đối tượng thật, rồi nhập thử dữ liệu và chạy thử phân tích trên số liệu đó. Kết quả không có nghĩa gì về mặt thống kê, nhưng nó làm lộ lỗi nhập liệu, câu hỏi gây hiểu nhầm và biến mã hoá sai trước khi bạn đổ công thu cả trăm phiếu.
Bảng này đi theo bạn đến tận chương kết quả
Sau khi thu dữ liệu, bảng bốn cột trở thành khung cho chương kết quả: mỗi hàng là một mục, theo đúng thứ tự câu hỏi. Khi viết phần thảo luận, cột bốn nhắc bạn đã định kết luận thế nào trước khi thấy số liệu, và những chỗ bạn phải đổi cách phân tích cần được nói rõ lý do. Hội đồng và phản biện rất dễ nhận ra một chương kết quả được viết theo dữ liệu có gì dùng nấy, so với một chương đi đúng theo câu hỏi đã đặt. Một trang bảng làm ở đầu tiết kiệm được hàng tuần sửa ở cuối.
Câu hỏi thường gặp
Bảng thiết kế này có bắt buộc trong đề cương không?
Nhiều cơ sở đào tạo không yêu cầu, nhưng nên làm dù chỉ để dùng riêng. Nó giúp phát hiện thiếu biến, sai thang đo hoặc câu hỏi không có dữ liệu trả lời trước khi quá muộn.
Nghiên cứu định tính có cần bảng này không?
Có, với các cột điều chỉnh: khái niệm định hướng, câu hỏi phỏng vấn cụ thể, cách chọn người tham gia và cách mã hoá dự kiến.
Đã thu dữ liệu rồi mới lập bảng thì có muộn không?
Vẫn có ích để biết dữ liệu trả lời được câu hỏi nào, nhưng lúc đó chỉ có thể điều chỉnh phạm vi kết luận chứ không bù được biến đã thiếu.
Có nên chạy thử phân tích trên dữ liệu thử nghiệm không?
Nên. Năm đến mười phiếu thử đủ để phát hiện lỗi mã hoá, câu hỏi gây hiểu nhầm và biến không phân tích được như dự định.
Cỡ mẫu nên tính theo câu hỏi nào?
Theo phép phân tích đòi hỏi nhiều quan sát nhất, thường là mô hình nhiều biến hoặc phép so sánh giữa các nhóm nhỏ, không chỉ theo câu hỏi chính.
