Cách xử lý bằng chứng nghiên cứu mâu thuẫn

Vì vậy, xử lý bằng chứng mâu thuẫn không phải là lựa chọn một nguồn phù hợp với quan điểm có sẵn, mà là quá trình phân tích để xác định bằng chứng nào đáng tin cậy hơn, trong điều kiện nào và có thể áp dụng đến đâu.

Hiểu đúng bản chất của bằng chứng mâu thuẫn

Bằng chứng mâu thuẫn xuất hiện khi hai hoặc nhiều nguồn nghiên cứu đưa ra các kết luận không đồng nhất về cùng một vấn đề.

Sự mâu thuẫn có thể thuộc nhiều dạng:

·         Hai nghiên cứu đo cùng một hiện tượng nhưng cho kết quả khác nhau

·         Các nghiên cứu sử dụng phương pháp khác nhau dẫn đến cách giải thích khác nhau

·         Kết quả nghiên cứu đúng trong một điều kiện nhưng không đúng trong điều kiện khác

·         Bằng chứng mới làm thay đổi cách hiểu trước đây

Điểm quan trọng là cần phân biệt giữa:

·         Mâu thuẫn thực sự: Các bằng chứng cạnh tranh trực tiếp và không thể cùng đúng trong cùng điều kiện

·         Mâu thuẫn bề mặt: Các nghiên cứu đang trả lời những câu hỏi khác nhau hoặc sử dụng bối cảnh khác nhau

Việc xác định loại mâu thuẫn là bước đầu tiên trước khi đánh giá bằng chứng.

Đánh giá chất lượng của từng bằng chứng

Không phải mọi nghiên cứu đều có mức độ đáng tin cậy như nhau. Khi có kết quả trái ngược, cần xem xét chất lượng phương pháp trước khi so sánh kết luận.

Các yếu tố cần đánh giá gồm:

Thiết kế nghiên cứu

Thiết kế nghiên cứu quyết định khả năng giải thích và mức độ tin cậy của kết quả.

Ví dụ:

·         Nghiên cứu thực nghiệm có khả năng kiểm soát biến số tốt hơn trong một số câu hỏi nhân quả

·         Nghiên cứu quan sát có thể phản ánh dữ liệu thực tế nhưng dễ chịu ảnh hưởng bởi yếu tố gây nhiễu

Một kết luận mạnh cần dựa trên thiết kế phù hợp với câu hỏi nghiên cứu.

Kích thước và đặc điểm mẫu nghiên cứu

Một nghiên cứu trên nhóm nhỏ hoặc nhóm không đại diện có thể tạo ra kết quả khác với nghiên cứu trên quần thể lớn hơn.

Cần xem xét:

·         Số lượng người tham gia

·         Đặc điểm mẫu

·         Mức độ đại diện cho đối tượng cần áp dụng kết luận

Độ tin cậy của phương pháp đo lường

Kết quả khác nhau có thể xuất phát từ cách đo khác nhau.

Cần kiểm tra:

·         Công cụ đo có được xác thực hay không

·         Quy trình thu thập dữ liệu có nhất quán không

·         Các biến số có được kiểm soát đầy đủ không

So sánh bối cảnh thay vì chỉ so sánh kết luận

Một sai lầm phổ biến khi xử lý bằng chứng mâu thuẫn là chỉ nhìn vào câu kết luận cuối cùng.

Hai nghiên cứu có thể cùng đúng nếu chúng được thực hiện trong các điều kiện khác nhau.

Cần phân tích:

·         Đối tượng nghiên cứu là ai

·         Điều kiện nghiên cứu như thế nào

·         Khoảng thời gian nghiên cứu

·         Môi trường áp dụng kết quả

·         Biến số nào có thể làm thay đổi kết quả

Ví dụ, một phương pháp có thể hiệu quả trong nhóm người có nguy cơ cao nhưng không tạo ra khác biệt đáng kể ở nhóm dân số chung. Khi bỏ qua điều kiện này, hai kết luận có vẻ đối lập nhưng thực chất đang mô tả hai tình huống khác nhau.

Ưu tiên bằng chứng tổng hợp và có chất lượng cao

Khi nhiều nghiên cứu cùng tồn tại, cần xem xét mức độ tổng hợp của bằng chứng.

Thông thường, các nguồn có giá trị cao hơn gồm:

·         Tổng quan hệ thống

·         Phân tích gộp nhiều nghiên cứu

·         Nghiên cứu có thiết kế chặt chẽ

·         Dữ liệu thực nghiệm được kiểm chứng

·         Hướng dẫn chuyên môn từ tổ chức có thẩm quyền

Tuy nhiên, bằng chứng tổng hợp không tự động luôn đúng. Cần kiểm tra:

·         Các nghiên cứu được đưa vào có chất lượng đồng đều không

·         Có tồn tại sai lệch lựa chọn không

·         Các nghiên cứu có thực sự đo cùng một vấn đề không

Xác định giới hạn của từng kết luận

Một kết luận nghiên cứu luôn có phạm vi áp dụng nhất định.

Thay vì hỏi:

" Nghiên cứu nào đúng? "

Nên đặt câu hỏi:

" Kết luận nào đúng trong điều kiện nào? "

Cần xác định:

·         Khi nào kết luận có giá trị

·         Khi nào kết luận không còn phù hợp

·         Những yếu tố nào làm thay đổi kết quả

·         Mức độ chắc chắn của kết luận

Cách tiếp cận này giúp tránh việc biến một kết quả nghiên cứu thành quy luật tuyệt đối.

Xử lý bất đồng bằng cách phân tích cơ chế giải thích

Khi hai nghiên cứu cho kết quả khác nhau, cần tìm hiểu cơ chế phía sau kết quả.

Một số câu hỏi quan trọng:

·         Vì sao nghiên cứu này lại cho kết quả như vậy?

·         Yếu tố nào có thể tạo ra sự khác biệt?

·         Có biến trung gian nào ảnh hưởng đến kết quả không?

·         Hai nghiên cứu có đang giải thích cùng một cơ chế không?

Phân tích cơ chế giúp chuyển từ việc so sánh kết luận sang hiểu nguyên nhân tạo ra sự khác biệt.

Xây dựng quyết định dựa trên mức độ chắc chắn của bằng chứng

Trong thực tế, không phải lúc nào cũng có một kết luận hoàn toàn chắc chắn.

Khi bằng chứng còn mâu thuẫn, quyết định nên dựa trên:

·         Mức độ mạnh yếu của từng bằng chứng

·         Rủi ro nếu quyết định sai

·         Chi phí của từng lựa chọn

·         Khả năng cập nhật quyết định khi có dữ liệu mới

Một quyết định tốt không nhất thiết cần loại bỏ hoàn toàn sự không chắc chắn, mà cần quản lý sự không chắc chắn một cách có hệ thống.

Những sai lầm thường gặp khi xử lý bằng chứng mâu thuẫn

Một số cách tiếp cận dễ dẫn đến kết luận sai:

·         Chọn nghiên cứu phù hợp với niềm tin cá nhân

·         Chỉ đọc phần kết luận mà bỏ qua phương pháp nghiên cứu

·         Đánh đồng mọi nghiên cứu có cùng mức độ tin cậy

·         Bỏ qua điều kiện giới hạn của kết quả

·         Xem nghiên cứu mới nhất luôn là nghiên cứu đúng nhất

Bằng chứng cần được đánh giá theo chất lượng và mức độ phù hợp, không chỉ theo thời điểm công bố.

Khi gặp các nghiên cứu mâu thuẫn, mục tiêu không phải là tìm một bằng chứng duy nhất để loại bỏ các bằng chứng còn lại. Cách tiếp cận đáng tin cậy hơn là xây dựng một bức tranh tổng thể bằng cách đánh giá chất lượng nghiên cứu, bối cảnh áp dụng, cơ chế giải thích và giới hạn của từng kết luận.

Quyết định dựa trên bằng chứng tốt không đến từ việc có nhiều dữ liệu hơn, mà từ khả năng hiểu đúng ý nghĩa của dữ liệu đó.