Đọc một nghiên cứu về công cụ sức khoẻ: sáu câu hỏi

"Đã được nghiên cứu khoa học chứng minh" là câu xuất hiện trong quảng bá của rất nhiều sản phẩm sức khoẻ.

Sáu câu hỏi dưới đây cho biết nghiên cứu đó thật sự nói gì.

Câu 1: ai thực hiện và ai tài trợ

Nghiên cứu do chính công ty làm sản phẩm thực hiện không tự động sai — nhiều nghiên cứu quan trọng được tài trợ bởi nhà sản xuất.

Nhưng nó cần được đọc kỹ hơn, và nên đối chiếu với nghiên cứu độc lập nếu có.

Các tạp chí nghiêm túc yêu cầu công bố nguồn tài trợ và xung đột lợi ích. Đây là phần đáng đọc, thường nằm ở cuối bài.

Dấu hiệu tốt: có nghiên cứu độc lập từ một nhóm không liên quan tới nhà sản xuất cho kết quả tương tự.

Câu 2: nghiên cứu trên ai

• Bao nhiêu người? Vài chục là sơ bộ; hàng nghìn thì đáng tin hơn.
• Họ là ai? Tuổi, giới, mức độ bệnh.
• Có giống bạn không? Một nghiên cứu trên người trẻ khoẻ mạnh nói ít về người cao tuổi có bệnh nền.
• Ai bị loại khỏi nghiên cứu? Phần này thường tiết lộ nhiều.

Mục cuối đáng chú ý: nhiều nghiên cứu loại trừ người có nhiều bệnh kèm — chính là nhóm hay dùng sản phẩm nhất trong thực tế.

Câu 3: so sánh với cái gì

Đây là câu quan trọng nhất.

Không có nhóm đối chứng

"Người dùng sản phẩm có cải thiện sau ba tháng."

Câu này không phân biệt được hiệu quả của sản phẩm với:

• Diễn tiến tự nhiên — nhiều tình trạng tự cải thiện.
• Hiệu ứng của việc được theo dõi.
• Các thay đổi khác người tham gia tự thực hiện.
• Việc chỉ những người thấy có hiệu quả mới ở lại tới cuối nghiên cứu.

Có nhóm đối chứng

Một nhóm dùng sản phẩm, một nhóm không, rồi so sánh. Đây là thiết kế cho phép rút ra kết luận về nhân quả.

So với phương pháp hiện có

Mạnh hơn nữa: so với cách làm chuẩn hiện tại, chứ không phải so với không làm gì.

Câu 4: đo cái gì

Có sự khác biệt lớn giữa hai loại chỉ số.

Chỉ số thay thế — một con số dễ đo, được cho là liên quan tới kết quả cuối. Ví dụ: một chỉ số xét nghiệm cải thiện.

Kết cục thật — điều người bệnh thật sự quan tâm. Ví dụ: ít nhập viện hơn, sống lâu hơn, chất lượng sống tốt hơn.

Cải thiện chỉ số thay thế không tự động dẫn tới cải thiện kết cục thật. Lịch sử y học có nhiều trường hợp một can thiệp cải thiện chỉ số nhưng không cải thiện — thậm chí làm xấu — kết cục.

Câu hỏi: nghiên cứu đo chỉ số hay đo kết quả người bệnh quan tâm?

Câu 5: theo dõi bao lâu

Một nghiên cứu tám tuần nói rất ít về một công cụ mà người ta định dùng nhiều năm.

Đặc biệt quan trọng với các công cụ theo dõi: tỷ lệ người còn dùng sau sáu tháng là bao nhiêu?

Nhiều nghiên cứu không báo cáo con số này, trong khi nó quyết định giá trị thực tế của sản phẩm.

Câu 6: công bố ở đâu

• Tạp chí có bình duyệt — bài được chuyên gia trong ngành đọc và phản biện trước khi đăng. Không bảo đảm đúng nhưng lọc được nhiều lỗi rõ ràng.
• Bản thảo chưa bình duyệt — đã công khai nhưng chưa qua phản biện.
• Chỉ trên trang của công ty — chưa qua bước nào, không kiểm chứng được.
• Thông cáo báo chí — không phải nghiên cứu.

Mục cuối đáng chú ý: nhiều tin tức về "nghiên cứu mới" thực ra dựa trên thông cáo báo chí, và nội dung có thể khác đáng kể so với bài báo gốc.

Các dấu hiệu đáng nghi

• Chỉ nêu một con số ấn tượng mà không cho biết so với gì.
• Không tìm được bài báo gốc ở đâu.
• Kết quả tốt hơn hẳn mọi thứ khác cùng loại.
• Nghiên cứu đã nhiều năm mà chưa ai lặp lại được.
• Dẫn chứng nghiên cứu về một chất hoặc phương pháp, nhưng sản phẩm lại là thứ khác.

Mục cuối là kỹ thuật phổ biến: dẫn nghiên cứu về một hoạt chất nói chung để quảng bá cho một sản phẩm cụ thể chưa từng được nghiên cứu.

Một cách kiểm tra nhanh

Nếu chỉ có thời gian cho một việc: tìm bài báo gốc và đọc phần tóm tắt.

Phần tóm tắt thường nêu rõ cỡ mẫu, thiết kế nghiên cứu, và kết quả chính. So sánh nó với những gì được quảng bá thường cho biết ngay khoảng cách giữa hai bên.

Câu hỏi thường gặp