Dịch và thích nghi thang đo: từ tương đương khái niệm đến kiểm định giữa nhóm

1. Mục tiêu và điều kiện đầu vào

Thích nghi thang đo là một dự án đo lường, không phải một việc dịch thuật đơn lẻ. Mục tiêu là tạo phiên bản có nội dung phù hợp với ngôn ngữ, văn hóa và nhóm đích nhưng vẫn giữ quan hệ với khái niệm của công cụ gốc. Hướng dẫn của International Test Commission xem thích nghi là cần thiết khi công cụ được chuyển sang một bối cảnh văn hóa khác, kể cả khi hai nhóm dùng cùng ngôn ngữ (International Test Commission, 2017).

Trước khi bắt đầu, nhóm nghiên cứu cần có bản công cụ gốc đúng phiên bản, mô tả khái niệm và các chiều đo, hướng dẫn chấm điểm, bằng chứng phát triển ban đầu, thông tin bản quyền và mô tả nhóm đích mới. Nếu không xác định được chủ sở hữu hoặc phiên bản chuẩn, nên dừng trước khi dịch.

• Có văn bản cho phép sử dụng, dịch hoặc thích nghi nếu công cụ có bản quyền.
• Xác định phiên bản gốc, số mục, thang đáp án và quy tắc chấm điểm.
• Mô tả rõ quốc gia, ngôn ngữ, phương ngữ, nhóm tuổi và bối cảnh sử dụng.
• Có định nghĩa thao tác cho từng cấu trúc và chiều đo.
• Lập nhóm gồm chuyên gia nội dung, phương pháp đo lường, ngôn ngữ và đại diện nhóm đích.

2. Phân biệt dịch câu chữ và thích nghi văn hóa

Tương đương ngữ nghĩa hỏi hai câu có cùng nghĩa từ vựng hay không. Tương đương thành ngữ xử lý các cách nói không thể dịch từng chữ. Tương đương trải nghiệm xem tình huống được nêu có quen thuộc với người trả lời hay không. Tương đương khái niệm là câu hỏi quan trọng nhất: nội dung sau thích nghi có còn đại diện cho cùng cấu trúc hay không (Beaton et al., 2000).

Một câu dịch rất sát vẫn có thể thất bại nếu ví dụ, thời gian hồi tưởng, vai trò xã hội hoặc cách xưng hô không phù hợp. Ngược lại, sửa một ví dụ để người trả lời hiểu đúng có thể làm bản thích nghi gần khái niệm gốc hơn bản dịch từng chữ.

3. Dùng trong nhóm đích hay so sánh giữa ngôn ngữ?

Xác định câu hỏi này trước khi lên kế hoạch xác nhận. Nếu chỉ sử dụng bản Việt để nghiên cứu trong nhóm đích, cần bằng chứng nội dung, cách hiểu, cấu trúc, độ tin cậy và quan hệ với biến khác tại nhóm đó. Không có dữ liệu của nhóm ngôn ngữ nguồn thì chưa thể tuyên bố hai phiên bản tương đương, nhưng cũng không có nghĩa mọi nghiên cứu trong nhóm đích đều phải dừng (International Test Commission, 2017, C-2).

Nếu mục tiêu là so sánh quan hệ, trung bình hoặc dùng điểm hai phiên bản thay thế nhau, yêu cầu cao hơn: phải thiết kế dữ liệu đa nhóm, kiểm tra phương pháp thu, tính tương đương và đúng loại điểm cần so sánh. CFA phù hợp riêng trong mỗi nhóm chưa thay thế kiểm định chung. Chuẩn so sánh trung bình tiềm ẩn cũng không tự tạo bảng quy đổi điểm quan sát hoặc cho phép mang nguyên cutoff chẩn đoán của bản nguồn sang bản dịch (International Test Commission, 2017, C-4 và SSI-2).

4. quyền sử dụng, phiên bản nguồn và kế hoạch thay đổi

Không mặc định rằng bài báo công bố thang đo đồng nghĩa với quyền sửa và phát hành bản dịch. Email cho tác giả hoặc chủ sở hữu cần nêu mục tiêu, nhóm đích, ngôn ngữ, phạm vi sử dụng, dự kiến công bố và cách ghi công. Lưu thư chấp thuận cùng tài liệu dự án.

Tạo một disposition log ngay từ đầu. Mỗi hàng gồm mã mục, câu gốc, các bản dịch, vấn đề được phát hiện, quyết định cuối, người quyết định và bằng chứng hỗ trợ. Nhật ký này giúp nhóm giải trình mọi thay đổi và tránh dùng nhầm một bản trung gian.

5. đánh giá tương đương khái niệm và nội dung

Trước khi dịch, nhóm lập bảng cấu trúc, chiều đo, định nghĩa, phạm vi nội dung và vai trò của từng mục. Hội đồng chuyên gia đánh giá mức phù hợp của cấu trúc với nhóm đích và xem có khía cạnh nào không tồn tại, bị cấm kỵ hoặc có biểu hiện khác trong bối cảnh mới.

Content validity nên được xem theo ba thuộc tính: mức liên quan, độ bao quát và khả năng hiểu. Đây cũng là ba trụ cột của khung COSMIN cho bằng chứng giá trị nội dung (Mokkink et al., 2018). Có thể dùng I-CVI và S-CVI để tóm tắt đánh giá chuyên gia, nhưng con số không thay thế phần nhận xét định tính và quyết định về miền nội dung (DeVellis & Thorpe, 2022).

• Mỗi mục được nối với một khía cạnh trong bản đồ nội dung.
• Chuyên gia đánh giá relevance, comprehensiveness và comprehensibility.
• Các khái niệm không tương đương được ghi rõ trước khi dịch.
• Không dùng CVI như bằng chứng duy nhất cho chất lượng bản thích nghi.

6. Chọn thiết kế dịch và phân vai độc lập

Bài này đề xuất hai bản dịch xuôi độc lập rồi hòa giải như một phương án thực hành. Beaton và cộng sự (2000) mô tả cách tổ chức nhiều dịch giả, còn ITC nhấn mạnh lựa chọn thiết kế phù hợp và tổng hợp chuyên môn ngôn ngữ, văn hóa, nội dung cùng đo lường (International Test Commission, 2017, TD-1 và TD-2). Không trình bày một số lượng người dịch cố định như điều kiện đủ của mọi dự án.

Ghi rõ ai dịch bản nào, năng lực liên quan, đã xem tài liệu nào và khi nào được xem bản của người khác. Tính độc lập cần có thật ở giai đoạn tạo phương án; hai ô A/B do cùng một người điền chưa chứng minh hai bản dịch độc lập. Người hiểu nội dung giúp giữ nghĩa chuyên môn, còn người nắm cách dùng ngôn ngữ tại nhóm đích giúp phát hiện cách nói gượng hoặc xa lạ.

Nếu dùng AI để gợi ý câu chữ, lưu công cụ, thời điểm, phạm vi hỗ trợ và phần chỉnh của con người. Hai lần sinh văn bản không tương đương hai chuyên gia độc lập. Nội dung phải được người đủ năng lực rà soát và thử với nhóm đích; bản gợi ý không được coi là bằng chứng đã xác nhận tương đương. Đây là yêu cầu hồ sơ thực hành của bài, không phải tuyên bố ITC năm 2017 đã ban hành quy trình dùng AI.

• Phân vai dịch, hòa giải, kiểm tra đo lường và phỏng vấn nhóm đích.
• Lưu từng bản trước hòa giải, không ghi đè.
• Cung cấp định nghĩa khái niệm, mục đích điểm và nhóm đích cho người dịch.
• Ghi phần hỗ trợ máy nếu có; người chịu trách nhiệm ký quyết định cuối.

7. Hòa giải nghĩa, câu chữ và quy tắc chấm điểm

Hòa giải cần trả lời vì sao một phương án giữ được nội dung và phù hợp người trả lời hơn phương án khác. Đừng bỏ phiếu chỉ theo mức trôi chảy. Dùng định nghĩa, ví dụ trải nghiệm và phản hồi tiền thử nghiệm để phân biệt sai nghĩa với khác văn phong; lưu cả bất đồng chưa xử lý (International Test Commission, 2017, TD-2 và Doc-1).

Mỗi sửa đổi cần nối với version của item và codebook. Nếu đổi một câu phủ định thành câu thuận, chưa thể giữ nguyên cờ đảo chiều R hoặc quy tắc chấm cũ. Cần kiểm tra lại hướng nghĩa, hướng điểm và quyền thay đổi, sau đó thử lại với nhóm đích. Tương tự, đổi thời gian hồi tưởng, thêm ví dụ hay đổi số mức đáp án đều có thể thay nhiệm vụ đo, nên phải được giải trình thay vì coi là chỉnh chính tả.

8. Dịch ngược: một phép kiểm tra có giới hạn

Nếu thiết kế dùng dịch ngược, người thực hiện cần đủ năng lực và được tách khỏi bản nguồn theo quy trình đã chọn để có thể bộc lộ sai lệch. Đối chiếu nhằm tìm mất nghĩa, thêm nghĩa, đổi mức độ hoặc thay đối tượng được hỏi. Beaton và cộng sự (2000) cùng Sousa và Rojjanasrirat (2011) đặt bước này trong một quy trình rộng hơn, không xem kết quả dịch ngược là giấy chứng nhận chất lượng.

ITC lưu ý rằng tối ưu câu đích cho dễ dịch ngược có thể tạo một bản nghe gượng với người dùng. Các thiết kế dịch xuôi và dịch ngược đều có hạn chế; lựa chọn cần được giải thích cùng cách kiểm tra trực tiếp ngôn ngữ đích (International Test Commission, 2017, TD-2). Câu dịch ngược giống bản gốc không trả lời được người thật có hiểu đúng thời gian, đối tượng và phương án đáp án hay không.

9. hội đồng chuyên gia hợp nhất các bằng chứng

Hội đồng nên có chuyên gia nội dung, phương pháp, ngôn ngữ và đại diện nhóm đích. Họ xem bản gốc, các bản dịch, bản dịch ngược, nhật ký quyết định và phản hồi sớm. Chủ trì cuộc họp cần tách quyết định về nghĩa, văn phong và đo lường để tránh thảo luận chỉ xoay quanh câu nào nghe hay hơn.

Kết quả là bản prefinal kèm hướng dẫn quản trị, thang đáp án và quy tắc chấm điểm. Nếu một mục không thể đạt tương đương, nhóm phải đánh dấu để xin sửa từ chủ sở hữu, kiểm định như mục mới hoặc loại khỏi mục tiêu so sánh xuyên nhóm.

10. cognitive interview với người thuộc nhóm đích

Cognitive interview tìm hiểu bốn quá trình: hiểu câu hỏi, nhớ thông tin, đưa ra phán đoán và ánh xạ phán đoán vào phương án trả lời. Người phỏng vấn có thể dùng think-aloud và probing như: câu này đang hỏi điều gì, bạn nghĩ đến khoảng thời gian nào, vì sao chọn mức này, từ nào khó hoặc không tự nhiên.

Chọn người tham gia có chủ đích để bao phủ khác biệt về tuổi, học vấn, vùng miền và kinh nghiệm liên quan. Tiến hành theo vòng nhỏ, sửa bản tiền thử nghiệm rồi phỏng vấn vòng tiếp theo. Không cần suy luận thống kê ở bước này; mục tiêu là tìm và giải thích lỗi phản hồi (Willis, 2005).

• Có kịch bản probing thống nhất nhưng cho phép hỏi sâu.
• Ghi vấn đề theo từng mục và theo từng công đoạn nhận thức.
• Bao phủ các nhóm có nguy cơ hiểu khác nhau.
• Mỗi sửa đổi được kiểm tra lại ở vòng sau.
• Tiêu chí dừng là không còn vấn đề nghiêm trọng mới, không phải đạt một số người cố định.

11. Biến phản hồi người trả lời thành quyết định có thể kiểm tra

DeVellis và Thorpe (2022) khuyến nghị tìm hiểu cách người trả lời diễn giải item và tạo câu trả lời. Một người có thể chỉ thăm dò một phần item hoặc một phần probe để giảm gánh nặng, miễn toàn bộ nội dung cần thiết được bao phủ qua các cuộc phỏng vấn. Mục tiêu không phải đạt không ai phê bình; nhóm phát triển vẫn phải cân bằng cách nói tự nhiên với sự toàn vẹn của khái niệm.

Bảng dưới là ví dụ tự biên soạn cho câu ứng viên “Tôi dễ tiếp cận người hỗ trợ học thuật khi cần”. Không có số người mặc định bảo đảm hoàn tất. Nhóm cần bao phủ các trường hợp dễ hiểu khác, mô tả vấn đề còn lại và thử lại các sửa đổi quan trọng. Đây là bằng chứng quá trình trả lời, chưa phải kiểm định tải nhân tố hay tương đương thống kê.

12. Pilot vận hành và đánh giá sơ bộ: ghi rõ mục tiêu mỗi vòng

Một vòng thử vận hành tập trung vào thời gian, logic nhảy câu, thiết bị, hướng dẫn, câu không áp dụng và lỗi dữ liệu. Một nghiên cứu pilot định lượng cũng có thể phân tích item và độ tin cậy sơ bộ nếu mẫu, thiết kế và mục đích phù hợp. ITC phân biệt dữ liệu thử phục vụ sửa công cụ với nghiên cứu xác nhận quy mô đầy đủ; không quy định rằng mọi pilot đều bị cấm phân tích thống kê (International Test Commission, 2017, TD-5 và C-1).

Trước mỗi vòng, ghi câu hỏi cần giải quyết, người tham gia, phiên bản, loại bằng chứng và tiêu chí tiếp tục. Nếu sửa nghĩa câu, thang đáp án hoặc điều kiện áp dụng, cần thử lại phần đã thay. Đừng lấy việc không có ô thiếu làm bằng chứng hiểu đúng, nhất là khi biểu mẫu bắt buộc trả lời. Cũng không biến một cỡ mẫu thường gặp thành bảo đảm đủ cho EFA, CFA hoặc DIF.

13. kiểm định tâm trắc học của phiên bản thích nghi

Bản thích nghi cần bằng chứng cấu trúc, độ tin cậy và quan hệ với biến khác trong nhóm đích. Nếu cấu trúc chưa chắc chắn hoặc mục đã thay đổi nhiều, có thể dùng EFA rồi CFA trên mẫu độc lập. Nếu mô hình gốc rõ và thích nghi ít, CFA có thể là phân tích chính, nhưng thất bại của mô hình cần được chẩn đoán chứ không sửa theo modification indices một cách cơ học.

Với mục Likert có ít mức, phân bố lệch hoặc ô thưa, correlation polychoric và estimator phù hợp dữ liệu thứ bậc như WLSMV thường đáng cân nhắc (Flora & Curran, 2004). Với dữ liệu gần liên tục và phân bố hợp lý, ML hoặc MLR có thể phù hợp. Báo cáo phải nêu loại ma trận tương quan và estimator, không chỉ ghi tên phần mềm.

14. Bất biến đo lường: đúng mô hình, đúng loại điểm, đúng kết luận

Trong CFA đa nhóm cho item được mô hình hóa liên tục, configural kiểm tra cấu hình đo chung, metric đặt ràng buộc tải, còn scalar bổ sung ràng buộc intercept. Các mức này phục vụ những phạm vi so sánh khác nhau; partial invariance cần chỉ rõ tham số được thả, căn cứ và phần so sánh còn được hỗ trợ (Putnick và Bornstein, 2016). Đừng dùng một nhãn đạt bất biến chung để che việc một nhân tố chưa có điều kiện so sánh.

Với item thứ bậc, còn có các threshold và điều kiện nhận dạng theo estimator, số mức và cách tham số hóa; không sao chép nguyên quy trình intercept của mô hình liên tục rồi gọi đó là scalar cho mọi item Likert. Bài này không cung cấp một bộ ràng buộc ordinal dùng cho mọi mô hình. Ghi rõ kiểu item và quy trình thực tế, kiểm tra tham số cùng độ phù hợp, rồi giới hạn so sánh theo bằng chứng (International Test Commission, 2017, C-2 và SSI-2).

Nếu phân tích composite bằng PLS-SEM, cần xem quy trình MICOM phù hợp thay vì đổi tên configural/metric/scalar thành ba bước MICOM. Hai khung có mục tiêu và tham số khác nhau. Dù dùng khung nào, khác biệt item trung bình chưa tự là DIF: DIF hỏi liệu người có cùng mức thuộc tính nhưng khác nhóm có xác suất trả lời item khác nhau hay không. Cờ DIF cần được xét cùng nội dung, cách dịch và phương pháp, không tự động kết tội bản dịch sai (International Test Commission, 2017, C-2).

15. Ví dụ giả định: thích nghi thang đo hỗ trợ học thuật

Ví dụ dưới đây là tình huống và số liệu được tạo để hướng dẫn, không phải kết quả nghiên cứu thật. Một thang đo 12 mục được dịch sang tiếng Việt cho nghiên cứu sinh. Hai dịch giả tạo bản độc lập, hội đồng hòa giải và dịch ngược phát hiện ba mục thay đổi cường độ. Hai vòng cognitive interview, mỗi vòng tám người, cho thấy cụm từ office hours bị hiểu như giờ hành chính nên được thay bằng mô tả tiếp cận giảng viên ngoài giờ học.

Pilot 62 người phát hiện một mục có 18% dữ liệu thiếu vì câu hỏi không áp dụng với người học từ xa. Nhóm thêm lựa chọn không áp dụng và sửa hướng dẫn. Nghiên cứu chính dùng CFA cho dữ liệu thứ bậc. Mô hình ba nhân tố đạt mức phù hợp chấp nhận được; kiểm định đa nhóm đạt metric nhưng chưa đạt scalar invariance ở hai mục. Nhóm báo cáo được quan hệ cấu trúc giữa hai nhóm nhưng không kết luận về chênh lệch trung bình tiềm ẩn.

16. Lưu hồ sơ theo sáu nhóm hướng dẫn ITC

ITC (2017) gồm 18 hướng dẫn trong sáu nhóm, không phải một checklist chín bước dịch cố định. Bảng sau là bản tóm tắt đầu ra thực hành do bài biên soạn để nối quy trình trên với phạm vi ITC. Không sao chép nguyên các hướng dẫn và không thay việc đọc tài liệu gốc.

Đóng gói bản item cuối cùng, hướng dẫn, đáp án, codebook, quy tắc thiếu, lịch sử sửa, bằng chứng và người phê duyệt theo cùng một mã phiên bản. Giữ hồ sơ cá nhân và nội dung hạn chế quyền truy cập trong kho phù hợp; chỉ công bố phần được phép. Khi dùng công cụ thang đo trên website để lưu các bước, hoàn tất các ô không đồng nghĩa công cụ đã chứng nhận chất lượng thang.

17. Quy trình thực hành chín bước

18. Mẫu báo cáo APA 7 và bảng kiểm trước khi công bố

• Nêu quyền sử dụng và phiên bản nguồn.
• Mô tả nhóm dịch, chuyên gia và người tham gia tiền kiểm định.
• Báo cáo số vòng dịch, hòa giải, dịch ngược và cognitive interview.
• Nêu ví dụ thay đổi quan trọng cùng lý do.
• Tách rõ pilot vận hành và kiểm định tâm trắc học.
• Nêu correlation matrix, estimator và phần mềm.
• Báo cáo mô hình cạnh tranh hoặc lý do chọn mô hình.
• Nêu độ tin cậy phù hợp với cấu trúc điểm số.
• Báo cáo cấp bất biến đạt được trước khi so sánh nhóm.
• Không dùng cụm validated translation nếu bằng chứng mới dừng ở dịch thuật.
• Danh mục tài liệu và DOI chỉ xuất hiện một lần ở mỗi mục.
• Lưu bản công cụ cuối, hướng dẫn quản trị và disposition log.