Đánh giá mức độ trưởng thành quản trị nghiên cứu

Không có một thang điểm duy nhất có thể mặc nhiên dùng như chuẩn chứng nhận cho mọi tổ chức nghiên cứu. RESIN mô tả mô hình trưởng thành của mình như công cụ phân tích nội bộ có thể điều chỉnh theo từng tổ chức và nói rõ không thiết kế để benchmark giữa các cơ sở. UBC khi áp dụng RISE cũng đánh giá đồng thời mức hiện tại và mức mục tiêu, đồng thời lưu ý không phải tiêu chí nào cũng cần hướng tới mức cao nhất. ISO 9004:2018, ở phạm vi quản lý tổ chức nói chung, cũng sử dụng self-assessment như công cụ xem xét mức độ tổ chức đã áp dụng các khái niệm quản lý và tìm cơ hội cải tiến.

Vì vậy, kết quả hữu ích nhất không phải một “nhãn trưởng thành” đơn lẻ mà là hồ sơ trưởng thành theo từng năng lực, có bằng chứng cho mỗi điểm số, có mức mục tiêu phù hợp bối cảnh và có khoảng trống rõ ràng để ưu tiên cải tiến.

Khung đánh giá cần bao phủ những năng lực nào?

Một maturity assessment chỉ có ý nghĩa khi đơn vị đánh giá được chia thành những năng lực đủ cụ thể để quan sát. Với hệ thống quản trị nghiên cứu, có thể dùng bảy chiều năng lực thực hành: cấu trúc và trách nhiệm giải trình; chính sách và quy trình; đạo đức và liêm chính; dữ liệu và an ninh thông tin; nguồn lực và hỗ trợ; giám sát và báo cáo; đo lường và cải tiến. Đây là một khung tổng hợp để đánh giá nội bộ, không phải một tiêu chuẩn chứng nhận chính thức.

UKRI đặt trách nhiệm ở cấp tổ chức đối với việc duy trì các hệ thống hỗ trợ liêm chính nghiên cứu, cơ chế báo cáo, đào tạo, quy trình đạo đức và vai trò chịu trách nhiệm rõ ràng. Hướng dẫn ESRC thuộc UKRI cũng nhấn mạnh cơ cấu hỗ trợ, trách nhiệm giải trình, giám sát nghiên cứu và giám sát hội đồng đạo đức. RESIN, ở góc độ hạ tầng hỗ trợ nghiên cứu, bao phủ các vùng chức năng như governance and co-ordination, research data management và research management services. Các nguồn này cùng chỉ ra rằng “trưởng thành” phải được nhìn như năng lực hệ thống đa chiều chứ không chỉ là một thủ tục đơn lẻ.

Chiến lược, cấu trúc và trách nhiệm giải trình

Chiều này trả lời ba câu hỏi: ai có thẩm quyền quyết định, ai chịu trách nhiệm vận hành và ai cung cấp assurance. Bằng chứng không chỉ là sơ đồ tổ chức mà còn phải cho thấy quyền hạn được ủy quyền, tuyến báo cáo, đầu mối xử lý vấn đề và trách nhiệm được thực thi trong thực tế. UKRI, chẳng hạn, kỳ vọng tổ chức xác định một vai trò cấp cao chịu trách nhiệm giám sát research integrity, có đầu mối tiếp nhận thông tin và có cơ chế báo cáo bảo mật.

Ở mức thấp, trách nhiệm thường phụ thuộc cá nhân, ranh giới giữa đơn vị nghiên cứu, đạo đức, pháp chế, dữ liệu và tài chính không rõ. Ở mức cao hơn, quyền hạn được định nghĩa, phối hợp liên chức năng có cơ chế chính thức và các quyết định quan trọng để lại dấu vết kiểm tra được.

Chính sách, quy trình, đạo đức và liêm chính

Không nên chấm cao chỉ vì có policy. Câu hỏi cần đánh giá là policy có được chuyển thành quy trình nhất quán, có người chịu trách nhiệm, có đào tạo, có cơ chế xử lý ngoại lệ và có dữ liệu chứng minh việc thực hiện hay không. UKRI yêu cầu các tổ chức có chính sách, thực hành và thủ tục rõ ràng, hệ thống quản lý bảo đảm chính sách được triển khai, cơ chế xử lý vấn đề integrity/ethics và quy trình đạo đức phù hợp. ESRC cũng yêu cầu các thủ tục ethics review và monitoring phải rõ ràng, minh bạch, hiệu quả và có trách nhiệm giải trình.

Điểm phân biệt maturity với compliance nằm ở đây: compliance có thể được đáp ứng tại một thời điểm, còn maturity đòi hỏi khả năng thực hiện lặp lại, nhất quán và có phản hồi để sửa hệ thống.

Dữ liệu, nguồn lực và hỗ trợ nghiên cứu

Một hệ thống quản trị nghiên cứu trưởng thành phải có năng lực hỗ trợ để chính sách có thể thực thi: con người, đào tạo, dịch vụ hỗ trợ, hạ tầng dữ liệu và cơ chế bảo vệ thông tin. RESIN đưa Research IT Support Structure, funding, Research Data Management Services và Research Management Services vào phạm vi maturity assessment; UBC RISE cũng chấm các năng lực như chính sách dữ liệu, an ninh, metadata, preservation, training và đầu tư hạ tầng theo các mức trưởng thành.

Do đó, một quy định về quản trị dữ liệu không thể được coi là trưởng thành nếu đơn vị không có công cụ, vai trò hỗ trợ và bằng chứng vận hành tương ứng. Ngược lại, đầu tư công nghệ lớn cũng không tự tạo ra maturity nếu không được kết nối với policy, trách nhiệm và quy trình.

Giám sát, hiệu suất và cải tiến liên tục

Đây là chiều tách hệ thống “đã thiết lập” khỏi hệ thống “được quản lý”. ESRC nêu giám sát thường xuyên và audit mẫu là thành phần quan trọng của research governance; với RECs, họ nêu annual reports và periodic detailed audit như các hình thức giám sát điển hình. UKRI cũng yêu cầu annual statement về research integrity trong các tổ chức thuộc phạm vi chính sách của mình.

Mức trưởng thành cao hơn vì thế cần dữ liệu về việc hệ thống hoạt động ra sao: thời gian xử lý, tỷ lệ hồ sơ cần sửa, vấn đề lặp lại, kết quả audit, sự cố, mức hoàn thành đào tạo, chất lượng dữ liệu, hành động khắc phục và bằng chứng rằng các phát hiện đó dẫn tới thay đổi quy trình. Không phải mọi chỉ số đều phù hợp với mọi tổ chức; điều quan trọng là chỉ số phải gắn với rủi ro và mục tiêu quản trị.

Thiết kế thang mức trưởng thành theo hành vi quan sát được

Các nhãn như “thấp, trung bình, cao” quá mơ hồ để hai nhóm đánh giá cho kết quả tương tự nhau. Một cách thực hành tốt hơn là mô tả từng mức bằng hành vi hệ thống có thể quan sát và kiểm chứng. UBC RISE sử dụng thang từ 0 đến 3 cho từng tiêu chí và phân biệt current level với target level; các mô tả tăng dần từ chưa đạt mức cơ bản tới chính sách, dịch vụ hoặc hạ tầng được tích hợp hơn. ISO 9004:2018 cung cấp self-assessment ở cấp tổ chức để xem xét mức độ áp dụng các khái niệm quản lý và xác định cơ hội cải tiến.

Có thể tổng hợp logic đó thành thang nội bộ 0–4 như sau. Đây là rubric đề xuất để vận hành assessment, không phải thang chính thức của UKRI, RESIN, UBC hay ISO.

Rubric này nên được cụ thể hóa cho từng chiều. Ví dụ, ở tiêu chí “research ethics governance”, mức 2 không nên chỉ là “có hội đồng đạo đức”, mà phải mô tả các điều kiện như mandate, quy trình review, xử lý conflict of interest, hồ sơ quyết định và communication tới researcher. Ở mức 3, cần thêm monitoring, reporting và audit; ở mức 4, cần bằng chứng rằng dữ liệu giám sát dẫn đến thay đổi quy trình hoặc năng lực.

Nguyên tắc chấm là: chỉ cho mức cao nhất mà bằng chứng hiện có chứng minh được đầy đủ mô tả của mức đó. Nếu policy đã ở mức 3 nhưng dữ liệu vận hành chỉ chứng minh mức 2, current state nên là 2. Cách này ngăn việc “chấm theo kỳ vọng” thay vì chấm theo thực trạng.

Mức mục tiêu cũng không nhất thiết là 4 cho mọi tiêu chí. UBC RISE công khai trường hợp một số tiêu chí có target thấp hơn mức tối đa vì mục tiêu phải phản ánh khả năng thực hiện, khung thời gian và ưu tiên của cộng đồng.

Bằng chứng nào đủ để chấm một mức trưởng thành?

Một mức điểm không có evidence chỉ là ý kiến. Để chấm đáng tin cậy, nên đọc bằng chứng theo bốn tầng: cam kết, thực thi, giám sát và cải tiến. Tầng sau phải cho thấy hệ thống đã đi xa hơn tầng trước.

Bằng chứng cam kết gồm mandate, policy, terms of reference, RACI, quy trình, chuẩn dữ liệu và mô tả vai trò. Bằng chứng thực thi gồm hồ sơ ethics review, workflow log, quyết định phê duyệt, hồ sơ đào tạo, dữ liệu sử dụng dịch vụ, incident/complaint records hoặc metadata từ hệ thống nghiên cứu. Bằng chứng giám sát gồm báo cáo định kỳ, audit sample, KPI, trend, exception report và review của cơ quan có thẩm quyền. Bằng chứng cải tiến gồm corrective-action log, thay đổi policy/process, cập nhật training hoặc system enhancement có liên hệ trực tiếp với phát hiện trước đó.

Cách đọc này phù hợp với kỳ vọng của UKRI/ESRC rằng hệ thống quản trị không chỉ có quy định mà còn phải có cơ chế giám sát, trách nhiệm giải trình và hồ sơ để kiểm tra. ESRC, ví dụ, nêu việc audit có thể xem consent documents, permissions, thông tin data storage/data sharing và thay đổi phát sinh; với REC, annual reports và periodic audit được dùng để chứng minh integrity và chất lượng quyết định.

Khi bằng chứng mâu thuẫn, không nên lấy tài liệu “đẹp nhất” làm đại diện. Một policy quy định review trong 30 ngày nhưng log vận hành cho thấy nhiều hồ sơ không có timestamp hoặc kéo dài không giải thích được thì maturity phải phản ánh evidence vận hành. Ngược lại, một đơn vị có thực hành tốt nhưng chưa chuẩn hóa cũng không nên được chấm như một năng lực cấp tổ chức vì khả năng lặp lại vẫn phụ thuộc cá nhân.

Một assessment record tối thiểu nên lưu criterion, level đề xuất, evidence reference, owner của evidence, ngày hiệu lực, nhận xét về độ tin cậy và khoảng trống cần xác minh. Nếu một điểm số không thể truy ngược về bằng chứng, nó chưa đủ điều kiện để dùng trong quyết định quản trị.

Quy trình chấm current state và target state

Đánh giá trưởng thành nên được quản trị như một quá trình review có bằng chứng, không phải một khảo sát cảm nhận. UBC RISE bắt đầu từ mục tiêu assessment, xác định stakeholder phù hợp, sau đó chấm current level và target level; RESIN cũng định vị maturity assessment như công cụ internal analysis cho các vùng chức năng nghiên cứu.

Một chu trình thực hành có thể gồm:

1.    Chốt phạm vi — Xác định đối tượng đánh giá, bảy chiều năng lực, đơn vị tổ chức và loại nghiên cứu nằm trong scope

2.    Lập nhóm đánh giá — Có đại diện governance, research office, ethics/integrity, data/IT, finance/compliance và người dùng dịch vụ nghiên cứu khi phù hợp

3.    Khóa rubric và evidence rule — Mô tả rõ từng mức 0–4 và bằng chứng tối thiểu trước khi xem kết quả để tránh thay chuẩn giữa chừng

4.    Chấm current state độc lập — Các assessor đọc evidence và cho điểm trước khi thảo luận chung nhằm giảm hiệu ứng đồng thuận sớm

5.    Calibration — Thảo luận các điểm chênh lệch, yêu cầu bằng chứng bổ sung và chốt mức cao nhất được evidence hỗ trợ

6.    Chấm target state — Xác định mức cần đạt theo vai trò, rủi ro, quy mô và ưu tiên thay vì mặc định chọn mức tối đa

7.    Ghi gap và lịch review — Lưu khoảng cách current–target, owner, bằng chứng còn thiếu và chu kỳ đánh giá lại

Cấu trúc đa bên là quan trọng vì một hệ thống có thể trông “trưởng thành” từ góc policy owner nhưng khác hẳn từ góc researcher hoặc người vận hành hệ thống. UKRI cũng phân tách nhiều lớp trách nhiệm: tổ chức phải có systems, leadership, reporting channels, training và ethics processes; ESRC yêu cầu accountability và monitoring. Vì vậy, calibration cần kiểm tra cả thiết kế lẫn trải nghiệm thực thi.

Không có một tần suất đánh giá lại duy nhất cho mọi tổ chức. Có thể ấn định chu kỳ nội bộ, chẳng hạn hằng năm đối với môi trường ổn định, và đánh giá lại sớm hơn sau thay đổi lớn về pháp lý, hệ thống, cấu trúc hoặc rủi ro. Việc ESRC sử dụng annual reports và periodic audits trong monitoring ethics governance là một ví dụ cho nguyên tắc oversight cần có nhịp lặp lại, không phải quy định tần suất chung cho mọi maturity assessment.

Tổng hợp điểm mà không che khuất điểm yếu trọng yếu

Điểm trung bình rất tiện để báo cáo nhưng có thể làm mất cấu trúc rủi ro. Một tổ chức đạt mức 4 ở support services và mức 1 ở ethics oversight không nên được diễn giải đơn giản là “maturity trung bình khá”. Trong governance, một kiểm soát yếu ở vùng trọng yếu có thể không được bù bởi thành tích ở vùng khác.

Do đó, nên giữ maturity profile theo từng chiều là output chính. Nếu cần một chỉ số quản trị tổng hợp, có thể dùng điểm có trọng số:

Điểm tổng hợp = 25 × Σ(wᵢ × mᵢ)

Trong đó mᵢ là mức 0–4 của chiều i và tổng các trọng số wᵢ bằng 1. Hệ số 25 chỉ chuyển thang 0–4 sang 0–100. Công thức này là phương pháp nội bộ để tóm tắt; nó không tạo ra benchmark bên ngoài.

Song song với điểm tổng hợp, tổ chức nên định nghĩa gate cho các năng lực trọng yếu theo bối cảnh của mình. Chẳng hạn, đơn vị có thể quy định rằng nhãn “managed” không được sử dụng nếu một control về ethics, integrity hoặc sensitive-data governance chưa đạt mức mục tiêu tối thiểu đã phê duyệt. Đây là rule nội bộ cần được chốt trước assessment, không phải ngưỡng do UKRI, RESIN, UBC hay ISO ban hành.

Giới hạn benchmark cần được nói rõ. RESIN tuyên bố mô hình của họ không được thiết kế để so sánh giữa các tổ chức hay thiết lập chuẩn quốc gia; UBC RISE cũng xác định mức mục tiêu theo tính khả thi và ưu tiên riêng, không yêu cầu mọi tiêu chí đạt mức cao nhất. Vì vậy, hai tổ chức chỉ nên so điểm khi cùng rubric, cùng evidence rule, cùng scope và cùng logic trọng số; nếu không, con số giống nhau có thể đại diện cho năng lực rất khác nhau.

Một dashboard tốt vì thế nên hiển thị ít nhất current level, target level, gap, evidence confidence và trạng thái của các critical controls. Điểm 0–100, nếu có, chỉ đứng sau các thông tin này.

Diễn giải kết quả và xác định khoảng trống ưu tiên

Maturity assessment tạo giá trị khi biến chênh lệch thành quyết định. Sau khi chấm, không nên sắp ưu tiên chỉ theo “gap lớn nhất”. Cần đọc đồng thời ba yếu tố: độ lớn khoảng trống, mức độ trọng yếu của năng lực và độ chắc của bằng chứng.

Một khoảng trống lớn ở control trọng yếu với evidence rõ ràng thường là ưu tiên trực tiếp. Khoảng trống lớn nhưng evidence yếu cần bước xác minh trước khi đầu tư. Khoảng trống nhỏ ở năng lực ít rủi ro hơn có thể được theo dõi trong chu kỳ cải tiến thông thường. Cách đọc này tránh hai lỗi: đầu tư mạnh vào nơi dễ đo nhưng ít quan trọng, hoặc phản ứng với một điểm thấp chưa được kiểm chứng.

UBC RISE minh họa rõ logic current state–target state để tạo roadmap, còn ISO 9004 đặt self-assessment trong mục tiêu nhận diện điểm mạnh, điểm yếu và cơ hội cải tiến. RESIN cũng dùng maturity assessment để tổ chức tự phân tích vị trí và nhu cầu của mình thay vì tạo league table.

Kết quả cuối cùng nên là một maturity profile có thể kiểm toán: mỗi điểm có evidence, mỗi target có lý do, mỗi gap có owner và mỗi thay đổi có tiêu chí để kiểm tra lại. Khi assessment được lặp theo cùng rubric và evidence rule, tổ chức có thể theo dõi sự dịch chuyển của năng lực theo thời gian mà không cần biến điểm trưởng thành thành một chứng nhận hay bảng xếp hạng.

Mức độ trưởng thành của hệ thống quản trị nghiên cứu nên được đánh giá như một hồ sơ năng lực có bằng chứng, không phải bằng số lượng quy định hay một điểm tự chấm đơn lẻ. Cách làm đáng tin cậy là xác định các chiều năng lực của hệ thống, dùng rubric hành vi quan sát được, chấm current state theo bằng chứng, xác định target state theo bối cảnh và rủi ro, rồi phân tích khoảng trống theo từng chiều.

Điểm tổng hợp có thể hữu ích cho báo cáo quản trị, nhưng không nên che khuất các control trọng yếu hoặc được dùng như benchmark giữa các tổ chức khi rubric và evidence rule khác nhau. Giá trị thật của maturity assessment nằm ở khả năng chỉ ra năng lực nào đã được chuẩn hóa, năng lực nào đã được đo lường và cải tiến, và năng lực nào vẫn phụ thuộc vào cá nhân hoặc thiếu bằng chứng vận hành.