Phát triển một công cụ đo lường tâm lý cùng Phòng Lab

Từ một định nghĩa cấu trúc rõ ràng đến một bài test đã có cách chấm điểm và được ghi chép đầy đủ. Phòng Lab có thể đồng hành trong toàn bộ dự án, hoặc chỉ ở những giai đoạn bạn không thể tự đảm nhận.

Phát triển bài test là một dự án theo yêu cầu. Phạm vi, kế hoạch và chi phí được thống nhất sau buổi trao đổi ban đầu.

Một dự án phát triển diễn ra như thế nào

Mỗi giai đoạn kết thúc bằng một quyết định: tiếp tục, điều chỉnh hay dừng lại. Nhờ đó, những câu hỏi yếu và thang đo mơ hồ không lọt vào bài test cuối cùng.

  1. Định nghĩa cấu trúc

    Bài test cần đo chính xác điều gì, cho ai và phục vụ quyết định nào? Chúng tôi viết một định nghĩa cấu trúc gồm các khía cạnh, các cấu trúc có liên quan và không liên quan, cùng mục đích sử dụng.

  2. Viết và thẩm định câu hỏi

    Câu hỏi được viết dựa trên định nghĩa, được chuyên gia nội dung thẩm định về mức độ liên quan, sự rõ ràng và sự phù hợp văn hóa, và được kiểm tra để loại bỏ cách diễn đạt mà chỉ một số nhóm hiểu được.

  3. Thử nghiệm sơ bộ và phân tích

    Một đợt thử nghiệm sơ bộ trong nhóm đối tượng cho thấy các câu hỏi hoạt động thế nào: độ khó, độ phân biệt, tương quan câu hỏi–tổng, mẫu trả lời và cái nhìn đầu tiên về cấu trúc nhân tố.

  4. Xác lập cách chấm điểm và ghi chép

    Chúng tôi cố định các thang đo, quy tắc chấm điểm và các câu hỏi chấm điểm đảo ngược, đồng thời ghi lại mọi lựa chọn, để bài test có thể chuyển sang giai đoạn kiểm định độ hiệu lực và xây dựng chuẩn.

Những lựa chọn cần chốt sớm

Những quyết định này định hình mọi thứ phía sau. Thay đổi chúng sau đợt thử nghiệm sơ bộ thường đồng nghĩa với việc phải thử nghiệm lại.

Mục đích sử dụng

Tuyển chọn, phát triển hay nghiên cứu. Một bài test dùng cho quyết định về từng cá nhân cần bằng chứng mạnh hơn một bài test dùng để hiểu ở cấp độ nhóm.

Nhóm đối tượng

Ai sẽ làm bài test: trình độ học vấn, giai đoạn sự nghiệp, ngành nghề. Câu hỏi và chuẩn phải phù hợp với nhóm đối tượng đó.

Ngôn ngữ

Những phiên bản ngôn ngữ bạn cần hiện tại và sau này. Mỗi phiên bản được chuyển thể và phân tích riêng, không chỉ được dịch.

Hình thức câu hỏi

Trắc nghiệm nhiều lựa chọn, thang Likert, lựa chọn bắt buộc hay câu hỏi tình huống, mỗi loại có thế mạnh và thiên lệch trả lời riêng.

Độ dài và thời gian

Đủ câu hỏi cho mỗi thang đo để điểm số đáng tin cậy, nhưng không nhiều hơn mức người trả lời có thể tập trung trả lời.

Hình thức tổ chức

Có giám sát hay không, giới hạn thời gian, thiết bị. Sử dụng trực tuyến không giám sát đòi hỏi chú ý thêm đến mức độ lộ câu hỏi và chất lượng câu trả lời.

Được xây dựng để vận hành trên Match.hr

Một bài test được phát triển cùng Phòng Lab có thể được cung cấp trên Match.hr, riêng cho tổ chức của bạn hoặc trong thư viện, với việc chấm điểm và báo cáo do nền tảng đảm nhận. Những điểm nào dưới đây áp dụng cho bài test của bạn, và từ khi nào, sẽ được thống nhất trong buổi trao đổi ban đầu.

  • Thang đo, thang đo phụ và câu hỏi chấm điểm đảo ngược theo đúng quy tắc chấm điểm
  • Điểm chuẩn hóa như bách phân vị, stanine và điểm T khi đã có nhóm chuẩn
  • Phân tích riêng cho từng phiên bản ngôn ngữ
  • Thống kê câu hỏi được tính lại khi số lượt làm bài tăng lên
  • Một nhãn tâm trắc cho thấy cấp độ đánh giá và bằng chứng hiện có

Tiêu chí đánh giá của chúng tôi tuân theo cấu trúc của các mô hình đánh giá test COTAN và EFPA. Việc đánh giá do chính Match.hr thực hiện.

Một bài test mới bắt đầu mà chưa có bằng chứng

Thử nghiệm sơ bộ cho thấy các câu hỏi có hoạt động như dự định hay không. Nó không cho thấy bài test dự báo được điều gì. Bằng chứng cho một mục đích sử dụng cụ thể, chẳng hạn tuyển chọn, cần một nghiên cứu kiểm định độ hiệu lực với đủ số người tham gia và một tiêu chí phù hợp. Cho đến lúc đó, hãy giới thiệu bài test là đang trong quá trình phát triển và không dùng riêng nó để ra quyết định về con người.

Câu hỏi thường gặp

Một đợt thử nghiệm sơ bộ cần bao nhiêu người?

Điều đó tùy thuộc vào các phân tích. Thống kê câu hỏi trở nên khá ổn định với vài trăm người trả lời cho mỗi phiên bản ngôn ngữ; phân tích nhân tố thường cần nhiều hơn, đặc biệt khi có nhiều thang đo. Trong buổi trao đổi ban đầu, chúng tôi tính toán cỡ mẫu phù hợp với câu hỏi nghiên cứu của bạn và khả năng tiếp cận nhóm đối tượng.

Các bạn có thể phát triển một bài test bằng nhiều ngôn ngữ cùng lúc không?

Có, nhưng chúng tôi coi mỗi ngôn ngữ là một phiên bản riêng. Câu hỏi được chuyển thể bởi người bản ngữ có kiến thức chuyên môn và được thẩm định về ý nghĩa, không chỉ về câu chữ. Các phiên bản có đo cùng một điều hay không là câu hỏi cần dữ liệu trả lời, vì vậy mỗi phiên bản được thử nghiệm sơ bộ và phân tích riêng.

Ai sở hữu công cụ đo lường?

Quyền sở hữu và giấy phép được thống nhất bằng văn bản trước khi bắt đầu công việc. Nếu sau này bạn muốn cung cấp bài test cho các tổ chức khác, trang Phát hành bài test giải thích cách các công cụ đo lường được đưa lên Match.hr.

Tài liệu bao gồm những gì?

Định nghĩa cấu trúc, cách câu hỏi được viết và thẩm định, mẫu và kết quả thử nghiệm sơ bộ, quy tắc chấm điểm, mục đích sử dụng và giới hạn của nó. Đây là nền tảng cho một tài liệu kỹ thuật khi đã hoàn tất kiểm định độ hiệu lực và xây dựng chuẩn.

Đánh giá ứng viên đầu tiên của bạn ngay hôm nay

Tài khoản miễn phí, không cần thẻ tín dụng, có kết quả sau vài phút.