Mô tả các hình

Hình 1: Màn hình soạn thảo câu hỏi TestproEditor, các câu hỏi được tạo ra ban đầu có thể mang các giá trị tham số do người soạn tự đánh giá.

Hình 2: Cán bộ soạn thảo chuyển câu hỏi lên Ngân hàng, đưa vào các ô kiến thức của một ma trận cụ thể

Hình 3: Mô tả quá trình tiền duyệt bởi cán bộ quản lý NHCH đối với các câu hỏi vừa được đưa lên. Những câu hỏi chưa đáp ứng được yêu cầu hoặc có sai lỗi sẽ bị loại bỏ và yêu cầu soạn lại.

Chế tác câu hỏi

Công việc soạn thảo có thể được phân công cho nhiều cán bộ và mỗi cán bộ được phân có trách nhiệm hoàn thành cũng như chịu trách nhiệm cho chất lượng câu hỏi của mình.

Với Testpro, cán bộ xây dựng câu hỏi có thể trực tiếp soạn thảo trên TestproEditor, với nhiều sự hỗ trợ đa dạng như multimedia, công thức toán học,… và sau đó đưa các câu hỏi của mình vào ngân hàng thông qua tài khoản được cung cấp.

Mô tả các hình

Hình 1: Màn hình soạn thảo câu hỏi TestproEditor, các câu hỏi được tạo ra ban đầu có thể mang các giá trị tham số do người soạn tự đánh giá,

Hình 2: Cán bộ soạn thảo chuyển câu hỏi lên Ngân hàng, đưa vào các ô kiến thức của một ma trận cụ thể

Hình 3: Mô tả quá trình tiền duyệt bởi cán bộ quản lý NHCH đối với các câu hỏi vừa được đưa lên. Những câu hỏi chưa đáp ứng được yêu cầu hoặc có sai lỗi sẽ bị loại bỏ và yêu cầu soạn lại.

Phân tích hoàn thiện tham số

Lựa chọn nhóm thí sinh mẫu phù hợp đảm bảo tính bảo mật cho NHCH.

Sử dụng  các chiến lược khác nhau nhằm đánh giá được nhiều câu hỏi trong NHCN với độ tin cậy cao

         Xây dựng các đề thi có độ phủ kín NHCN theo tùy chọn

         Xây dựng các đề thi có một số các câu hỏi đã được định cỡ

         Áp dụng cho các nhóm thí sinh tương đương

 Các tham số quan trọng của câu hỏi là 3 tham số IRT:… ngoài ra các tham số cổ điển như độ phân biệt, độ khó cũng được tính toán và được sử dụng trong đánh giá câu hỏi.

Đối với một câu hỏi, càng nhiều lần được đánh giá thì nhìn chung độ chính xác càng cao (có thể được thực hiện qua nhiều lần cân bằng đề thi)

Mô tả các hình

      Hình 1: Tham số các câu hỏi trắc nghiệm đã được định cỡ, dựa vào các tham số, chúng ta có thể phát hiện ra các câu hỏi có vấn đề (khi độ phân biệt cổ điển <0.2 hay độ phân biệt IRT quá bé, độ khó IRT quá lớn…). Các câu hỏi này sẽ bị loại bỏ khỏi NHCH.

Thực thi

Dữ liệu thi thử được định cỡ nhằm xác định tham số a, b, c  của các câu hỏi và các tham số cổ điển

Dựa vào các tham số thu được, các câu hỏi có vấn đề ( Sai nội dung, nhầm đáp án,…) sẽ được phát hiện và được sửa lại. Các câu hỏi càng được định cỡ nhiều lần sẽ có các tham số đáng tin cậy hơn.

Thiết kế đề thi theo các yêu cầu cụ thể.

So sánh độ giá trị , độ tin tưởng và mục đích đánh giá giữa các đề thi

Tổ chức thi trực tuyến qua Internet hay mạng Lan, cho phép thí sinh đăng ký thi trực tuyến và nhận kết quả ngay sau khi làm bài xong, hoặc nhận đồng loạt sau khi công bố điểm

Tổ chức thi qua giấy, bài làm của thí sinh sẽ được scan và nhận dạng qua TesSheetReader và chuyển vào hệ thống.

Dựa vào các tham số đã có, Testpro cung cấp cho người dùng chức năng thiết kế các đề thi theo ý muốn (ví dụ, đánh giá chính xác tại một mức năng lực cụ thể nào đó)

Khả năng sinh đề thi tương đương cũng là một điểm mạnh của Testpro, với đề thi tương đương, chúng ta có thể tổ chức nhiều kỳ thi đánh giá thí sinh mà vẫn đảm bảo các thí sinh được đánh giá công bằng với nhau

Bên cạnh đó, Testpro cho phép người sử dụng so sánh, phân biệt khả năng đánh giá giữa các đề thi

Đề thi có thể được sử dụng trong kỳ thi trực tuyến (Qua Lan hay Internet) hoặc in ra và tổ chức thi trên giấy, hệ thống sẽ nhận lại dữ liệu bài làm thí sinh thông qua các phần mềm quét bài (TestSheetReader).

Hình 1: Thiết kế đề thi theo mẫu hàm thông tin, kết quả thu được và sai số bình phương

Hình 2: So sánh các nhóm đề thi với nhau, các đề thi có đường cong điểm thực gần như nhau nhưng độ đánh giá chính xác thì khác nhau

Hình 3: Thi trực tuyến, để đảm bảo độ an toàn, bài làm của thí sinh được lưu tự động và tự động nộp khi hết giờ

Hình 4: Mô tả chức năng giám sát kỳ thi của cán bộ quản lý

Báo cáo kết quả

Để phân tích dữ liệu, Testpro định cỡ theo mô hình IRT 3 tham số

Từ đó, cung cấp các báo cáo về điểm thực thí sinh, phân bố điểm, đánh giá độ chính xác của đề thi

Cung cấp hình ảnh bài làm của thí sinh, giúp cho thí sinh nhận biết được điểm mạnh và điểm yếu của mình

Hình 1: các thông số về đề thi, phân bố điểm,…

Hình 2: giá trị điểm thực thu được có giá trị đánh giá chính xác hơn điểm thô (hay điểm quy đổi)

Hình 3: Hình ảnh bài làm của thí sinh,

Hoàn thiện quy trình xây dựng đề thi: Sau khi phân tích đánh giá về thí sinh cũng như NHCH, đề thi; chúng ta có thể thiết kế lại các ma trận kiến thức sao cho phù hợp hơn, hoặc thay đổi cả cả giáo trình nếu cần thiết