The present invention provide systems and methods for controlled
presentation of constructed responses through a variety of computer
applications to human evaluators for assessment. The systems and methods
further provide for controlled presentation of the constructed responses
to minimize the influences of psychometric factors on the accuracy of the
human evaluators' assessments and to maximize the ability to efficiently
generate data for use in analyzing the accuracy of the human evaluators'
assessments and the difficulty of the constructed response categories or
questions. The systems and methods of the present invention utilize a
storage means which relationally stores data regarding the human
evaluators, the constructed responses, the scores awarded and the computer
applications to utilize. The systems also comprise assessment stations and
processing means for selectively transmitting constructed responses to the
assessment stations and receiving scores awarded by the human evaluators
assigned to the assessment stations.
La presente invenzione fornisce i sistemi ed i metodi per la presentazione controllata delle risposte costruite con una varietà di applicazioni informatiche agli esperti umani per la valutazione. I sistemi ed i metodi ulteriori prevedono la presentazione controllata delle risposte costruite per minimizzare le influenze dei fattori psicometrici sull'esattezza delle valutazioni degli esperti umani e per elevare la capacità di generare efficientemente i dati per uso nell'analizzare l'esattezza delle valutazioni e della difficoltà degli esperti umani delle categorie o delle domande costruite di risposta. I sistemi ed i metodi di presente invenzione utilizzano i mezzi di immagazzinaggio che relationally memorizza i dati per quanto riguarda gli esperti umani, le risposte costruite, i segni ricevuti e le applicazioni informatiche per utilizzare. I sistemi inoltre contengono le stazioni di valutazione e mezzi di elaborazione per selettivamente trasmettere le risposte costruite alle stazioni di valutazione e la ricezione dei segni ricevuti dagli esperti umani assegnati alle stazioni di valutazione.
