NEC、「試験をAIで自動採点するシステム」で特許取得!
アイブン
9Picks
コメント
注目のコメント
このようなAIの自動採点ではベンチマークテストが重要になります。つまり採点の採点です。どれくらいの自動採点かによるでしょうが、AIの採点が、正しく高得点と取るべき答案を高く、安定的に評価できているかを何らかの形で人間が評価しないといけないと思います。人間の採点は特にどのような答案に高評価を与えるかはどのような能力の人を取りたいかによります。それを正しく反映しないと無理に客観化した不適切な評価システムができます。
これは採点者側の視点でしか作られていないサービスで、何だかなぁですね。採点される側からすると、多くの試験は自身の将来がかかっているものが多いわけですから、採点の妥当性が求められると思います。つまり、出来上がったAIのモデルの解釈性の部分を採点される側に開示できない限り、公平性や納得感が得られないのではないかと思います。