Quest Ladder
TeachFORGE.ai
Quest Ladder / 記述解答
短答、長答、証明
思考を選ぶのではなく表現しなければならないとき、そしてそれが採点にどれだけコストがかかるか。
最も率直な形式であり、最も高くつく。
3つの形式
| 形式 | 長さ | 採点者 |
|---|---|---|
| 短答 | 数語。 解答の最大語数 は1から40、既定は8。 | エンジンが、あなたの許容規則に照らして |
| 長答(エッセイ) | 段落。 評価する要点 は3から8、既定は4。 | あなたが、採点キューで |
| 証明 | 構造化された論証。 確認する要点、同じ範囲と既定。 | あなたが、採点キューで |
短答の語数制限は実質的な働きをする。8にすると自動照合が公正に判定できる範囲に収め、40に上げると文字列比較で採点されるエッセイになり、問題になる頻度で誤る。
短答を採点可能にする
短答は自動なので、正解を通し誤答を落とすのに十分な許容規則にすべてがかかっている。
- その他の許容解答は1行に1つ、同義語と別の言い回し用。
- 任意キーワードは、そのいずれかがカウントされ得る — いくつかの語のどれでも理解を示せるときに有用。
- テキスト一致モード は寛容に設定する。つづりが論点でない限り。
同じ形をあと20作る前に、短答タイプを実際のクラスに通す。配信レポートの よくある誤答 は学習者が実際に打ったものを示し、最初の通しではリストになかった正解がほぼ必ず2〜3個見つかる。
採点キューに届くもの
長答と証明は 採点に行く。それぞれについて、書いた採点ルーブリック、学習者の答え、 点数(満点) 欄と任意の フィードバック 欄が見える。
試行の文脈も見える — 使ったヒントとその減点、学習者自身の自信、所要時間、どの段階ステップから来たか — 入力すると合成合計が更新され、減点が適用されたあとの実際の点が見える。
キーポイントがルーブリック
評価する要点 と 確認する要点 は飾りではない。採点時に答えの横に出るルーブリックスロットであり、30本のエッセイを最後まで一貫させ、ぶれさせないものだ。
キーポイントを書く前に、自分が探すものを3つ挙げる。挙げられないなら、その問題は 使う前に前提を述べる ではなく 良い理解。確実にチェックできないキーポイントは、2クラス目まで生き残らない。
これらで段階を作る前に
自動採点30問の段階は一度押す配信である。エッセイ30本の段階はクラスあたり夕方の仕事である。どちらも正当だが、スケールするのは片方だけだ。
よくある形は、推論が重要なところで記述が1〜2問ある自動採点中心の段階である。カバレッジが得られ、採点も有限のままになる。