クイズ統計レポート

クイズ統計レポートは、クイズをクリックしてギアメニューから統計にアクセスするか、Boostベースでないものを使用している場合は、 [管理]> [クイズ管理]> [結果]> [統計]にアクセスして表示できます。

このレポートでは、クイズの統計的(心理測定)分析、およびその中の質問について説明します。このレポートの上部には、クイズ全体の概要が記載されています。次のセクションでは、すべての質問を表形式で示す分析を行います。このセクションには、個々の質問を編集したり、特定の質問の詳細な分析にドリルダウンしたりするためのリンクがあります。このレポートの最後のセクションは、正解の割合(施設指数)と識別効率指数の棒グラフです。

完全なレポート(概要、およびすべての質問の詳細な分析)は、クイズ構造分析表と同様にさまざまな形式でダウンロードできます。

統計レポートを見る理由

クイズの統計には非常に技術的なことがたくさんあります。データ科学者や数学者であれば素晴らしいですが、たとえそうでなくても、クイズがあなたの生徒にどれほど役立つかについて学ぶのに役立つ役に立つ情報があります。あなたがすべての技術を理解していないならば。

「壊れた」質問を見つける

すべてがうまくいっていれば、クイズ全体で高い評価を得た学生はそれぞれの質問を正しく受ける可能性が高いということになります。質問を作成したときに間違えた場合、たとえば誤った回答を誤って正しいとマークした場合、全体的なスコアが高いほど、正しい答えを選択し、正しい回答を選択する可能性が高くなります。間違っています。これは、「差別指数」列に表示されます。数が少ない場合は、問題がある可能性があります。壊れた質問だけが問題を引き起こす可能性があるわけではないので、調査に行く必要がありますが、それは心配の兆候です。そのため、Moodleはこのコラムの低い値を強調表示し、目立つようにします。

ヒント:[差別指数]列を見てください。数が少ない場合は、その質問を調べてください。

「壊れた」質問を見つけた場合は、さまざまな選択肢があります。質問を編集してから問題を解決するためにクイズを昇格させることもできます(ただし、質問を試みた後は非常に慎重に編集してください)。または、クイズの編集ページに移動してその質問のマークを設定できます。 0(ゼロウェイト)にします。

ランダムな変種が公平であることを保証する

クイズを作成するときにランダム化を使用できる方法はたくさんあります。時にはあなたは100のセットから10の質問の選択を引き出すトピックreivewクイズのようなものがあるでしょうが、ここで考慮したいケースはあなたがいくつかの異なるが似ているバージョンを持っているときです。 '同じ'質問の。以下のための造形クイズそれは学生に練習するより多くのチャンスを与えるために、良いです。 要約クイズの場合は、コピーによる変更が少なくなるので便利です。あなたは 'Variant of question 1'のような異なるカテゴリーからのランダムな選択を使ってこれを構築することができます、あるいは内部のランダムな変種を持つCalculatedSTACKのような質問タイプ、あるいはその両方でそれをすることができます。 ( 詳しくはこちらをご覧ください 。)

あなたがこれをしているならば、特にこれを信用のためにしているならば、あなたはおそらくそれが「公正」であることを確実にしたいと思うでしょう。ある変種を他の変種よりもずっと硬くしたくないのです。これを確認するには、クイズの特定の場所に表示されたさまざまな質問をすべて表示する補助行を調べます。特に 'Facility index'を見てください。これは基本的にどれだけの人がそのqustionの権利を得たかです。それらの数が変種によって大きく異なる場合、それはクイズが不公平かもしれないというサインです。

ヒント:バリアントを使用している場合は、[施設インデックス]列を見て、特定の質問のすべての異なるバリアントが同じ施設インデックスを持っていることを確認してください。

1つの質問に大きな違いがある場合は、重みをゼロにすることができます。また、将来クイズを再利用する場合は、そのバリアントを削除して新しいクイズを追加することを検討してください。

もちろん、このようなバリアントがある場合は、そのバリアントのどれもがそのように壊れていないことを確認するために、すべてのさまざまなバリアントの識別インデックスをチェックする必要があります。

生徒が特定の質問にどのように対応しているかを理解する

あなたがクイズで特定の質問を設定するとき、あなたは通常特定のスキルまたは少しの知識をテストすることを意図してそうします。しかし、それがあなたが本当に測定しているものであることを確信することができますか?

この例として、Open Universityの「数学者のための数学者」コースがありました。そこでは、学生が方程式の中のいくつかの数を代入できるかどうかをテストし、答えを計算機で計算するというテストが行われます。 OUサイエンステストの標準的な方法として、学生は正しい小数点以下の桁数(すでに教えられ評価されている)に答えを与えなければなりませんでした。しかし、彼らが答えを見たとき、彼らは計算機で正しいことを明らかに計算した多くの学生を見つけました、しかし彼らはあまりにも多くの小数位を入力したので間違っているとマークされました。 ( http://oro.open.ac.uk/39669/ 2014、ヨルダン)

統計レポートはこの種の分析を非常に簡単にします。後述するように、特定の質問についての詳細をクリックすると、そのページの下部に、与えられたさまざまな回答、正解か不正解か、および各結果を与えた生徒数が表示されます。

上記のいくつかのチェックで問題が発生する可能性があるかどうかを調べるには、ここから始めるのが良いでしょう。

あなたがこの情報を使うことができるもう一つの方法は、もしあなたがより短い答えやNumericalのようなもっと自由な質問タイプを使っているなら、あなたは何人かの学生が同じ間違いをしたことに気づくかもしれません。その後、質問をバックエンドで編集して、その答えを出した学生に特定のフィードバックを追加することができます。

ヒント:特に自由回答形式の質問を使用している場合は、回答の分析を見て、回答者が実際に与えている回答を確認してください。

総合クイズ統計

このレポートの情報に関する詳細は、次のとおりです。

クイズ情報

このセクションでは、テスト全体に関する基本的な情報をいくつか示します。あなたは見るでしょう:

  • クイズ名
  • コース名
  • 開始日と終了日(該当する場合)
  • 最初の試行または段階的な試行の総数
  • 初回または全試行の平均評点
  • 中間グレード
  • グレードの標準偏差
  • グレード分布の歪度尖度
  • 内部一貫性係数( Cronbach Alphaとも呼ばれる) - これは、クイズのすべての項目が基本的に同じものをテストしているかどうかを示す尺度です。したがって、それはテキストの一貫性を測定します。これは妥当性の下限です。ここの数値が大きいほど優れています。
  • エラー率 - 等級の変化は2つの原因から来ます。最初に何人かの学生はテストされているものにおいて他のものより優れています、そして次に第二にいくつかのランダムな変化があります。クイズの成績は主に生徒の能力によって決定され、ランダムな変動は最小限に抑えられます。エラー率は、どの程度の変動がランダムであるかを推定します。したがって、低い方が優れています。
  • 標準誤差 - これは誤差比から導き出され、各テストグレードにランダムな変動がどの程度あるかの尺度です。したがって、標準誤差が10%で、ある学生の得点が60%の場合、実際の能力はおそらく50%から70%の間にあります。
クイズ情報部の例

クイズ構造分析

このセクションでは、クイズ内のすべての質問とさまざまな統計を表形式で一覧表示します。

  • Q# - 質問番号(位置)、質問タイプのアイコン、プレビューと編集のアイコンを表示します
  • 質問名 - この名前は、この質問の詳細な分析へのリンクでもあります(下記のクイズ質問統計を参照)。
  • 試み - 何人の学生がこの質問を試みたか。
  • 施設指数 - 質問に正しく答えた学生の割合。
  • 標準偏差 - この質問のスコアにどれほどの変動があったか。
  • ランダム推測スコア - 学生がランダムに推測することによって得られるスコア
  • 意図/有効体重 - 意図体重は、クイズを編集するときに設定するものです。質問1がクイズの合計10点のうち3点の価値がある場合、意図した重みは30%です。実効ウェイトは、結果から、実際の変動のどれだけがこの質問によるものかを推定する試みです。したがって、理想的には、実効ウェイトは意図したウェイトに近くなるべきです。
  • 弁別指数 - これは、この質問の得点とクイズ全体の得点の相関関係です。つまり、良い質問では、この質問で高い得点を得た生徒は、クイズ全体で高い得点を示した生徒と同じであることを願います。数値が大きいほど優れています。
  • 識別効率 - 識別指数に似たもう1つの尺度。
ランダムな質問が使用される場合、ランダムな質問に対してテーブル内に1つの行があり、その後にこのランダムな質問の代わりに選択された実際の質問ごとに1つの行が続きます。
各クイズに対してクイズの質問がランダム化されると、クイズモジュールはデフォルトの位置を決定します。
クイズ統計計算は、これらすべての量に関するさらなる詳細を与えます。
統計構造分析部の例

クイズ統計表

チャート例

クイズの質問統計

ナビゲーション>クイズの名前>結果>統計(任意の質問のタイトルをクリック)1つの質問の統計を単一のページに表示することができます。このビューでは、各回答を選択したクイズ受講者の割合(回答の分析)も表示され、質問に関する基本情報が表示されます。

  • 質問情報 - 質問に関する基本情報、クイズの名前、質問、質問の種類、クイズ内の位置、および質問自体。このページにはプレビューと編集のアイコンがあります。
  • 質問の統計 - これは、この質問に関連するクイズ構造分析の表の行からの情報を繰り返します。
  • レポートオプション - すべての試行でレポートを実行するか、各生徒による最初の試行だけでレポートを実行するかを選択できます。レポートで使用されている計算の一部は、複数の試行を許可するクイズには適用されない可能性があるという仮定に基づいています。

:ヒント:統計の計算にはしばらく時間がかかります。レポートは計算された値を保存し、それらを最大15分間再利用します。そのため、統計が最近計算された日時がすぐに再計算されるボタンとともに表示されます。

個々の質問に対する回答の分析

これにより、質問の各部分に与えられたさまざまな回答の頻度分析が得られます。分析の詳細は質問の種類によって異なり、すべての質問の種類がこれをサポートしているわけではありません。例えば、エッセイ質問の回答は分析できません。

個々の質問の回答統計情報

また見なさい