引き続き、レスリー・トーマス博士のテスト出版社協会カンファレンス2019でのプレゼンテーションから抜粋したビデオの4本目(全4本)をお届けする。そのプレゼンテーションのタイトルは 検定合格の不変の4つの法則:サイコメトリアンが語る.今日のビデオは、次の点に焦点を当てています。 法則その4:F適切なテスト開発プロセスに従い、テクノロジーとデータを最大限に活用する。
法則 4 の要約はビデオの下にあります。
常に専門的なテスト基準と法的ガイドラインに従う
試験開発プロセスには専門的な試験基準と法的ガイドラインがあります。これらは、試験のスコアが有効で信頼性が高く、法的に正当化できることを保証するのに役立ちます。ライセンス試験では、基準とガイドラインに従うことが特に重要です。
テスト基準は、スコアが有効で信頼性が高く、法的に正当化できることを保証するのに役立ちます
資格認定試験が開始され、人気が高まり、人気が出ることは珍しくありません。実際、非常に人気があるため、別の組織がより重要な決定を下すためにその試験の使用を要請したところ、元の試験開発プロセスで標準とベスト プラクティスが遵守されていなかったことが判明しました。最初から専門的なテスト標準が遵守されていれば、提案された試験のより広範な使用が可能だったかもしれません。
ANSIまたはNCCA認定には以下の標準が必要です
特定の州でプログラムを認可してもらいたいと思ったことがあるなら、多くの州が、テスト開発中に ANSI や NCCA などの専門的なテスト基準が遵守されているかどうかを調査することを心に留めておいてください。レスリーは、専門的なテスト基準が遵守されていないために、相互承認や同様の特典を提供する州からの提案を利用できなかったクライアントから電話を受けたことを語ります。
試験基準はより高品質で信頼性の高い製品を生み出します
テスト標準に従う最も重要な理由は、より優れた資格認定製品を生み出すことです。テスト開発プロセスのすべてのステップには、正当な理由があります。雇用主は、劣悪な資格認定試験を見抜くことができます。雇用主は、特定の職務に適任でない認定者を採用するでしょう。雇用主は点と点を結び付け、プログラムの信頼性を失ってしまいます。
テクノロジーでテスト開発プロセスを合理化
現在、仮想ワークショップは、項目の作成、標準設定、ジョブタスク分析などに使用できます。自宅で仕事をしている人々とやり取りし、気が散ることがあるため、ワークショップをうまく進めるには真のスキルが必要です。予定されたタスクに十分な人数が来ないことは比較的一般的であり、前進または再スケジュールについて不確実性が生じます。ワークショップでは、中小企業には実際の時間のコミットメントが、ファシリテーターには高いレベルのスキルが求められます。
仮想ワークショップに関する注意点:
- 厳しい期限があり、間に合わない場合は、ワークショップを現地で実施してください。私たちは、項目作成ワークショップの進め方は、SME を 1 つの部屋に詰め込み、食事を与え、課題が終わるまで帰らせないことだと言っていました。
- テスト開発側で働くファシリテーターとして、レスリーは、オンサイト ワークショップよりも仮想ワークショップの方が非言語的な合図 (たとえば、SME 間の困惑した表情や意見の不一致) を見逃しやすいことに気づきました。
- SME 同士がこれまで一緒に仕事をしたことがない場合は、まずオンサイト ワークショップを行うのが常に良いアイデアです。なぜなら、それが関係構築とネットワーク構築に非常に役立つからです。バーチャルで行う場合の最大の課題は、必要以上に多くの専門家を募集しなければならないときですが、人々が来ないことです。そのため、人々に来てもらいたい場合、最善の戦略は、最初のワークショップをオンサイトで行い、関係構築アクティビティをいくつか含めて、SME が同僚のためにバーチャルで出席する義務をより強く感じるようになることです。
データを活用してより多くの製品を作成し、プログラムを継続的に改善する
多くの場合、私たちは職務分析調査などのテスト開発プロセス全体を通じてデータを収集しており、そのデータの一部は優れた業界レポートになります。多くの企業は、業界や職務の中で自社がどの位置にいるのかを知りたいと考えています。企業は、職務記述書の作成やベンチマーク ツールの作成に役立てるために、タスクや職務能力に関連するその情報を使用できます。
収集した情報から製品を作成する方法はいくつかあり、そうすることで業界の思想的リーダーとして見られるようになります。職務分析調査などには業界の現状に関する質問が含まれることが多く、その回答は共有すると常に価値があります。
アイテム統計を使用して複製可能な「モデルアイテム」を特定する
項目の統計情報を使用して項目を改善し、「モデル項目」を特定することができます。特にシナリオベースの項目がある場合はそうです。シナリオベースの項目は、多くの場合、より応用的な知識を測定するため、これは望ましいことですが、作成もより困難です。統計的にパフォーマンスの良いシナリオ項目を特定できれば、その中の変数を切り替えてより多くの項目を作成し、項目の作成が難しいため、より効率的に作成できます。
受験者と顧客を調査する
既存のプログラムについて気に入っている点、気に入っていない点、改善できる点について質問してください。試験のフィードバックから、1 つの領域に重点を置きすぎているか、あるいは十分ではないことが分かる場合があります。試験に組み込むべき新しいテクノロジーがあるかもしれません。
資格認定プログラムは「一度やったら終わり」というものではありません。プログラムの競争力を維持するには、特にテクノロジーが驚異的なスピードで進歩している今日では、プログラムを継続的に改善する必要があります。業界が競争力を維持するには、競争力を維持するためにさらに多くのことを行う必要があります。
認定取得成功の 4 つの不変の法則に従うことによる 4 つのメリット
- より短い時間とコストで、より高品質の認定プログラムを作成します。
- 実際の市場ニーズに基づいてプログラムの価値をより良く伝える
- テクノロジーと人材への投資を最大限に活用して開発を効率化
- 貴重な市場からのフィードバックに基づいて、時間をかけてプログラムを強化します
市場の問題点に焦点を当て、それを明確にします。データを調べて、具体的に何をカバーすべきかに関する情報が得られるかどうかを確認します。そして、その詳細を使用して、資格をターゲット ユーザーに売り込みます。彼らの言葉で話すことを忘れないでください。
技術と人材への投資を最大限に活用して、開発を効率化します。適切な場合に技術を使用し、人的要因を念頭に置いてください。人と協力しながら作業しているのです。
資格認定プログラムは一度きりで終わるものではありません。競争力を維持するために、貴重な市場からのフィードバックに基づいて時間をかけてプログラムを強化してください。業界にさらに多くの製品を提供し、思想的リーダーとしての地位を確立できます。





