これらの高価な過ちトップ10を避けることによって、資格認定プログラムを成功に導こう。
1. 価値提案が弱い– 新しい資格認定プログラムを作成する前に、市場調査を実施して、プログラムが適切な対象者をターゲットにしていること、すべての利害関係者 (スポンサー組織、認定者、雇用主、一般市民/消費者など) にとって価値があること、その職業の既存の認定プログラムよりも価値があるか、または異なる価値があることを確認することが重要です。
2. 弱いビジネス モデル– 資格認定プログラムはビジネスであり、ビジネスとして運営する必要があります。プログラムは、需要と供給、競争、法律や地域、国、世界規模の出来事などの外部要因の影響を受けます。適切な予測モデルを使用し、現実的な予算を立て、テスト プログラムを長期的なビジネス投資のように扱います。
3. 明確なロードマップがない– 新しいプログラムをできるだけ効率的に開発するには、プログラムの目的と資格の対象者について関係者間で共通の理解があることを確認する必要があります。また、さまざまな認定トラックの構造と相互関係、テストスコアの解釈、最低限の資格を持つ候補者の定義についても合意が必要です。資格要件と再認定要件も決定し、合意する必要があります。テスト開発の開始後に焦点や方向を変更すると、費用、時間、リソース、勢いの喪失の面でコストがかかる可能性があります。
4. コンテンツ ドメインの定義が不明確– 職務分析は、テスト プログラムの法的防御に必要です。また、試験で測定される知識体系を定義するためにも不可欠です。優れた職務分析 (およびそれが伝えるテスト ブループリント) では、項目の作成者とレビュー担当者向けに試験コンテンツを明確に定義し、認定された職業または職務における最低限の能力について試験のスコアから有効な判断を下せるようにする必要があります。
5. 専門的なテスト基準に従っていない– 認定プログラムが高品質であり、関係者の間で信頼を得るためには、初期の試験開発のすべての段階を通じて専門的なテスト基準を認識し、それに従うことが重要です。
この分野でよくある間違いの例としては、職務分析やテストの青写真なしに試験を開発するプログラムや、テスト開発活動の専門基準に従っているものの、恣意的なカットスコアを設定するプログラムなどがあります。さらに、プログラムを運用開始後に専門基準にまで引き上げるのはコストがかかり、非効率的です。
6. ベータ テスト– 試験の対象者を代表しないベータ テスト受験者を特定して採用すると、試験の能力基準 (カット スコアなど) が歪む可能性があります。新しい認定資格では、ベータ テストの実施に実績のある専門家を採用するという間違いがよくあり、その結果、試験が経験の少ない受験者にとってより簡単に感じられるようになります。これにより、将来の合格率が低下し、試験の合否判定の妥当性が疑問視される可能性があります。
7. 不適切な SME の採用– テスト項目の作成とレビューのために採用された SME が認定資格の対象者を代表していない場合 (たとえば、職務経験がない、経験が多すぎる、専門知識が専門的すぎるなど)、作成される試験項目は難しすぎる可能性があります。また、対象者にとって公平で効果的であるには焦点が狭すぎる可能性もあります。さらに、SME グループのダイナミクス (たとえば、支配的なグループ メンバー、SME 間の性格の対立) は、メンバー全員が項目レビュー プロセスに貢献する機会が平等ではない場合に、試験項目の品質に影響を与える可能性があります。
8. メンテナンス プランが実施されていない– 認定試験とプログラムは、作成後、メンテナンスする必要があります。問題の作成とレビュー、試験フォームの改訂、問題分析などの年間試験メンテナンス活動には十分な予算が必要です。カット スコアの決定と等化のレビューについても準備する必要があります。約 5 年ごとに新しいジョブ タスク分析を実行する必要があります。
9. 不適切なツールの使用– テストの開発と保守作業を効率化するためのツールは数多くあります。これには、問題作成者がオンライン問題バンクに問題を直接入力する機能や、編集履歴を監査する機能が含まれます。問題ごとに履歴情報が追跡され、試験と受験者に関する情報にリアルタイムでアクセスできる必要があります。また、試験や問題をすばやく更新する機能も必要です。これらのツールの中には、テストのセキュリティを強化するという追加の利点があるものもあります。
10. 不十分なテスト セキュリティ対策– テスト開発およびテスト管理活動のすべてのステップにセキュリティを組み込む必要があります。セキュリティ対策には、SME、スタッフ、請負業者、ボランティア、受験者など、テスト資料にアクセスできるすべての人との秘密保持契約が含まれますが、これに限定されません。テスト資料へのアクセスは、必要な期間に必要な資料のみに制限する必要があります。たとえば、SME は、レビュー フェーズ中にレビューされる項目にのみアクセスする必要があります。
