引き続き、レスリー・トーマス博士のテスト出版社協会カンファレンス2019でのプレゼンテーションの抜粋ビデオ4本のうちの3本目をお届けする。そのプレゼンテーションのタイトルは 検定合格の不変の4つの法則：サイコメトリアンが語る.今日のビデオは、次の点に焦点を当てています。 法則＃3：主題専門家（SME）を慎重に採用し、彼らの時間を最適化する。
法則 3 の要約はビデオの下にあります。
学術的知識または製品知識と実務上の知識
中小企業の採用は、業界にとって課題です。IT/ソフトウェア分野における学術的知識や製品知識を持つ人と、実務上の知識を持つ人の間には、大きな違いがあります。
効果的な資格認定プログラムでは、書籍の知識そのものを測定するのではなく、仕事で応用される知識を測定します。市場で価値を提供するためには、資格認定のために仕事に関する知識を測定する必要があります。書籍の知識は顧客に価値を提供しないかもしれませんが、仕事で得た知識は価値を提供します。学術界から来た主題専門家はチームにとって有益な人材ですが、実社会の知識と実践をもたらす実務家ではなく、書籍の学習と理論に傾倒する学者ばかりがチームに入らないようにする必要があります。
同様に、製品指向で機能に重点を置いているものの、仕事でどのように使用されるかを理解していない SME がいる可能性があります。チーム内の SME のほとんどが、実際に自分の職務で仕事を遂行していることを確認してください。
組み込み系中小企業
「組み込み SME」はテスト開発チームにとって役に立ちます。たとえば、クライアントが IT/ソフトウェア会社の場合、組み込み SME は会社の実際の製品グループで作業している個人になります。彼らは、テスト コンテンツに影響する将来のリリースについて貴重な情報を提供できます。実際、大規模な IT 企業では、資格認定チームが製品グループと密接に連携することが多く、そのグループのメンバーに組み込み SME として、テスト コンテンツに影響するリリースについて開発チームに警告するよう依頼することさえあります。
コンテンツの変更はトレーニング、アイテムの作成、ベータ テストに影響するため、この事前通知は重要です。コンテンツの変更によって影響を受けるプロセスとタイムラインは複数あるため、そのことを早めに知るほど、すべての関係者をより適切に準備できます。
資格に影響を及ぼす可能性のある規制の変更についても同様です。たとえば、早期警告により問題作成が容易になります。SME が職務の変更を認識していれば、現在の慣行に沿ったよりよい問題を作成できます。そのため、規制委員会に所属したり、製品チームで作業したりする SME がいると便利です。また、IT ヘルプデスク環境や医療ヘルプデスクなどのサポート機能で作業する人々も検討してください。彼らは毎日現実の問題に対処しており、貴重な情報源になる可能性があります。
中小企業と最低資格候補者（MQC）
最低限の資格要件を満たした候補者と同レベルの専門知識と経験を持つ SME を 1 名 (ほぼ必須) 配置する必要があります。コンピューターで初めてマウスを使用したときのことを覚えている人はいませんが、カーソルが画面上を飛び回っていたことはよくあります。今では、マウスは簡単に使用できます。とてもシンプルです。それが SME の姿です。
レスリーは、営業担当者向けの資格を開発したいと考えていたテクノロジー企業についての話を共有しています。その企業は、営業エンジニアを使って資格を開発しましたが、その結果できたテストは営業担当者が合格するには難しすぎました。そのため、その資格は営業エンジニア向けのものになりました。
したがって、最低限の資格要件を満たした候補者と一致する SME がいると、貴重な現実チェックができます。主題専門家の多くは、定義上、専門家です。彼らは常に、通常、テスト項目を必要以上に難しくしようとします。MQC と一致する SME は、項目が自分の知識と経験のレベルを超えて書かれている場合は、発言して他の SME に知らせることができます。この SME は、専門家のレベルを設定する効果があります。
中小企業の「適合性」を重視
雇用前テストには、「スキルで雇う。適性で解雇する」という格言があります。一部の SME は混乱を招き、グループのダイナミクスに悪影響を及ぼす可能性があります。この問題はすぐに対処する必要があります。さもないと、混乱を招く SME について他の人が声を上げないため、恨みが募ることになります。このまま放置すると、結果として資格の質が低下し、最も貴重なリソースを失うことになります。
中小企業グループにとって、労働倫理は重要です。社交的な傾向は気を散らし、進歩を妨げる可能性があります。
必要以上に中小企業を採用する
これを行うことで追加作業が発生することは承知しています。アイテムの書き方を習得できない SME もいます。彼らは苦労するでしょう。しかし、アイテムのレビューやチームでの作業には依然として役立ちます。
SME ゲーム (ハンガー ゲームに触発された)
最後の SME が勝利します。これは、6 ～ 8 人の SME が技術レビューを受ける場合です。彼らのアイテムがレビューのために他の人に送られると、その人は、たとえば、正しいものを測定していないと主張して、アイテムが標準以下であると宣言します。この最後の SME に最終決定を任せると、他の 6 ～ 8 人の SME の作業が実質的に無効になります。
したがって、SME の扱いには注意が必要です。彼らは専門家であり、強い意見を持っています。彼らには強い意見を持ってもらいたいものです。しかし、各人の意見は 1 つの意見に過ぎず、文脈の中で理解される必要があります。技術レビューは反復的なプロセスであり、自分が正しいと思っている SME が必ずしも正しいとは限りません。
支配的な SME が勝利します。グループ内にいじめっ子がいる場合、他のメンバーは黙り、いじめっ子の意見に重みを持たせます。いじめっ子を脇に連れて行き、他の人の意見を聞く必要があることを知らせるのは価値があります。他の人に個別に頻繁に声をかけると、バランスが取れます。
さまざまな SME に呼びかけます。特に仮想環境では、SME に呼びかけることで、彼らの参加が促され、同じ人が常に発言することによる影響が軽減されます。ラウンドロビン方式で人々に呼びかけることで、彼らは緊張感を保ち、仮想会議中にマルチタスクを回避し、全員の意見を確実に得ることができます。
中小企業はMQCに注力すべき
SME が最低限の資格を持つ候補者に集中していることを確認してください。それは当然のことです。しかし、SME は専門家であり、問題を必要以上に難しくするでしょう。問題の難易度は適切かもしれませんが、それでも確認する必要があります。ベータ テストの統計により、問題が MQC にとって難しすぎるという Leslie の懸念が何度も確認されています。
NDA と禁止されている中小企業の行為
覚えておくべき非常に重要なことは、中小企業に秘密保持契約 (NDA) に署名させ、トレーニングや試験準備活動に従事することを禁止することです。中小企業が機密試験の内容を知ることの価値を理解し、独自の試験準備会社を立ち上げたケースもあります。
テスト受験者契約と同様に、NDA では SME の禁止行為について非常に具体的に規定する必要があります。禁止行為を明記しないと、SME はテスト内容の共有が許可されていないことを知らないふりをする可能性があります。NDA で許容される/許容されない行為について具体的に規定すればするほど、テスト開発フェーズのセキュリティが強化されます。
***
法則 1 と 2 についてはビデオをご覧ください。
認定成功の最初の 2 つの法則を見逃した場合は、以下のリンクをクリックしてください。
法則その1: 市場が解決にお金を払ってくれる主な問題を特定する
法則その2: 始める前にプログラムの目標と主要な決定事項を文書化する
お問い合わせ！ Kryterion 心理測定チームは、あなたの最初のまたは次の認定試験について詳しく知りたいと思っています。ここから会話を始めることができます。
