専門医・認定医・指導医制度
新・家庭医療専門医／家庭医療専門医
試験信頼性について
専門医試験は、その合否が社会的に与える影響が大きいため、その信頼性に関して説明責任が求められる。専門医制度認定委員会では、2015年度の試験より詳細な検討を行ってきたが、そのデータや解析方法は、家庭医療専門医試験の関係者のみならず、試験制度や心理測定に関係する多くの関係者に有用であると思われるため、情報開示しておきたい。
2018年度専門医試験
日時：2018年7月15〜16日
受験者数：138名
概要
- CSA（clinical skills assessment）
- 6ステーション（2017年度と同じ）
- ステーション、評価者の2facetに対し、Φ係数0.614（項目合計点）、0.654（概略評価）
- ステーションの1facetに対し、Φ係数0.623（模擬患者評価）
- 筆記試験
- MCQ（multiple choice questions）120問
- 112項目でΦ係数0.75
- ポートフォリオ
- 18領域（2015年度と同じ）
- 評価者と領域の2facetでΦ係数0.919
- ポートフォリオ口頭試問
- ランダムな2領域のみ受験
- 項目と評価者の2facetでΦ係数0.472
2017年度専門医試験
日時：2017年7月16〜17日
受験者数：105名
概要
- CSA（clinical skills assessment）
- 6ステーション（�ゝ澣沺↓�患者教育、�９睥霄坩緡邸↓た翰�社会、�ゾ�児･思春期、�ζ�常病）
- ステーション、評価者の2facetに対し、G係数0.601（項目合計点）、0.648（概略評価）
- ステーションの1facetに対し、G係数0.604（模擬患者評価）
- 筆記試験
- MCQ（multiple choice questions）120問
- 103項目でG係数0.763
- ポートフォリオ
- 18領域（2015年度と同じ）
- 評価者と領域の2facetでΦ係数0.867
- ポートフォリオ口頭試問
- ランダムな2領域のみ受験
- 項目と評価者の2facetでΦ係数0.314
2016年度専門医試験
日時：2016年7月18日
受験者数：79名
概要
- CSA（clinical skills assessment）
- 7ステーション（2015年度と同じ）
- ステーション、評価者の2facetに対し、G係数0.683（項目合計点）、0.685（概略評価）
- ステーションの1facetに対し、G係数0.607（模擬患者評価、6ステーション）
- 筆記試験
- MCQ（multiple choice questions）67問
- EMI（extended matching items）12問、27項目
- 合わせて94項目でG係数0.834
- ポートフォリオ
- 18領域（2015年度と同じ）
- 評価者と領域の2facetでG係数0.889
2015年度専門医試験
日時：2015年7月19〜20日
受験者数：67名
概要
- CSA（clinical skills assessment）
- 7ステーション（�‐�児、�⊃翰�社会、�９睥霄圈↓ぜ膽０絨娶�書、�グ貅ゝ澣沺↓Υ擬垓軌蕁↓О貳姪�疾患）
- ステーション、評価者の2facetに対し、G係数0.715（項目合計点）、0.642（概略評価）
- ステーションの1facetに対し、G係数0.495（模擬患者評価、6ステーション）
- 筆記試験
- MEQ（modified essay question）に一部EMI（extended matching items）を組み合わせた
- 必須問題：�‘�常病、��高齢者、�Ｋ�性病、��EBM
- 選択問題：�ゾ�児、��精神保健、�Т墨促吋◆↓┰�性の健康のうち3つ
- EMIの41問分に対し、G係数0.647。D研究にて90問で0.8レベルへ
- ポートフォリオ
- 18領域（��bio-psycho-social、��家族、�Ｊ�数の健康問題、�す堝以冤董↓ッ楼茱悒襯好廛蹈癲璽轡腑鵝雰鮃�増進）、��EBM orコミュニケーション、�Д廛蹈侫Д奪轡腑淵螢坤�or生涯学習、�╋般害�善orチームワーク、��教育、��研究、��個人への健康増進、��幼小児･思春期、��高齢者、��終末期、��女性･男性、�哀螢魯咼螢董璽轡腑鵝↓吋瓮鵐織襯悒襯后↓乙澣沺�
- 評価者と領域の2facetでG係数0.872
G係数、Φ係数はいずれも一般化可能性理論を用いた場合の信頼性指標。0から1の間で変動し、1に近い方が信頼性が高い。総括評価としては0.8以上が好ましい。G係数は相対評価（norm-referenced assessment）、Φ係数は絶対評価（criterion-referenced assessment）の指標とされる。