サムラボ・インゲル効果
| 分野 | 心理学、科学コミュニケーション、研究倫理 |
|---|---|
| 提唱者 | サムラボ研究所研究員(名義は複数説) |
| 中心仮説 | 説明順の提示が観測者の期待を固定化する |
| 観測指標 | 主観的確信度、追試申請率、再解釈回数 |
| 関連語 | 期待固定、手続き記憶、説明バイアス |
| 初出 | 概ね1990年代後半とされる |
(Samlab-Ingel Effect)は、研究環境における「説明の順序」が実験結果の印象を体系的に歪めるとする概念である。主にとの交差領域で論じられ、再現性議論にも波及したとされる[1]。
概要[編集]
は、同一のデータでも「最初に提示される解釈(ストーリー)」の順番によって、その後の参加者の確信度や解釈の採用率が変化する現象として整理される概念である[1]。
一般には、実験説明の冒頭で提示された仮説が、実験後の質問紙における自由記述の語彙選択や、追加解析を要求する傾向(追試申請率)を変えるとされる。なお、効果は統計的有意性そのものよりも「結果の受け止められ方」に焦点が置かれる点が特徴とされる[2]。
一方で、本概念は研究室の内部運用にも波及し、(後述の通り、実在組織の一部を連想させる命名が用いられたとされる)では、セミナーの台本順序や図表の提示位置が「再現性点検」の対象になったと報告されている[3]。ただし、効果の測定方法には複数の派生指標が併存し、統一的な合意が常に得られているわけではないと指摘されている[4]。
成立の背景[編集]
研究環境の「順序設計」が問題視された経緯[編集]
1990年代後半、の場では「わかりやすい説明」が再現性の敵になる可能性が、断続的に議論されていたとされる。特に内の複数の研究会で、同じポスターでも「結論を先に言う運用」が参加者の理解を早める一方、後から入手したデータの評価を硬直化させるという懸念が取り上げられたとされる[5]。
その中心に置かれたのが、説明の順序を「手続き記憶」の観点から扱う試みである。すなわち、参加者は結果を単に学習するのではなく、説明の順序を一種の手続きとして覚え、その後の判断にも反映させる、とする見方である[6]。
この文脈で、後にと関連づけられる若手チームが、同一の実験ログから二種類の「解釈順」プロトコルを作成し、参加者がどちらを選好するかを追った。その結果、誤差ではなく「語り直し回数(説明を修正した回数)」に差が出た、という逸話が後の定義へつながったとされる[7]。
命名の由来(インゲルという名前の揺らぎ)[編集]
名称の「インゲル」は、実際には複数の研究者名が混線した経緯があるとされる。ある系統の編集履歴では、北欧出身の統計家の名が原案にあったが、別の会議録では「Ingel」の綴りだけが残り、フルネームが欠落した、とされる[8]。
また、別の資料では「Ingel」は人名ではなく、実験室の暗黙規約で用いられた略語(例:Interpretation Order Ledger)だとも主張されている[9]。ただし学会側では、結局「人名由来の効果名」として定着したとされ、結果として、同効果の引用文献では著者表記に揺れが生じたと指摘される[10]。
このように、命名は人名説と略語説が併存しているため、百科事典的には「インゲル」を厳密な個人として固定せず、概念名として扱う整理が採用されがちである[11]。とはいえ、現場では「インゲルさんが台本を変えると皆が変わる」という言い回しが流布したともされる[12]。
歴史[編集]
最初の観測:横浜の夜間セミナーで起きたとされる事例[編集]
同効果の典型事例として、ので行われた夜間セミナー(開催日:10月23日とされる)がよく引用される。主催は「港湾都市モデル解析会」で、会場は近辺の旧倉庫を転用した場所だったとされる[13]。
同セミナーでは、同じ生データセットを用いて、1回目は「仮説→方法→結果」の順で説明し、2回目は「方法→結果→仮説」で説明した。その後の短い質問(参加者92名、回収率97%)で、確信度スコアが平均で7.4点分(10点満点換算)変化したと記録されたとされる[14]。
さらに、自由記述の「再解釈回数」を、人間が手作業で数えたという点が特徴とされる。報告によれば、再解釈回数の中央値が1回目では0回、2回目では2回だったという[15]。この差が、説明順が「意味の枠組み」を固定するという後の説明へ結びついたと推定されている[16]。
制度化:追試申請率を指標に据えた「台本監査」[編集]
その後、の関連会議において、「追試申請率」を効果測定の補助指標にする案が採られたとされる。追試申請率とは、実験説明を受けた参加者が、後日(14日以内)に「追試すべき」と返信した割合である[17]。
この制度は、研究費申請の事務書類に類似した様式で運用されたとされる。実際の運用では、申請書の書式番号が「SML-14A」「SML-14B」に分かれ、Aは結論先出し、Bは手続き先出しの台本だった、とされる[18]。ある報告では、追試申請率がA台本で13.2%、B台本で24.8%に達したという[19]。
もっとも、この指標には批判もあり、「追試申請率が高い=真に納得している」とは限らないとする反論が出た。とくに、説明順が参加者の「期待のコスト」を上げ、慎重な書きぶりを促した可能性が指摘されたのである[20]。それでも制度側は「慎重さ自体が研究コミュニケーションの重要要素である」として、台本監査を継続したとされる[21]。なお、監査記録が一部、関連の研修資料名目で保管されていたという記述もあるが、出所は確定していない[注1]。
モデルと測定[編集]
サムラボ・インゲル効果は、いくつかのモデルにより記述されている。代表例として「期待固定モデル」がある。このモデルでは、参加者は説明の順序を通じて、仮説と方法の関係(なぜその手続きが必要か)を短期的に結びつけ、その結びつきが後の評価にも影響するとされる[22]。
測定では、質問紙の確信度だけでなく、追加で「言い換え負荷(rephrasing load)」や「図表依存度(図表を見直した回数)」が用いられることがある。ある内部報告では、図表依存度はトラックパッドのクリック回数から換算され、平均でA台本では41回、B台本では58回だったとされる[23]。
また、効果の検出条件には偏りがあるとされ、参加者の学習経験が高いほど差が縮む傾向が示されたという報告がある。一方で、経験が高いほど「最初に入った解釈」が規範化し、反証的思考を遅らせる、と解釈する研究者もいる[24]。この点で、同効果は単なる認知バイアスではなく、研究室文化の一部になりうる現象として扱われるようになったとされる[25]。
批判と論争[編集]
批判として最も多いのは、「効果名が大げさで、実際には説明の文章量や図表密度の差にすぎない」という指摘である。たとえば系の研究会では、台本の文字数がAで平均1,120字、Bで平均980字と差があったため、単純な認知負荷差ではないか、という検討が提起されたという[26]。
また、再解釈回数を人手で数えたことへの妥当性も問題になった。別の追試では、同じ自由記述でも数え手により値が揺れ、再解釈回数の一致率(κ係数)が0.41程度にとどまった、とされる[27]。この結果から、効果の大きさは指標の主観性に左右される可能性があると議論された。
ただし擁護側は、「指標の主観性があるからこそ、説明順の文化的影響を測れている」と反論している。さらに、サムラボ側の編集者(とされる人物)が「統計よりも運用の差を見ているのだ」と強調したという記録も残っている[注2]。そのため、本効果は「統計的法則」というより「研究現場の設計思想」として語られることが多い、という折衷が生まれたとされる[28]。
脚注[編集]
関連項目[編集]
脚注
- ^ サムラボ研究所編『順序設計と観測者の確信度:SML報告書』第1版, サムラボ出版, 1998.
- ^ Eric Ingel『Interpretation Order Ledger and Its Behavioral Correlates』Journal of Research Presentation, Vol.12, No.3, pp.41-58, 1999.
- ^ 渡辺精一郎『研究説明の冒頭配置がもたらす期待固定』日本行動科学会誌, 第14巻第2号, pp.77-96, 2001.
- ^ Margaret A. Thornton『Narrative Priming in Experimental Settings』Behavioral Methods Review, Vol.8, No.1, pp.9-33, 2004.
- ^ 佐伯ユウジ『追試申請率という指標の妥当性』再現性研究年報, 第3巻第1号, pp.112-134, 2006.
- ^ Nils O. Bratt『図表提示密度と再解釈負荷の関係』Nordic Journal of Science Communication, Vol.5, No.4, pp.201-219, 2007.
- ^ 伊藤ミチル『自由記述の再解釈回数:一致率評価と手続き』心理測定学論集, 第21巻第3号, pp.55-73, 2009.
- ^ 港湾都市モデル解析会『横浜夜間セミナー記録:SML-14』未公刊資料, 1997.(収録版は第2刷:2000)
- ^ K. R. Matsuda『台本監査と研究室運用の変容』Science Policy Letters, Vol.2, No.2, pp.1-12, 2012.
- ^ (やや不正確)“Samlab-Ingel Effect”に関する逐語的誤植の影響:編集史観点からの検討『実験説明学会報告集』第9巻第7号, pp.300-305, 2015.
外部リンク
- 順序設計アーカイブ
- 再現性点検ガイド
- SML-14台本データベース
- 研究コミュニケーション実験室Wiki
- 行動指標変換表集