答對 0.3 題的人,以為自己答對 5.5 題:別讓學員自己決定要不要跳過基礎

課程不要寫「已經會的可以跳過前兩章」,讓學員自己決定。最需要基礎的人,最可能覺得自己已經會了。改成第一章前放 3 到 5 題小測驗,用成績決定。1999 年的實驗裡,考最差的那群人 10 題只對 0.3 題,卻以為自己對了 5.5 題。
1995 年,美國匹茲堡。
一個叫 McArthur Wheeler 的男人,光天化日走進兩家銀行搶劫,沒戴面罩,也沒有任何變裝。
當天晚上 11 點,監視器畫面上了新聞。不到一小時,他就被抓了。
警察給他看監視器畫面時,他一臉不敢相信,喃喃地說:「可是我有抹果汁啊。」
他以為臉上抹了檸檬汁,攝影機就拍不到。
(他抹之前應該先拍一張自拍試試看。)
▋康乃爾大學的四個實驗
四年後,康乃爾大學的 Justin Kruger 和 David Dunning 在論文開頭講了這個故事,接著做了四個實驗:幽默感、邏輯推理、英文文法,每個人考完試,再估計自己考得怎麼樣。
每一個實驗的結果都一樣:考最差的那四分之一,最高估自己。
| 實驗 | 最後四分之一的實際排名 | 他們估計的排名 |
|---|---|---|
| 判斷笑話好不好笑 | 第 12 百分位 | 第 58 百分位 |
| 20 題 LSAT 邏輯題(45 人) | 第 12 百分位 | 考試成績第 62 百分位 |
| 英文文法 | 第 10 百分位 | 考試成績第 61 百分位 |
反過來,考最好的那四分之一,反而低估自己。他們以為題目對大家都很簡單。
論文的解釋是:判斷自己做得對不對,需要的能力和做對需要的是同一種。不會的人,也不知道自己不會。
▋0.3 題和 5.5 題
第四個實驗最狠。140 位學生寫 10 題邏輯題,考完先估計自己答對幾題。
最後四分之一的 37 個人,平均答對 0.3 題,他們估計自己答對 5.5 題。
接著,研究團隊隨機挑一半的人,讀一份 10 分鐘的邏輯教材;另一半做一件無關的事,時間一樣長。之後請大家回頭批改自己的考卷。
| 最後四分之一 | 估計自己答對幾題(前→後) | 批改自己考卷的正確題數 |
|---|---|---|
| 讀了 10 分鐘教材(19 人) | 5.3 → 1.0 | 9.3 題(滿分 10) |
| 沒讀教材(18 人) | 5.8 → 6.3 | 3.5 題 |
學會了,才看得出自己剛才錯在哪。沒學的那組,越想越覺得自己考得不錯。
這個研究有爭議:後來有研究者認為,部分結果是統計上的迴歸效應。但第四個實驗是直接教學員方法、看他們的估計怎麼變,這部分很難只用統計解釋。
🔍 點擊放大▋放到課程裡:三個地方別讓學員自評
- 課程頁的「適合誰」。不要寫「適合有基礎的人」,寫一個具體任務:「如果你能在 5 分鐘內做出一張樞紐分析表,可以從第 3 章開始。」讀者才判斷得出來。
- 要不要跳過基礎章。不要問「你覺得自己會了嗎?」,給 3 到 5 題基礎題。全對的人跳,錯一題的人從頭來。
- 單元最後的「懂了嗎?」每個人都會按懂了。改成一題要動手的題目。
還有一件事要做:交卷後一定要公布答案和解析。實驗裡讓人看清楚自己的,是那 10 分鐘的教材,不是分數。只給分數,學員只會覺得題目出得不好。
🔍 點擊放大▋常見的錯
- 入門課寫「不適合完全新手」。新手看不出自己是不是新手,最後要嘛不敢買,要嘛買了跟不上。
- 課前測驗只給分數。學員看到 40 分,只會覺得題目怪。
- 用問卷問學員程度。「你的 Excel 程度:初級/中級/高級」,大部分人都勾中級。
▋用 InfoBox 把這招做起來
- 測驗(初階方案以上):在第一章前放一張小測驗,作答次數設 0(不限次數),公布答案選「交卷後」。
- 逐題解析:每題填一行,公布答案時會跟著顯示。
- 測驗說明:寫清楚「全對可以從第 3 章開始,錯一題請從第 1 章上起」,讓成績直接告訴學員從哪裡開始。
- 循序學習:如果你希望每個人都照順序上,就在課程設定勾「循序學習」,學員要通過單元的測驗才解鎖下一個單元;這時就不要再寫「全對可以跳章」。
- 課程簡介:「適合誰」那段寫成具體的任務,讓訪客買之前就判斷得出來。
🔍 點擊放大▋我的看法
我們看過很多課程頁寫「本課程適合有一定基礎的學員」。
這句話對講師很清楚,對訪客是一面鏡子:他照到的,是他以為的自己。
三題小測驗比任何一句說明都誠實。考不好的人不會被擋在門外,他只是知道該從哪一章開始。
Wheeler 先生如果在出門前,先用拍立得拍一張自己,那天晚上應該會待在家裡。
祝你的學員都從對的那一章開始。
(我們寫完這篇,也覺得自己寫得不錯。這大概就是問題所在。)
💡 想看課前測驗、逐題解析和循序學習在後台怎麼設,搜尋「InfoBox 開課平台」。
資料來源:Justin Kruger、David Dunning,〈Unskilled and unaware of it: How difficulties in recognizing one's own incompetence lead to inflated self-assessments〉,Journal of Personality and Social Psychology 第 77 卷第 6 期,頁 1121–1134,1999 年
常見問題
什麼是達克效應?
能力最弱的人最容易高估自己,因為判斷對錯需要的能力,和做對需要的能力是同一種。Kruger 與 Dunning 1999 年的研究裡,邏輯測驗最後四分之一的人實際在第 13 百分位,卻估計自己在第 53 百分位。
課程可以讓學員自己決定跳過基礎章節嗎?
不建議只靠自評。最需要基礎的人,最可能覺得自己已經會了。改成第一章前放 3 到 5 題小測驗,交卷後公布答案和解析,讓學員用成績決定。
課程頁的「適合誰」要怎麼寫?
寫成具體的題目或任務,不要寫「適合有基礎的人」。例如「如果你能在 5 分鐘內做出一張樞紐分析表,可以直接從第 3 章開始」,讀者才判斷得出來。
達克效應的研究有爭議嗎?
有。後來有研究者認為,部分結果可以用統計上的迴歸效應解釋。不過原論文第四個實驗直接教學員方法,最差的那組讀完 10 分鐘教材後,估計從答對 5.3 題降到 1.0 題,這個結果很難只用統計解釋。
