Оригінальний дизайн дослідження 1999 року
Даннінг і Крюгер протестували студентів Корнелю на трьох різних навичках, які залежать від судження: логічне мислення, граматика англійської мови та гумор (оцінюючи смішність серії жартів порівняно з оцінками професійних коміків). Після завершення кожного тесту учасників просили оцінити дві речі: свій ранець у порівнянні з іншими учасниками, а також своє відсоткове положення відносно всіх, хто склав тест. Дослідники сортували учасників на чверті за їхньою фактичною, об'єктивно оціненою результативністю тесту, від найнижчої чверті (25% найнижчого балу) до верхньої чверті (25% найвищого балу), і порівнювали фактичне відсоткове положення кожної чверті з середнім оціненим відсотковим положенням тієї ж групи. Цей дизайн був ключовим методологічним кроком: замість того, щоб запитувати, чи люди переоцінюють себе в цілому, він дозволив дослідникам побачити, як розмір і напрямок помилкової оцінки змінювалися залежно від реального рівня їхньої майстерності.
Числові заголовки: Плоский лінія впевненості проти зростаючої лінії навичок
Результати показали дуже послідовну закономірність у всіх трьох завданнях. Учасники, які посіли нижній квартиль за фактичною продуктивністю – тобто випередили лише близько 25% найкращих тестувальників – все одно в середньому оцінювали, що вони випередили приблизно 60% своїх колег, розміщуючи себе на 60-му процентилі, незважаючи на те, що насправді займали 12-те місце. Учасники верхнього квартилю показали протилежну помилку, але меншу: незважаючи на те, що вони справді випередили від 85 до 90% групи, вони оцінювали свій процентиль лише близько 70-75%, тобто люди з високими навичками трохи недооцінювали своє реальне положення. Якщо відобразити це графічно, з фактичним квартилем тесту на горизонтальній осі та оцінкою процентиля на вертикальній осі, справжня здатність різко зростає від лівого краю до правого, як очікується, а самооцінена здатність майже не змінюється, коливається десь у межах 60-70% незалежно від того, чи були вони справді в нижній або верхній групі. Дві лінії перетинаються посередині діаграми, що є візуальним сигналом, який люди зазвичай мають на увазі, коли згадують ефект Даннінга-Крюгера.
Метакогніція та подвійне тягар некомпетентності
Даннінг і Крюгер пояснили цей закономірність, використовуючи концепцію метакогніції – здатність відійти назад і оцінити якість власного мислення чи продуктивності, а не просто виробляти це мислення чи продуктивність. Їхня центральна теза полягала в тому, що метакогнітивне судження у певній галузі базується на значно тих же знаннях і навичках, що й компетентна діяльність у цій самій галузі. Щоб розпізнати логічно невірний аргумент як невірний, потрібна така ж здатність до міркування, яка необхідна для побудови вірного аргументу; щоб знати, що речення порушує граматичне правило, потрібні значно ті ж граматичні знання, які необхідні для правильного письма; щоб оцінити жарт як невигадливий за експертними стандартами, потрібно щось на зразок того ж відчуття комічного часу, яке використовують хороші жартівники. Це створює «подвійне тягар» для низькокваліфікованих виконавців: вони не мають базової навички, і ця сама відсутність навички зазвичай дозволяє їм помітити прогалину. Результат полягає не в нечесності чи звичайній самовдоволеності, а в справій нездатності виявляти власні помилки, оскільки внутрішній сигнал, який зазвичай сигналізував би про помилку, ніколи не спрацьовує.
Чому кваліфіковані люди трохи недооцінюють себе
Менший, протилежний помилок серед видатних виконавців має інше пояснення, і Даннінг та Крюгер розглядали його як окреме явище, а не як дзеркальне відображення першого. Дуже компетентні люди схильні вважати завдання легким саме тому, що вони добре в ньому розбираються, і часто помилково припускають, що якщо для них це завдання здається простим, то воно має здаватися аналогічно простим більшості інших людей також, закономірність, яка іноді описується як ефект хибного консенсусу. Їхні помилки не стосуються невміння розпізнавати власну компетентність у відносних термінах, а невміння оцінити наскільки рідкіснішою вона є порівняно з усіма іншими. У подальшій частині оригінального дослідження, коли видатні виконавці отримали можливість побачити приклади того, як інші учасники справді виконували завдання, їхні самооцінки наблизилися до точних показників, оскільки бачення конкретних порівняльних пунктів забезпечило відсутню ними інформацію для калібрування, яку їх інтуїція не враховувала. Люди з низьким рівнем навичок, навпаки, показали значно менше коригування навіть після перегляду роботи інших, що узгоджується з ідеєю про те, що їхня проблема полягала не у відсутності інформації, а в відсутності здатності її інтерпретувати.
Реплікація, Статистична Критика та Практичні Наслідки
Основний патерн – переоцінка нижніми виконавцями та помірне недооцінювання верхніми – був відтворений у багатьох сферах з 1999 року, включаючи навички дебатів, здатність грати в шахи, медичні судження та оцінки роботи на місці. Однак цей ефект також отримав серйозну статистичну критику. Оскільки результати тестів і ранжування мають обмежені межі (неможливо отримати менше 0 відсотків або більше 100 відсотків), чистого регресу до середнього значення, поєднаного з шумом вимірювань, математично буде підштовхувати оцінки низькопорогових осіб вгору до середини та високих – вниз, навіть якщо ніхто не має жодного реального психологічного упередження. Деякі дослідники показали, що симульовані дані, згенеровані повністю випадковими самооцінками, без будь-якого фактичного метакогнітивного дефіциту, можуть відтворити дуже схожий малюнок лише завдяки цій статистичній структурі. Це не означає, що психологічна історія неправильна, але це означає, що плоска проти підйомної кривої сама по собі недостатньо доводить метакогністичний механізм і потрібен сильніший доказ з дизайнів, які відокремлюють статистичні артефакти від справжнього самоусвідомлення, наприклад, вимірювання одного й того ж набору людей щодо їх калібрування в повторних, незалежних завданнях. Практично, найбезпечніший урок, який можна винести – це не народна версія, що некомпетентні люди завжди найбільш впевнені, а вужча і більш корисна: самооцінка є найменш надійною саме там, де експертиза найслабша, тому системи зворотного зв’язку, рецензування колегами та навчання навичкам вигідніють від включення зовнішніх, об'єктивних контрольних точок замість того, щоб покладатися на людей, хоч як щиро, для точної оцінки власної продуктивності зсередини.
Часті запитання
Що означає ефект Даннінга-Крюгера, якщо необладнані люди завжди вважають себе найкращими?
Ні. Оригінальні дані показали, що учасники нижньої чверті оцінювали себе приблизно на 60-му процентилі в середньому, значно вище їхнього справжнього положення близько до 12-го процентилю, але це суттєво завищений показник, який потрапляє в середину групи, а не твердження про те, що вони найкращі. Популярна версія ефекту, часто зображена як крива впевненості, яка досягає піку рано та потім падає, є пізнішим інтернетом спрощенням і не відповідала формі даних, яку повідомляли Крюгер і Даннінг.
Чи є ефект Даннінга-Крюгера просто іншим ім’ям для перебільшеної впевненості?
Ні, не зовсім. Загальна перебільшена впевненість передбачає, що більшість людей переоцінюють себе приблизно однаковими сумами незалежно від реального рівня навичок. Конкретний висновок 1999 року полягає в тому, що розмір і навіть напрямок помилкової оцінки залежать від справжньої компетентності, з великою переоцінкою на нижньому рівні та невеликою недооцінкою на верхньому, що є більш специфічним шаблоном, ніж загальна перебільшена впевненість.
Чи говорить статистичний критик про те, що ефект є фальшивим?
Критика стверджує, що деякі (але не обов’язково всі) з класичної графіки «плоска проти підйомна» можуть бути отримані математикою порівняння обмежених, шумливих показників процентилів у поєднанні з регресією до середнього значення навіть без будь-якої реальної психологічної дефіциту в самоусвідомленні. Це легітимний методологічний застереження, а не доказ того, що основне явище не існує, і воно підштовхнуло подальші дослідження до дизайнів, які можуть відрізнити справжню метакогнітивну невміння від статистичного артефакту.
Чи може навчання покращити точність самооцінки людини?
Оригінальне дослідження показало, що надання низькопродуктивним виконавцям чіткого навчання в самій навичці, наприклад, короткий урок логічного мислення, покращує як їхню фактичну результативність тесту, так і точність їхніх самооцінок після цього. Це підтримує думку, що відсутній інгредієнт був саме компетентність, а не постійна особистісна риса, оскільки навчання навичці також відновило деяку здатність оцінювати її.
Чи поширюється ефект однаково на всі види навичок?
Реплікації виявили закономірність найнадійніше в навичках, що передбачають судження щодо чіткого стандарту правильності, таких як логіка, граматика та технічні знання, і вона менш послідовно зустрічається в областях з розмитими стандартами або там, де людям часто надається невід'ємний зворотній зв’язок щодо їхньої продуктивності, наприклад, у багатьох фізичних чи спортивних навичках.
Спробуйте наживо
Усе, що вище, працює прямо у вашому браузері — відкрийте The Dunning-Kruger Effect: Why Low Skill Can Hide Its Own Existence і змінюйте параметри під час роботи. Нічого не встановлюється, нічого не завантажується на сервер, уся модель живе в одній вкладці.
▶ Відкрити симуляцію The Dunning-Kruger Effect: Why Low Skill Can Hide Its Own Existence