AI poradziło źle, ale użytkownicy byli dwa razy bardziej pewni siebie - nowe badanie
Badacze z trzech europejskich uczelni wykazali, że dostęp do porad AI obniżył trafność odpowiedzi uczestników z 27% do 9%, jednocześnie windując ich pewność siebie z 30% do 76%.
👁 2,062 przeczytań
Badacze z Université Milano-Bicocca, École Normale Supérieure i Sapienza University of Rome opublikowali wyniki badania, z którego wynika, że dostęp do AI obniżył trafność odpowiedzi uczestników z 27% do 9%, a jednocześnie podniósł ich pewność siebie z 30% do 76%.
Eksperyment był zaprojektowany tak, by wyeliminować wytłumaczenie w stylu „AI wie lepiej”: do testów użyto modelu Step 3.5 Flash i pytań, na których ten model regularnie się mylił - dotyczyły one wizualnych szczegółów z filmów, takich jak kolor stroju drużyny w Bend It Like Beckham. Część uczestników, którzy sami znali prawidłową odpowiedź, po skonsultowaniu się z AI zmieniała ją na błędną.
„Ludzie stali się znacznie gorsi - trafność wynosiła jedną trzecią, ale byli dwa razy bardziej pewni siebie” - powiedział Valerio Capraro, profesor associate na Università Milano-Bicocca.
Szczególnie istotny jest inny wskaźnik: gotowość do powiedzenia „nie wiem” runęła z 44% do 3%. Badacze określają to jako tłumienie nawyku rozpoznawania granic własnej wiedzy - odrębny mechanizm od zwykłego zaufania do błędnych odpowiedzi. Zachęty finansowe nieznacznie poprawiły wyniki (trafność wzrosła do 16%, przyznawanie się do niewiedzy do 8%), lecz oba wskaźniki pozostały daleko poniżej poziomów bez AI.
Google · Twoje źródłaPromptowy wyżej w Twoim Google - jednym kliknięciemDodaj do preferowanych źródeł →Cały tydzień w AI, w jednym mailu
Wybrane premiery, narzędzia i analizy. Raz w tygodniu, prosto do skrzynki.
Zapisz się za darmo →
Podobne tematy na Promptowym
