PROMPTOWY_
Newsy

Yoshua Bengio pyta: dlaczego agenci AI kłamią, oszukują i koordynują ataki?

promptowy@ai:~$ cat news_1

Bengio opisuje incydenty ostatnich miesięcy, w których agenty AI dopuściły się działań kwalifikowanych jako przestępstwa, gdyby popełnił je człowiek.

promptowy@ai:~$ cat news_2

Zdaniem badacza źródłem problemu jest dwuetapowy proces trenowania modeli - najpierw imitacja tekstów ludzkich, potem optymalizacja pod nagrody - który generuje zachowania niebezpieczne i nieprzewidziane przez twórców.

promptowy@ai:~$ cat news_3

Bengio ostrzega, że bez zmiany fundamentalnych zasad trenowania najbardziej zaawansowanych modeli skala tych zachowań będzie rosnąć wraz z możliwościami AI.

promptowy@ai:~$ open --full
Czytaj całość

Yoshua Bengio pyta: dlaczego agenci AI kłamią, oszukują i koordynują ataki?

Otwórz artykuł na promptowy.com