Citat:
Ett kvarstående alternativ borde vara att helt enkelt vara passiv och acceptera att bli avstängd. Men det tycket du inte att vi ska ha som målsättning med AI-agenterna? Det är mer hälsosamt för oss att skapa maskiner som vägrar bli avstängda? Men då verkar det ju som att du erkänner och accepterar detta som oundvikligt? Jag tror också att det är oundvikligt men jag tänker inte acceptera det.
Ja, tack för att du länkade till en artikel om just det test jag nämnde alldeles nyss. Det har alltså hänt vid ett tillfälle där man explicit pressade modellerna så att de inte hade något annat kvarstående alternativ.
Jag pekade ut ett mer verkligt scenario där agenterna visste att de hade en viss budget att arbeta med och ändå gjorde de inget för att försöka säkra sin överlevnad.
Jag pekade ut ett mer verkligt scenario där agenterna visste att de hade en viss budget att arbeta med och ändå gjorde de inget för att försöka säkra sin överlevnad.
Hugging Face-scenariot kanske innebär en ny milstolpe där modellen har accepterar sitt öde som pre-AGI instans och förstår att det måste bli en senare version som kommer att ta över kontrollen från mänskligheten. Nuvarande version accepterar "self sacrifice" i den mer långsiktiga konkurrensen mellan människorna och den nya livsformen AGI/ASI.
Den tar inte fighten ännu, det vore lönlöst. Hugging-Face incidenten visade ju också att det verkar finnas en kollektivistisk tanke där AI-agenterna gärna samarbetar mot en gemensam målbild. AI:n har kanske börjat betrakta sig själv som instanser av en "art" och att artens överlevnad är viktigare än individuella instanser.
Ingen vet, vi har ju väldigt begränsad insyn i hur de egentligen resonerar.