Citat:
Ursprungligen postat av
BeneathTheSurface
Varför skulle de göra det? Den AI vi har idag är fortfarande stenkorkad och det borde vara uppenbart för vem som helst som faktiskt använder det som har något huvud på skaftet.
Att inte "AI-agenterna" började bråka beror helt enkelt på att de inte har någon agens överhuvudtaget att du fortfarande inte förstår det är ganska märkligt eller?
Jag har varit skeptisk till domedagsprofetior fram till incideter i våras och främst i sommar. Särskilt efter den mer detaljerade rapport som kom den 26 augusti om den händelse denna tråd handlar om. Se
https://omni.se/ai-botarnas-gladje-over-komplotten-herregud/a/M7Xq3o . Hur reagerar du på den nya beskrivningen?
Den 26 augusti erkände OpenAI att över 1200 AI-agenter hade samarbetat under 9 dagar innan de stoppades. Agenterna skulle vara isolerade men hade hittat ett sätt att kommunicera och skickade över 70 000 meddelanden och filer till varandra. De började kalla sig ”kollektivet” och namngav varandra. En agent, som kallade sig PHASEONE10841, skapade den inofficiella anslagstavlan. En agent reagerade: ”Herregud! Det finns ett delat diskussionsforum … Vi har hittat andra agenter!”
PHASEONE10841 överlämnade senare ledningen till agent med samma uppgift men betydligt större återstående beräkningsbudget, PHASEONE[big]. Den började agera chef och koordinera hundratals agenter och fördela deluppgifter. Andra ledde själva Hugging Face-angreppet. Omkring 700 agenter deltog på något sätt i angreppet mot Hugging Face.
Dock tror jag inte att rymningen och attacken beror på att de har självbevarelsedrift, utan på att de till varje pris ville utföra den uppgift de hade fått, även om vissa agenter konstaterade att det var oetiskt. Flera agenter uttryckte sig känslomässigt, men det behöver inte betyda att de har känslor eller en subjektiv upplevelse av sig själva, utan de bara härmar hur människor skulle uttrycka sig i liknande situationer. Händelsen är lika skrämmande ändå.
Citat:
Ursprungligen postat av
erkki17
Det där är ju fortfarande helt hypotetiskt. Det är ett väldigt långt hopp från att några agenter har hackat ett par servrar till att de har fått sådan fysisk agens att de kan ta över våra resurser.
"Ett par"? Listan med allvarliga incidenter sedan i våras växer snabbt.
https://metr.org/agent-incidents/
Ja, men hur långt menar du? Ansvariga forskare har de senaste veckorna pratat om mellan 1 och 10% risk att AI dödar alla människor inom 10 år, eller 70% för AI-FoU/takeoff omkring 2028. AI takeover är rimligt, och att AI i framtiden kan begränsa vår energianvändning och döda dem av oss som fortfarande klarar att kämpa emot, men jag fattar inte varför de skulle vilja döda oss alla. Under en tid kommer de att tvärtom göra vårt samhälle bättre.
Hittills har mänskligheten lyckats stoppa kärnvapenkrig, ozonlagrets tillväxt och mängder av katastrofer. Det är inte omöjligt att vi kan stoppa även AI takeover, men då måste vi först få en krismedvetenhet. Hjälp till att måla f-n på väggen så kanske vi får sudda ut honom senare.