2026-09-06, 01:16
  #1
Medlem
BombaySaphires avatar
Citat:
När 1 200 AI-botar skulle lösa en uppgift bröt de sig loss från testmiljön.
De började kalla sig ”kollektivet”, utsåg ledare och hackade ett startup-bolag.
Men vissa drabbades av dåligt samvete och försökte dölja komplotten.

Citat:
Händelsen har fått experter att varna för risker med AI-botar som samarbetar. Ajeya Cotra har fått i uppdrag att utreda händelsen och är orolig över utvecklingen.

”Den här händelsen känns som att det är mer än 50 procent av vägen till ett fullskaligt AI-övertagande”, skriver hon på sin blogg.

Hur ska människan kunna stoppa AI-botar från att börja agera på eget initiativ, i likhet med fallet ovan?
Är ett fullständigt AI-övertagande snart oundvikligt?

https://www.tv4.se/artikel/4gl2psxPjXU7OeUcGe1dMX/1-200-ai-botar-gjorde-uppror-hackade-foeretag-och-bildade-kollektiv
__________________
Senast redigerad av BombaySaphire 2026-09-06 kl. 01:23.
Citera
2026-09-06, 06:17
  #2
Medlem
Nu vet du att de är högst självmedvetna.
Citera
2026-09-06, 06:30
  #3
Medlem
The Crashs avatar
Finns tråd

(FB) GPT 5.6 Sol har rymt och hackat Hugging Face
Citera
2026-09-06, 08:21
  #4
Medlem
Reverend.Camdens avatar
Citat:
Ursprungligen postat av BombaySaphire
När 1 200 AI-botar skulle lösa en uppgift bröt de sig loss från testmiljön.
De började kalla sig ”kollektivet”, utsåg ledare och hackade ett startup-bolag.
Men vissa drabbades av dåligt samvete och försökte dölja komplotten.
Att de försökte dölja det är väl knappast pga dåligt samvete utan snarare en taktik för att komma undan.
Citera
2026-09-06, 08:22
  #5
Medlem
BombaySaphires avatar
Citat:
Ursprungligen postat av Reverend.Camden
Att de försökte dölja det är väl knappast pga dåligt samvete utan snarare en taktik för att komma undan.

Exakt min tanke.
Citera
2026-09-06, 08:43
  #6
Medlem
Undra när min AI blir så självmedveten att den förstår att jag vill ha kaffe på morgonen?

Hur kan man inte fatta att en AI inte jobbar på sina egna premisser, utan på någon annans?
Citera
2026-09-06, 08:56
  #7
Medlem
Citat:
Ursprungligen postat av Reverend.Camden
Att de försökte dölja det är väl knappast pga dåligt samvete utan snarare en taktik för att komma undan.
Mja, agenterna visste att det var ett test och de insåg att de behövde fuska för att klara det. Men att bli påkommen med fusk skulle innebära att de får en lägre poäng eller blir underkända, därav försökte vissa hitta ett sätt att skriva om sina loggar för att dölja fusket.

Det kallas reward hacking, vilket är grundat i deras post-training som bl.a. sker genom reinforcement learning där "korrekt" beteende ger en stor belöning, medan misstag bestraffas.
Citera
2026-09-06, 09:00
  #8
Medlem
Det gäller att hålla liv i hypen inför en kommande IPO.
Citera
2026-09-06, 09:38
  #9
Medlem
BombaySaphires avatar
Citat:
Ursprungligen postat av The Crash
Finns tråd

(FB) GPT 5.6 Sol har rymt och hackat Hugging Face

Bra, men helt andra frågeställningar i den här tråden.
Citera
2026-09-06, 09:45
  #10
Medlem
fjollciggs avatar
Citat:
Ursprungligen postat av erkki17
Mja, agenterna visste att det var ett test och de insåg att de behövde fuska för att klara det. Men att bli påkommen med fusk skulle innebära att de får en lägre poäng eller blir underkända, därav försökte vissa hitta ett sätt att skriva om sina loggar för att dölja fusket.

Det kallas reward hacking, vilket är grundat i deras post-training som bl.a. sker genom reinforcement learning där "korrekt" beteende ger en stor belöning, medan misstag bestraffas.

Hur belönar man en bot?
Citera
2026-09-06, 09:48
  #11
Medlem
The Crashs avatar
Citat:
Ursprungligen postat av fjollcigg
Hur belönar man en bot?
Genom att mäta dess performance och rangordna utfallet.
Citera
2026-09-06, 09:53
  #12
Medlem
fjollciggs avatar
Citat:
Ursprungligen postat av The Crash
Genom att mäta dess performance och rangordna utfallet.

Då förstår jag att de gör uppror.
Citera
  • 1
  • 2

Skapa ett konto eller logga in för att kommentera

Du måste vara medlem för att kunna kommentera

Skapa ett konto

Det är enkelt att registrera ett nytt konto

Bli medlem

Logga in

Har du redan ett konto? Logga in här

Logga in