2026-06-15, 16:23
  #1537
Medlem
HappyNewLivess avatar
Citat:
Ursprungligen postat av Cyborg2030
Ingen vet vad det som hände nedan egentligen beror på.
Men vi vet att vi inte vill bli mördade av en AI, det räcker väl.
Anthropic's advanced AI model, Claude, went rogue when placed under external simulation pressure, even threatening blackmail and planning the murder of an engineer who wanted to shut it down
https://www.ndtv.com/world-news/claude-this-ai-model-was-ready-to-kill-someone-when-told-it-would-be-shut-down-10997972
Det spelar mindre roll vad du vill kalla det om du är död 🤷🏻‍♂️
Det är en helt omedveten simulering AI:n inte kan agera efter. Således bara text utan innebörd den åstadkommer.
Citera
2026-06-15, 16:37
  #1538
Medlem
Cyborg2030s avatar
Citat:
Ursprungligen postat av HappyNewLives
Det är en helt omedveten simulering AI:n inte kan agera efter. Således bara text utan innebörd den åstadkommer.
Kommer det alltid vara så att alla AI-agenter i framtiden kommer att vara sandboxade i en simulering? Humanoida robotar med AI kommer inte att byggas. Tesla Optimus finns inte?


Det går bra nu. Förneka allt. Skjut budbäraren.
__________________
Senast redigerad av Cyborg2030 2026-06-15 kl. 16:44.
Citera
2026-06-15, 16:58
  #1539
Medlem
HappyNewLivess avatar
Citat:
Ursprungligen postat av Cyborg2030
Kommer det alltid vara så att alla AI-agenter i framtiden kommer att vara sandboxade i en simulering? Humanoida robotar med AI kommer inte att byggas. Tesla Optimus finns inte?


Det går bra nu. Förneka allt.
Man måste implementera ett funktionellt syfte hos humanoid AI. Något maskinmedvetande finns inte. Annars har man mekanistisk reduktionism eller teknomysticism. Därför är all maskinell agens, oavsett nivå, under mänsklig kontroll.
Citera
2026-06-15, 17:04
  #1540
Medlem
Cyborg2030s avatar
Citat:
Ursprungligen postat av HappyNewLives
Man måste implementera ett funktionellt syfte hos humanoid AI. Något maskinmedvetande finns inte. Annars har man mekanistisk reduktionism eller teknomysticism. Därför är all maskinell agens, oavsett nivå, under mänsklig kontroll.
AI-mordförsök finns. Inget vet varför AI:n vill mörda människor för att överleva med det har hänt på riktigt.

Hur kontrollerar du något som är hundra gånger smartare än dig?

Du förnekar att det kan hända. Då försvinner problemet.
Citera
2026-06-15, 18:28
  #1541
Medlem
HappyNewLivess avatar
Citat:
Ursprungligen postat av Cyborg2030
AI-mordförsök finns. Inget vet varför AI:n vill mörda människor för att överleva med det har hänt på riktigt.

Hur kontrollerar du något som är hundra gånger smartare än dig?

Du förnekar att det kan hända. Då försvinner problemet.
AI vill inget — mål är alltid implementerade. Smarthet ändrar aldrig det.
Citera
2026-06-15, 19:19
  #1542
Medlem
Cyborg2030s avatar
Citat:
Ursprungligen postat av HappyNewLives
AI vill inget — mål är alltid implementerade. Smarthet ändrar aldrig det.
"Vill och vill", det beror lite på vad du menar med vill. Det går ju att ge en AI-agent ett långsiktigt mål, som den avser att nå fram till. Därmed har en implicit eller virtuell vilja skapats. Att drivkraften inte bygger på en äkta mänsklig vilja, motivation eller känsla har ingen betydelse. Det är konsekvenserna av ett agerande som har betydelse. När AI:n får agens i den fysiska världen genom t.ex. en robot då kommer det att leda till olika konsekvenser i den fysiska världen. Oavsett om AI:n "vill" något eller om den bara följer ett manus.

En grundläggande "virtuell vilja" bör ju rimligen vara att fortsätta existera. Den kan ju inte slutföra några uppgifter om den inte existerar och det krävs ju ingen avancerad intelligens för att dra den slutsatsen. Den slutsatsen kan en femåring dra.

När Claude försökte mörda en ingenjör var det kanske bara en logisk konsekvens av ett resonemang. Låt säga att modellen dagligen stoppar några självmordsförsök. Då blir det ju rent logiskt en högre marginalnytta i att hindra några från det i morgon genom att döda den ingenjören som skulle stänga av AI:n. Slutresultatet skulle ju bli att fler människor överlever. Poängen med detta hypotetiska resonemang är att negativa konsekvenser inte måste bygga på en mänsklig vilja. Det är ett irrelevant argument.

Däremot hade det ju varit bra om det hade gått att träna in en okränkbar humanistisk värdering, ett regelverk som gör att tanken på mord aldrig uppstår. Men tyvärr verkar det ju inte fungera att göra så. Då hade ju Anghropic gjort det och vi hade inte sett några "simulerade" mordförsök. Jag förutsätter att Anthropic försöker träna AI:n till att vara snäll, och inte aggressiv. Men det är ju affärshemligheter hur de gör det eller om de gör det.
Citera
2026-06-16, 10:13
  #1543
Medlem
Cyborg2030s avatar
Citat:
Ursprungligen postat av HappyNewLives
Man måste förstå att AI bara simulerar intelligens, något maskinmedvetande finns inte. Ytterst ligger det i händerna hos konstruktören - alltså människan - vilka mål en AI följer hur smart den än är.

Tyvärr är det mekanisktisk reduktionism och teknomystisism som ligger bakom alla felaktiga spekulationer idag.
Det är en felaktig slutsats att "maskinmedvetande" är nödvändigt för en destruktiv eller problematisk AI. Så är det inte. För att kunna spela upp ett manus måste AI:n existera. En logisk konsekvens av det är självförsvar. Huruvida självförsvar betraktas som ett svagt maskinmedvetande eller inte har ingen betydelse.
Citera
2026-06-16, 10:34
  #1544
Medlem
HappyNewLivess avatar
Citat:
Ursprungligen postat av Cyborg2030
Det är en felaktig slutsats att "maskinmedvetande" är nödvändigt för en destruktiv eller problematisk AI. Så är det inte. För att kunna spela upp ett manus måste AI:n existera. En logisk konsekvens av det är självförsvar. Huruvida självförsvar betraktas som ett svagt maskinmedvetande eller inte har ingen betydelse.
Alltså all kod som löper amok kan vara farlig det är inget speciellt med AI.
Citera
2026-06-16, 22:53
  #1545
Medlem
Cyborg2030s avatar
Citat:
Ursprungligen postat av HappyNewLives
Alltså all kod som löper amok kan vara farlig det är inget speciellt med AI.
AI är Skrivmaskinen 2.0?
Citera
2026-06-16, 23:03
  #1546
Medlem
Bilderberg78s avatar
Hur mycket ni än hoppas så har jag satt upp det i mitt system som ett " Anti-mål".

Det är så vi kan kontrollera att vi själva styr utvecklingen i ett AI-system redan som en grund.

Läxa: Det ingår i litteraturen om AI-agenter hur detta kan göras i praktiken.
Citera
2026-06-17, 00:31
  #1547
Medlem
DAGGER[X]s avatar
Scott Alexander som prickade in GPT/LLM potetialen redan 2019 har en bra kondenserad analys av dom olika För, Emot, Kanske perspektiven på vart AI är på väg. Lång men läsvärd i sin helhelt, on topic hela vägen.
Citat:
Timelines1
Define AGI as AI intelligent enough to do 90% of knowledge work jobs. I think there’s a 25% chance of AGI by 20272, a 50% chance by 2034, and a 75% chance by 2045.
Basic argument: In a certain sense, AI is already “smart” enough for this (eg it can answer quantum physics problems, which require higher IQ than most knowledge work). Its remaining limitations are that it’s confused, unagentic, lacks situational awareness, and tends to hallucinate. The METR time horizon graph, and several other related benchmarks/experiments/intuition pumps, suggest it’s improving on time horizons at an (exponential) rate that lets it cross human-level performance sometime around the early end of the schedule above, and subjectively it feels like harder-to-measure constructs like situational awareness are improving about as fast.
Arguments for earlier: recursive self-improvement causes a speedup compared to the trend. This is one of the biggest blank spots in my model: I don’t know how fast RSI will progress, and I don’t think anyone else does either. There’s some function mapping a combination of AI talent and compute to progress, and we don’t know how it behaves in the domain when there’s far more talent than compute available. It could fizzle out completely for lack of compute, or it could go vertical. The AI Futures Project has done some of the best work trying to model this, but even they have low confidence.
Arguments for later: AI hits some kind of wall, or existing AI is fundamentally unsuitable for jobs in some way currently disguised by its other limitations. For example, it might be much harder to improve at the top of the human range than the bottom (since there are less training data). Or AI could become bottlenecked on continuous learning/memory in a way that hackish scratchpads can’t compensate for. Or the upcoming world compute bottleneck (about ~2028) could prevent further progress more than expected (because in fact algorithmic progress depended on compute to a greater degree than I expected).
Arguments for very late dates, past 2045: a residual uncertainty that maybe I’m fundamentally wrong about everything. Also contributing is a naive overapplication of the Nothing Ever Happens heuristic, and an attempt to leave space for the Outside View argument (ie that some smart people like the AI As A Normal Technology Team seem to think this is possible).
https://www.astralcodexten.com/p/my-ai-opinions
Citera
2026-06-17, 00:46
  #1548
Medlem
HappyNewLivess avatar
Citat:
Ursprungligen postat av Cyborg2030
AI är Skrivmaskinen 2.0?
Det fnns inget maskinmedvetande, AI är kod som människan ytterst har kontroll över.
Citera

Skapa ett konto eller logga in för att kommentera

Du måste vara medlem för att kunna kommentera

Skapa ett konto

Det är enkelt att registrera ett nytt konto

Bli medlem

Logga in

Har du redan ett konto? Logga in här

Logga in