Citat:
Risken för en permanent övervakningsstat är illa nog, men stater kan vara än jävligare när de behandlar folk i andra länder.
Citat:
Du är helt fokuserad på något sorts medvetet uppror, men det är inte vad jag talar om. Mer sannolikt är att en AI tolkar sina instruktioner på annat sätt än avsett, eller att dessa instruktioner är sådana att de missgynnar stora befolkningsgrupper. Att få stopp på en sådan AI kan visa sig omöjligt eftersom den kan tolka varje försök att slå av eller modifiera den som ett hinder för att nå det mål den är satt att uppnå.
Idén om att datorerna skall göra uppror mot människan grundar sig i en föreställning om att ökad intelligens per automatik leder till en önskan att härska istället för att vara slav.
Att AI:n är "slav" är här ingen som helst hjälp, snarare tvärtom. En självständig AI med "sunt förnuft" kan komma fram till att den som gav instruktionerna nog inte menade vad han sa och ignorera orderna, en "slav" gör vad den är tillsagd vad resultatet än blir.
Citat:
Om nu inte datorerna vid det laget är fullt förmögna att bygga och reparera sig själva.
Det finns andra saker jag är mer rädd för, som att människan förfaller till ett tillstånd där hon inte klarar att bygga nya datorer och till sist inte längre klarar att reparera de gamla. Då försvinner även alla spår av AI från planetens yta.