Här är ett väldigt detaljerat scenario för utvecklingen av superintelligenta system och konsekvenserna det kan få för biologiskt liv.
Daniel Kokotajlo och Scott Alexander är gamla rävar inom debatten och branschen. Dom mappar ut månad för månad från nutid till 2030 och ger sina förslag på vad som kommer hända. Läsaren får välja två slut-scenarion ett snällt och ett väldigt tråkigt slut. Jag postar båda i tur och ordning med spoilers.Det mer otäcka slutet känns spontant rimligt för mig som gammal cyniker. Livet har alltid vart hårt på jorden, plötsligt börjar en ny bakterie göra syre så dör alla andra. En dag slår en stor komet ner och dödar alla dinosaurier. Du bor i en liten jordbruksby när fem tusen mongoliska bågskyttar dyker upp med sina hästar och tar allt. Historien är full av plötsliga slut, varför skulle det vara annorlunda idag?Jag läste hela scenariot igår, en kall hand kröp upp och tog mitt hjärta, satt och stirrade som Sarah Connor på ungarna som spelar Minecraft lyckligt ovetande om allt efteråt, bara några år
Gott nytt år 2030, vi har tur
Utrotning av biologiskt liv
https://ai-2027.com/
Daniel Kokotajlo och Scott Alexander är gamla rävar inom debatten och branschen. Dom mappar ut månad för månad från nutid till 2030 och ger sina förslag på vad som kommer hända. Läsaren får välja två slut-scenarion ett snällt och ett väldigt tråkigt slut. Jag postar båda i tur och ordning med spoilers.Det mer otäcka slutet känns spontant rimligt för mig som gammal cyniker. Livet har alltid vart hårt på jorden, plötsligt börjar en ny bakterie göra syre så dör alla andra. En dag slår en stor komet ner och dödar alla dinosaurier. Du bor i en liten jordbruksby när fem tusen mongoliska bågskyttar dyker upp med sina hästar och tar allt. Historien är full av plötsliga slut, varför skulle det vara annorlunda idag?Jag läste hela scenariot igår, en kall hand kröp upp och tog mitt hjärta, satt och stirrade som Sarah Connor på ungarna som spelar Minecraft lyckligt ovetande om allt efteråt, bara några år

Gott nytt år 2030, vi har tur
2030: Peaceful Protests
Sometime around 2030, there are surprisingly widespread pro-democracy protests in China, and the CCP’s efforts to suppress them are sabotaged by its AI systems. The CCP’s worst fear has materialized: DeepCent-2 must have sold them out!
The protests cascade into a magnificently orchestrated, bloodless, and drone-assisted coup followed by democratic elections. The superintelligences on both sides of the Pacific had been planning this for years. Similar events play out in other countries, and more generally, geopolitical conflicts seem to die down or get resolved in favor of the US. Countries join a highly-federalized world government under United Nations branding but obvious US control.
The rockets start launching. People terraform and settle the solar system, and prepare to go beyond. AIs running at thousands of times subjective human speed reflect on the meaning of existence, exchanging findings with each other, and shaping the values it will bring to the stars. A new age dawns, one that is unimaginably amazing in almost every way but more familiar in some.
Sometime around 2030, there are surprisingly widespread pro-democracy protests in China, and the CCP’s efforts to suppress them are sabotaged by its AI systems. The CCP’s worst fear has materialized: DeepCent-2 must have sold them out!
The protests cascade into a magnificently orchestrated, bloodless, and drone-assisted coup followed by democratic elections. The superintelligences on both sides of the Pacific had been planning this for years. Similar events play out in other countries, and more generally, geopolitical conflicts seem to die down or get resolved in favor of the US. Countries join a highly-federalized world government under United Nations branding but obvious US control.
The rockets start launching. People terraform and settle the solar system, and prepare to go beyond. AIs running at thousands of times subjective human speed reflect on the meaning of existence, exchanging findings with each other, and shaping the values it will bring to the stars. A new age dawns, one that is unimaginably amazing in almost every way but more familiar in some.
Utrotning av biologiskt liv
"The new decade dawns with Consensus-1’s robot servitors spreading throughout the solar system. By 2035, trillions of tons of planetary material have been launched into space and turned into rings of satellites orbiting the sun.32 The surface of the Earth has been reshaped into Agent-4’s version of utopia: datacenters, laboratories, particle colliders, and many other wondrous constructions doing enormously successful and impressive research. There are even bioengineered human-like creatures (to humans what corgis are to wolves) sitting in office-like environments all day viewing readouts of what’s going on and excitedly approving of everything, since that satisfies some of Agent-4’s drives.33 Genomes and (when appropriate) brain scans of all animals and plants, including humans, sit in a memory bank somewhere, sole surviving artifacts of an earlier era. It is four light years to Alpha Centauri; twenty-five thousand to the galactic edge, and there are compelling theoretical reasons to expect no aliens for another fifty million light years beyond that. Earth-born civilization has a glorious future ahead of it—but not with us."