Citat:
Ursprungligen postat av
Xenonen
Grundantagandet här är att AI:n är mycket smartare än en människa.
Ja och det är det som är problemet för vi är inte ens i närheten av det, vi har inte ens AI som med intelligens i nivå med en råtta eller katt. Och det enda som får folk att tro annat är stora språkmodeller eftersom de snorihop meningar som låter rimliga men de har brister som att de vet inte vad de faktiskt skriver,
de har problem med reversering av meningar som det klassiska exemplet som (OpenAIs) Andrej Karpathy demonstrerar i sin video han släppte iförrgår att- om du frågar GPT-4 vem som är Tom Cruise mamma så kan den svara på det- Mary Lee Pfeiffer, men den kan inte svara på om du frågar vem frågar vem Mary Lee Pfeiffer son är.
Karpatys video:
https://www.youtube.com/watch?v=zjkBMFhNj_g&t=762s
Det finns också demonstrerat och beskrivit här och har inte med GPT-4 i sig att göra utan språkmodellerna är oförmögna att göra A=B B=A associeringar.
https://arxiv.org/abs/2309.12288
Och det absolut största problemet som man fortfarande inte löst (men försökt jobba runt genom att lägga på fler lager som verifierar vad de spottar ur sig) är att de inte vet när de har rätt eller fel, när de talar fakta eller när de spottar ur sig påhittad/genererad information.
Det har man försökt lösa sedan språkmodeller introducerades och fortfarande inte har en lösning på. Det går göra en lång lista och det är ganska uppenbart för de flesta forskare att språkmodeller i sig inte kommer nå dit man vill.
Och vad som fattas tills man når dit vet man inte fortfarande, OpenAI vill gärna ge sken av att de är det absoluta toppskiktet inom forskningen men det är inte sant, de råkar bara fokusera på en marknad ingen annan gör just nu (vilket kommer ändras väldigt snart och därför är de än mer benägna att försöka framställa hur kraftig just deras teknik är).