Citat:
Ursprungligen postat av
Cyborg2030
Vilken information saknas för att högre intelligens ska vara möjligt? Intelligens är väl snarare att kunna kombinera information än att ha väldigt mycket information. Ett IQ-test innehåller ganska lite information. Det är kluriga problem med så lite information som möjligt.
Du tränar din LLM på indata och utdata där du säger till träningsalgoritmen att generera utdata som stämmer med det du tillhandahåller.
Och är det IQ 70 data så kommer den tränas att leverera IQ 70 utdata.
Skulle den under träningen leverera IQ 80 data kommer det ses som något "fel" och tränas bort, så att genererat utdata stämmer med det önskade utdatat.
Du kan inte träna en LLM till att bli "smartare" än det data du tränar den med.