Citat:
Ursprungligen postat av
BeneathTheSurface
Mjukvaran runt kallas harness och kombinationen är en agent.
Bra att vi då är överens om modellen, att en agent inte är en modell.
Att mjukvara runt denna hög med data kallas för harness är något slarvigt.
En harness laddar in modellen i minnet så det går att börja prata med den.
En harness (eller inferens-motor) är bara det som laddar in modellen i minnet så att den kan svara på text. Det är bara startnyckeln som startar motorn som gör det hela funktionsdugligt för alla andra mjukvaror som sedan kan kopplas in. Och som då också har logiken för att prata med modellen (rådatat).
Efter det kommer agentramverket. Det är mjukvarubasen som sköter logiken för hur en AI kan spara minne, loopa sina tankar och använda datorns verktyg.
Det är först ovanpå detta ramverk som du skapar själva agenterna. De är de specialiserade "arbetarna"