Come scrive un modello linguistico

I pesi sono congelati e nulla viene ricordato. Muovi i cursori e guarda il modello scegliere il pezzo di testo successivo, una volta dopo l'altra.

Temperatura 1.00
Top-P 0.90

Tocca una parte dello schema per aprire il passo.

Tutto il ciclo

Stringa → pezzi → collegamenti ai pezzi precedenti → strati congelati → probabilità → taglio della coda e sorteggio → il pezzo è aggiunto. E poi da capo. Mentre un modello viene usato non succede altro.

Che cosa contiene

  1. 1 Contesto e pezzi — La finestra è finita. Quando si riempie la generazione si ferma: fuori da lì il modello non tiene nulla.
  2. 2 Attenzione al contesto — I collegamenti si ricalcolano da zero a ogni passo: un pezzo in più e tutto il disegno cambia.
  3. 3 Pesi congelati — Addestrare cambia i pesi, usare no. Sono due modi diversi della stessa rete.
  4. 4 Probabilità, temperatura e Top-P — Muovi entrambi i cursori e guarda « banane»: è il prezzo di una temperatura alta e di un Top-P vicino a uno.
  5. 5 Il ciclo di generazione — Il modello non scrive una frase. Fa un passo, poi un altro, e non fa altro.
Leggi tutto Sulla dipendenza dall'IA: perché il fratello maggiore si è rivelato il minore Come i dialoghi sinceri con l'IA sono diventati un regalo per le grandi aziende e perché il pensiero deve restare alla persona mentre la routine va al modello.

Spiegazioni interattive

Temperatura 1.00
Top-P 0.90
1 / 5