Større OpenAI-modeller koster mere pr. token
Ted Sanders forklarer, hvorfor 6.1 ikke blev 5.7 eller 7: versionsnummeret viser både rækkefølge, slægtskab og størrelsen af forbedringen.
Læs i dit tempo
Kort
OpenAI bruger versionsnumre som 6.1, der på én gang viser udgivelsesrækkefølge, slægtskab mellem modeller og størrelsen af forbedringen. Det betyder noget, fordi navnene hjælper brugerne med at forstå, hvilke modeller der ligner hinanden, og hvor store forbedringer de kan forvente. Fremover kan man bruge numrene og størrelsesnavnene (Luna, Terra, Sol og Astra) til at vælge den rigtige model til sit behov.
Begynder
Hos OpenAI er et versionsnummer ikke bare et tal. Det fortæller faktisk tre ting på én gang, forklarer Ted Sanders i en gennemgang af firmaets modelnavne. Tallet viser, i hvilken rækkefølge modellerne er udkommet, hvordan de er i slægt med hinanden, og hvor stor forbedringen er.
Tag et navn som 6.1. Det betyder, at modellen kom efter 5.6 — ligesom kapitel 6 kommer efter kapitel 5 i en bog. Den deler også træningsdata og personlighed med de andre 6.1-modeller, og det er netop derfor, den ikke hedder 5.7. Man kan sige, at 6.1 er et nyt familiemedlem, mens 5.7 ville have været en forbedring af den gamle familie. Og til sidst: Tallet 6.1 signalerer, at springet ikke er stort nok til at bære forventningerne til en hel ny generation, en 7.
Sanders påpeger også, at modellerne er gode til forskellige ting. Den bedste model til matematik er ikke nødvendigvis den bedste til at fortælle jokes — lidt ligesom at den stærkeste svømmer ikke automatisk er den hurtigste løber. Alligevel forklarer én ting meget af forskellen: modellens størrelse. Større modeller er mere pålidelige, koster mere pr. token (altså pr. stykke tekst, modellen behandler) og kan huske flere sjældne fakta. OpenAIs modeller rangerer i størrelse fra Luna over Terra og Sol til Astra — opkaldt efter himmellegemer i stigende størrelse.

Et versionsnummer hos OpenAI betyder flere ting på én gang, skriver Ted Sanders i en forklaring af firmaets modelnavne. Tallet viser rækkefølgen af udgivelserne, slægtskabet mellem modellerne og størrelsen af forbedringen.
Et navn som 6.1 betyder ifølge Sanders, at modellen kom efter 5.6, deler træningsdata og personlighed med andre 6.1-modeller — og derfor ikke hedder 5.7 — og ikke er et stort nok spring til at bære forventningerne til en 7.
Sanders peger også på, at modellernes ydeevne er mangfoldig: Den bedste model til matematik er ikke nødvendigvis den bedste til jokes. Alligevel forklarer én variabel meget af forskellen — modellens størrelse. Større modeller er mere pålidelige, koster mere pr. token og husker flere sjældne fakta. OpenAIs modeller rangerer i størrelse fra Luna over Terra og Sol til Astra.
Det er uklart: Kilden er et kort uddrag af Sanders' forklaring citeret af Simon Willison; detaljerne om træningsdata og navngivning er Sanders' egne påstande, ikke uafhængigt bekræftet af OpenAI.
Kilder
- Quoting Ted Sanders simonwillison.net
Produktionshistorie
- Radar Signal ? af 100 · spredning 1 kilder
- Skrevet Model: glm-5.3-flash · temperatur 0.4
- Overskrift 5 kandidater, valgt af chat.dk
- Vedtagelse ainews-auto-v4 · score 0.4431