Modelranglijsten
Hoe de modellen in Model Router zich tot elkaar verhouden qua capaciteit, prijs en de afweging tussen die twee. Elk cijfer gebruikt actuele verkoopprijzen, inclusief de platformkosten van 5 procent, zodat de vergelijkingen weergeven wat je werkelijk zou betalen.
Intelligentiescores komen uit de intelligentie-index van Artificial Analysis, een onafhankelijke samengestelde benchmark met een score van 0 tot 100. Modellen die zij niet volgen, worden weggelaten uit de grafieken op basis van intelligentie in plaats van een score van nul te krijgen.
Hoe je deze grafieken gebruikt
Benchmarks meten algemene capaciteit op standaardtaken. Jouw werklast is geen standaardtaak. Gebruik de grafieken om een shortlist van twee of drie kandidaten samen te stellen binnen de prijsklasse die je kunt betalen, test ze daarna met je eigen prompts en vergelijk de resultaten.
Een paar patronen om te weten:
- Prijs en intelligentie hangen maar losjes samen. Verschillende modellen in het middensegment scoren dicht bij modellen die tien keer zoveel kosten.
- Waardescores bevoordelen goedkope modellen. Een model met een bescheiden score tegen een zeer lage prijs kan bovenaan de waarderanglijst staan en toch de verkeerde keuze zijn voor zwaar werk.
- Gemiddelden per provider verbergen grote verschillen. Het goedkoopste en duurste model van een provider kunnen twee ordes van grootte verschillen, dus het gemiddelde is slechts een ruwe indicatie.
Zie de Modelcatalogus voor de volledige prijslijst en hoe kosten worden berekend.