LMArena je v manj kot letu dni preskočila iz univerzitetnega raziskovalnega projekta v podjetje z vrednotenjem 1,7 milijarde dolarjev.
Podjetje, ki izhaja z UC Berkeleyja, je v torek objavilo 150 milijonov dolarjev v seriji A pri pov-launch vrednotenju 1,7 milijarde dolarjev. Komercialni produkt je javno lansiralo šele septembra.
Rundo je vodil Felicis skupaj z UC Investments, investicijskim skladom Univerze v Kaliforniji. Pridružili so se še Andreessen Horowitz, The House Fund, LDVP, Kleiner Perkins, Lightspeed Venture Partners in Laude Ventures.
Že maja je LMArena zbrala 100 milijonov dolarjev začetnega kapitala pri vrednotenju 600 milijonov dolarjev. Skupno je tako v približno sedmih mesecih prišla do 250 milijonov dolarjev vložkov.
Od Chatbot Arena do LMArena
LMArena se je leta 2023 začela kot Chatbot Arena, odprt raziskovalni projekt, ki sta ga na UC Berkeleyju zagnala raziskovalca Anastasios Angelopoulos in Wei-Lin Chiang. Sprva so ga financirali prek raziskovalnih grantov in donacij.
Njihova niša: množično preverjanje zmogljivosti AI modelov prek javnih lestvic.
Na potrošniškem spletišču uporabnik vpiše poziv, sistem pa ga pošlje dvema različnima modeloma. Uporabnik nato izbere, kateri odgovor je boljši. Iz teh dvobojskih primerjav nastajajo javne lestvice modelov za naloge, kot so besedilo, spletni razvoj, računalniški vid, pretvorba besedila v sliko in druge zmožnosti.
Po podatkih podjetja ima LMArena več kot 5 milijonov mesečnih uporabnikov iz 150 držav, ki ustvarijo približno 60 milijonov pogovorov na mesec. Za razvijalce modelov so lestvice hitro postale obsesija.
Platforma primerja širok nabor sistemov, med njimi različice OpenAI GPT, Google Gemini, Anthropic Claude in Grok, pa tudi modele, specializirane za generiranje slik, pretvorbo besedila v sliko ali za logično sklepanje.
Kako so lestvice spremenili v posel
Ko si je LMArena zgradila ugled nevtralne merilne točke, je začela tesneje sodelovati z izdelovalci modelov. Z OpenAI, Googlom, Anthropicom in drugimi je sklenila partnerstva, da bi njihovi vodilni modeli postali dostopni skupnosti za evalvacije.
Tu se je pojavila tudi kritika. Aprila je skupina tekmecev objavila znanstveni članek, v katerem je trdila, da takšna partnerstva tem modelarjem omogočajo, da "igrajo" LMArena benchmarke. Podjetje te obtožbe odločno zanika.
Sama polemika rasti ni ustavila.
Septembra je LMArena javno lansirala komercialno storitev AI Evaluations, namenjeno podjetjem, laboratorijem in razvijalcem. Stranke lahko plačajo za strukturirane evalvacije modelov prek LMArena skupnosti in infrastrukture.
Do decembra – manj kot štiri mesece po lansiranju – je storitev dosegla tako imenovano letno "stopnjo porabe" 30 milijonov dolarjev, kar podjetje uporablja kot svojo metriko letnega ponavljajočega se prihodka (ARR).
Ta tempo rasti, skupaj z močno prepoznavnostjo v globalni AI skupnosti, je bil dovolj, da so se v serijo A vključili največji skladi tveganega kapitala.
Zakaj je to pomembno tudi za vas
Ko se število modelov množi, postaja vprašanje, "kateri model je v resnici boljši za moje potrebe", vse težje. Klasični benchmarki in sintetični testi pokažejo le del slike.
LMArena stavi na to, da bodo množične, človeku v zanki prilagojene primerjave postale ključna infrastruktura AI ekosistema – podobno kot so to nekoč postali benchmarki brskalnikov ali testi zmogljivosti oblačnih ponudnikov.
Za slovenska podjetja in razvijalce, ki merite na globalni trg, je takšna neodvisna evalvacija lahko način, da svoje modele postavite ob bok OpenAI, Googlu ali Anthropicu – in predvsem, da vidite, kako jih ocenjuje resnična skupnost uporabnikov.
