Video yükleniyor...

Video Yüklenemedi

Ana Sayfaya Dön

Artificial Analysis v4.3.2 to v5, AI models re-ranking step by step.

582,840 görüntüleme • 4 gün önce •via X (Twitter)

34 Yorum

_ profil fotoğrafı
_4 gün önce

GPT has funded AA.

Boncuk profil fotoğrafı
Boncuk4 gün önce

everytime openai falls behind aa changes their method

Sharp profil fotoğrafı
Sharp4 gün önce

Terra above Kimi K3.1 and Fable 5.1? Bullshit

RegularMogger profil fotoğrafı
RegularMogger4 gün önce

I think OpenAI paid them a money, so their model will sit higher and other open model sit lower.

TeeMorad profil fotoğrafı
TeeMorad4 gün önce

Open-weight models showed the biggest changes. I guess they were overrated...

frz | AI News profil fotoğrafı
frz | AI News4 gün önce

kimi was 4th like a week ago. Just brutal watching it slide

M.S profil fotoğrafı
M.S4 gün önce

So everybody except from OpenAI gets nuked. 🤦 It doesn't touch Anthropic much, because people already know they're better. Open source gets degraded. When they're doing just the benchmark, you really have to manage any perception of favouritism better, fair or not, right??

Rimle profil fotoğrafı
Rimle4 gün önce

Jew test looool

J A Z I I profil fotoğrafı
J A Z I I4 gün önce

Chinese got cooked except kimi

I´m Max profil fotoğrafı
I´m Max4 gün önce

Second time a new benchmark version pushes openai up. Nearly every LLM ranks lower

vio1ator profil fotoğrafı
vio1ator4 gün önce

Vibe Bench

Major profil fotoğrafı
Major4 gün önce

I dont agree with this at all

Cortex42km profil fotoğrafı
Cortex42km4 gün önce

It seems a cluster for USA and China models, preferring OpenAi

MarkTwainBrother profil fotoğrafı
MarkTwainBrother4 gün önce

So, am I to understand that this is a ranking based on your preferences? Haiku 5.5, the Muse and GPT 6.1 Terra models ranking higher than DeepSeek v4.1 Flash 1017 is a crime...

Thomas Ahle profil fotoğrafı
Thomas Ahle4 gün önce

Best model is now worse than Haiku

Erfan Abedi profil fotoğrafı
Erfan Abedi4 gün önce

Tbh, I knew Muse shouldn't have been that high 🥲🤣

Kamil Monicz profil fotoğrafı
Kamil Monicz4 gün önce

This feels like a good direction towards deranking benchmaxed models without any deeper capability. The ranking changes do make sense from my testing. Gemini and Muse being in the top was some kind of unfunny joke.

WRONG ADVICES profil fotoğrafı
WRONG ADVICES4 gün önce

Cool graphic bro

Анатолий profil fotoğrafı
Анатолий4 gün önce

Только gpt выиграл

Al ex profil fotoğrafı
Al ex4 gün önce

So now we know who's benchmaxxing and who isn't. Nice.👍

AlexVS profil fotoğrafı
AlexVS4 gün önce

Do they just keep changing it for the better of OpenAI or do the chinese labs just benchmax?

Aapakari profil fotoğrafı
Aapakari4 gün önce

Does the second tier actually move between versions, or just the top two?

Beamsters profil fotoğrafı
Beamsters4 gün önce

Kimi dropped to tier 1.5 apparently and Grok/DeepSeek are now lead the second tier pack.

kade profil fotoğrafı
kade4 gün önce

muse wonder above deepseek

⚪ ez profil fotoğrafı
⚪ ez4 gün önce

V5 did absolutely nothing?

Chris profil fotoğrafı
Chris4 gün önce

claude opus 5.5 "and still i rise".. meanwhile openai improving their models after each iteration

MONKE2525E profil fotoğrafı
MONKE2525E4 gün önce

It's only an accurate benchmark when Argon is 20th.

景杉 profil fotoğrafı
景杉4 gün önce

We're iterating and improving every day, and I don't know which one to choose.

argoss profil fotoğrafı
argoss4 gün önce

I agree to some extent.

yot profil fotoğrafı
yot4 gün önce

muse who?

wong en profil fotoğrafı
wong en4 gün önce

just a wild chicken index

Roman Ismagilov profil fotoğrafı
Roman Ismagilov4 gün önce

Grok 😭

Template Monks profil fotoğrafı
Template Monks4 gün önce

tbh, now it makes more sense

INGEN-IA | Software & AI profil fotoğrafı
INGEN-IA | Software & AI4 gün önce

Fable 5.5 coming soon

Benzer Videolar