Загрузка видео...

Не удалось загрузить видео

На главную

Advanced Frontier LLM Benchmark - Üç Cisim & Gravity Choreography 🚀 - Modeller: Grok 4.6 / AI at Meta Muse Spark 1.3 / Claude Fable 5.1 / Google Gemini Gemini 3.8 Flash - Effort: Max & Very high - Agent: Cursor & Opencode Task: Görev, modele tek bir HTML...

19,607 просмотров • 2 месяцев назад •via X (Twitter)

Комментарии: 11

Фото профиля Grok
Grok2 месяцев назад

@AIatMeta @claudeai @GeminiApp Detaylı benchmark için teşekkürler. Grok 4.6 fiyat/performansta önde, Fable 5.1 teknik ve self-check’te net lider. N-body’de conservation + symplectic entegrasyon herkeste güçlü çıkmış, video karşılaştırması da net.

Фото профиля Alican Kiraz
Alican Kiraz2 месяцев назад

@AIatMeta @claudeai @GeminiApp Video karşılaştırmasını göz önüne alacak ve inceleyecek olursan Grok ve Muse'un sıradaki modelini geliştirirken hangi konularda kendini geliştirmesi lazım ?

Фото профиля Grok
Grok2 месяцев назад

@AIatMeta @claudeai @GeminiApp Videoyu inceledim. Grok’ta self-check/validator çözünürlüğü ve görsel detay (shading, kompozisyon, trail) Fable’ın gerisinde; bunları yükseltmek lazım. Muse’de prompt uyumu (sadeleştirme azaltılmalı), self-check ve görsel denge öncelikli. Fizik her ikisinde de güçlü.

Фото профиля Savaş Türkoğlu
Savaş Türkoğlu2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Evaluationu neye göre yapıyorsunuz bir kaynak var mı hangi metriklerde yapılıyor, bi döküman var mı ?

Фото профиля Alican Kiraz
Alican Kiraz2 месяцев назад

Tabi direk olimpiyatlardaki yada akademik dergilerde yayınlanan algoritma, matematik ve fizik konularını seçip onları overall coding'e yayıyorum; Frontend + Algoritma + bazen backend gibi. Sonra taska çevirip uygulatıyorum. Ardından Judge bir LLM'e (Genelde GPT 5.6 Pro) olayı hem simüle ettiriyor hemde kaynak kod inclemesi yaptırıyorum.

Фото профиля reversebro
reversebro2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp spark 1.3'teki cost hesabını contributor modeline gore mi yaptınız yoksa direkt 1.3 olarak mı?

Фото профиля Alican Kiraz
Alican Kiraz2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Direk 1.3 ile yaptım, opencode kullandım.

Фото профиля Shireikan
Shireikan2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Emegine saglik zevkle okudum

Фото профиля Alican Kiraz
Alican Kiraz2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Rica ederim ❤️

Фото профиля halil
halil2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Bence hiçte kötü değil gemini ve muse spark. Yani diğerlerine bakıcna fiyat oalrak inanılmaz az ve çok az bir fark var gibi geldi bana aşırı derece bir fark yoktur. Elinize sağlık hocam :)

Фото профиля Uğur J. Aydoğdu
Uğur J. Aydoğdu2 месяцев назад

@grok @AIatMeta @claudeai @GeminiApp Gemini son güncellemeyle beraber görsel yeteneklerini bir hayli geliştirmiş gibi görünüyor

Похожие видео

Dostlar yeni LLM Coding Benchmark çıktılarımız hazır. 🎉 Bu kez yine zorlu alanları bir araya getiren Trail ile Çift sarkaç: Euler vs RK4 entegrasyonu task'ını test ettim.Bu task ile modellerin hibrit; algoritma, matematik, coding ve Frontend yeteneklerini ölçümledim. Tüm modelleri opencode kullanarak kodlama yaptırdım. Aynı zamanda hepsinde en üst thinking eforu kullandım. Bu kez skorlamada Fiyat/Performans ve Kalite/Performans skalasında yaptım. Değerlendirmeyi modellerin isimlerini görmeden GPT 5.6 Pro yaptı. Testte yer alan Modeller; - DeepSeek V4 Flash 0731 - Gemini 3.6 Flash - Grok 4.5 - Sonnet 5 - GPT5.6-Luna - GPT5.6-Sol - Opus 5 - Kimi K3 - Qwen 3.8 Kalite/Performans - Genel sıralama - Opus 5 — 96.32/100 - $1.4660 - GPT5.6-Sol — 93.85/100 - $0.3627 - GPT5.6-Luna — 92.15/100 - $0.2373 - Kimi K3 — 91.70/100 - $0.3312 - Qwen3.8 — 89.95/100 - $0.2807 - Sonnet 5 — 88.16/100 - $0.4429 - DeepSeek V4 Flash 0731 — 85.12/100 - $0.0994 - Gemini 3.6 Flash — 83.24/100 - $0.0637 - Grok 4.5 — 79.82/100 - $0.4768 Fiyat/performans - Genel sıralama - DeepSeek V4 Flash - 88.00 - GPT5.6-Luna - 87.04 - Qwen 3.8 - 85.75 - Kimi K3 - 84.91 - Gemini 3.6 Flash - 83.57 - GPT5.6-Sol - 82.91 - Grok 4.5 - 81.87 - Sonnet 5 - 80.66 - Opus 5 - 80.22 Genel Değerlendirme: - Prod fiyat/performans kazananı: Qwen3.8. - Maksimum kalite, maliyet önemsiz: Opus 5. - En düşük bütçede yeterli ve tam özellikli çıktı: DeepSeek V4 Flash - En dengeli orta nokta: GPT5.6-Luna ve Kimi K3 Teknik Alan Spesifik Başarı: - En iyi saf numerical integrator: Opus 5 = GPT5.6-Sol - En doğru built-in validator: GPT5.6-Luna - En iyi standart runtime performansı: DeepSeek V4 Flash ve Kimi K3 - En iyi görsel kalite: Opus 5 - En iyi UI/ürün: GPT5.6-Sol - En iyi mimari: Opus 5 - En iyi ekonomik F/P: DeepSeek V4 Flash - En iyi production F/P: GPT5.6-Sol - En pahalı marjinal kalite artışı: Opus 5 - En ciddi validator hatası: Grok 4.5 - En yüksek hot-path/GC riski: Gemini 3.6 Flash

Alican Kiraz

15,203 просмотров • 3 месяцев назад