Актуальные темы
#
Bonk Eco continues to show strength amid $USELESS rally
#
Pump.fun to raise $1B token sale, traders speculating on airdrop
#
Boop.Fun leading the way with a new launchpad on Solana.

489895
Co-Founder, CTO-CPO of @SentoraHQ (fmr IntoTheBlock), Co-Founder of @layerlens_ai, @faktoryai, @neuralfabric and The Sequence AI, Teaching at Columbia-Wharton
489895 сделал репост
🧠 Grok 4 от @xai делает успехи в тестах на рассуждение, но ситуация более сложная, чем предполагают оценки.
Вот как он выглядит — и что мы действительно можем узнать из его результатов 🧵
📊 Полная оценка:
1️⃣ Оценки Grok 4:
• AI2 Reasoning Challenge (Легкий): 98%
• AIME 2025 (Математика): 89%
• Аудит бухгалтерского учета: 84%
• MMLU-Plus: 64%
• Data4Health: 55%
Это верхние оценки — но давайте углубимся в то, что работает, а что все еще не удается.
2️⃣ AIME 2025
✅ Обрабатывает алгебру, геометрию, теорию чисел
✅ Соблюдает правила форматирования LaTeX
❌ Испытывает трудности с многошаговой логикой
❌ Ошибки в комбинаторике
❌ Проблемы с точностью формата (например, отсутствие °)
3️⃣ Аудит бухгалтерского учета
✅ Сильные стороны в этике и отчетности
✅ Хорошее понимание принципов аудита
❌ Неправильно интерпретирует схожие процедуры
❌ Не замечает тонкие различия в ответах
❌ Трудности с применением теории к реальным случаям
4️⃣ Настоящее понимание?
Даже модель с 98% по некоторым задачам может сильно провалиться в условиях неопределенности или стресса форматирования.
Тесты, такие как AIME и Аудит, показывают, как она проваливается, а не только сколько она набирает.
5️⃣ Почему это важно:
Нам нужна прозрачная оценка по каждой задаче — а не просто таблицы лидеров.
#Grok4 мощный, но все еще хрупкий в условиях высокой ставки в реальном мире.
🧪 Изучите полный анализ:
#AI #LLMs #Бенчмаркинг

1,03K
489895 сделал репост
7 дней до того, как наш список ожидания станет ДЕЙСТВИТЕЛЬНЫМ!
Станьте одним из первых 1,000, чтобы разблокировать преимущества ранних пользователей, альфа-версии и увеличенные вознаграждения за стекинг.
👉 Зарегистрируйтесь 14 июля для ликвидного стекинга уровня институциональных инвесторов для $XRP.
110,35K
Топ
Рейтинг
Избранное
В тренде ончейн
В тренде в Х
Самые инвестируемые
Наиболее известные