Бенчмарк Humanity's Sixth Sense содержит 522 вопроса и 288 изображенийКомпании Elorian и Scale AI создали набор Humanity's Sixth Sense для оценки способности моделей понимать скрытые визуальные сценарии. Базу данных составляют 522 вопроса на основе 288 изображений и видео.
Import AI (Jack Clark)AI
- Область
- применение языковых моделей
- Что сделали
- Создан новый бенчмарк Humanity's Sixth Sense, который проверяет способность языковых моделей понимать скрытые визуальные и причинно-следственные связи в изображениях и видео.
- Зачем это
- Это поможет выявить недостатки в текущих системах искусственного интеллекта, так как многие из них ошибаются в задачах, требующих интуитивного визуального рассуждения.
#visual reasoning#benchmark#ai agent#startups
Читать оригинал →