Являются ли большие языковые модели дислексичными?

Люди и современные ИИ могут сталкиваться с похожими проблемами при обработке пространственной информации, когда традиционные культурные стандарты расходятся с их внутренними механизмами восприятия.
Являются ли большие языковые модели дислексичными?
Изображение носит иллюстративный характер

Личный опыт дислексии иллюстрирует запутанность в направлениях: в автомобиле случалась ситуация, когда вместо поворота налево совершался поворот направо – «Я сказал: влево!». При этом очевидно умение различать такие направления, как вверх и вниз или контрасты вроде чёрного и белого, не компенсирует затруднения в определении левого и правого.

Уже в школьные годы возникают трудности: буквы «b» и «d» выглядят схоже, хотя одна направлена влево, а другая – вправо, а алгебра и физика требуют последовательности действий, зависящей от левосторонних и правосторонних ориентиров. Вспоминается случай из первого курса в Стэнфорде, когда вместо «правого правила» использовалась левая рука. В то время как типичное представление о «внутреннем взоре» предполагает фиксированную перспективу за мостиком носа, у дислексиков образы воспринимаются как туманные облака, охватывающие всё пространство.

Подобные трудности наблюдаются и у мультимодальных больших языковых моделей. Недавнее исследование показало, что при чтении времени с аналогичных часов GPT-4o правильно определял время лишь в 8% случаев, Claude-3-5-sonnet – в 6%, а Gemini 2.0 достиг лучшего результата – 20%. Аналогичные проблемы возникают и при интерпретации календарей, где неустойчивость пространственных ориентиров приводит к ошибкам.

Контрастным примером служит исследование 2023 года, где 240 участников оценивали количество шариков в банке с ошибкой в 55%, тогда как ChatGPT 4 демонстрировал 42% погрешности. Несмотря на успехи в решении сложных задач по визуальному пространственному анализу, ИИ испытывают затруднения именно при выполнении традиционных культурных стандартов, таких как чтение часов.

В основе ошибок может лежать неоднозначная обработка пространственной информации: и люди-дислексики, и искусственный интеллект могут «видеть» циферблат, оценивая расстояние от цифры «2», что приводит к путанице между движением по часовой стрелке и против неё.

Особенности дислексии зачастую являются не только проблемой, но и источником творческого мышления. Исследования показывают, что дети с дислексией достигают значительно более высоких результатов в тестах на креативность, а многие взрослые профессионалы, благодаря уникальному способу восприятия, добиваются успехов в науке, искусстве, кино, литературе и спорте. Личный опыт, подтверждённый участием в разработке первого смешанного режима реальности совместно с Human Sensory Feedback Group в Исследовательской лаборатории ВВС, привёл к дальнейшей работе в VR, AR и AI.

Анализ различий в обработке визуальной и пространственной информации между человеческим восприятием и алгоритмами ИИ подчёркивает необходимость учитывать альтернативные когнитивные стратегии при решении задач, требующих жёстко закреплённой ориентации. Эти наблюдения позволяют глубже понять как ограничения, так и потенциал новых подходов в создании эффективных систем искусственного интеллекта.


Новое на сайте

19989Шесть историй, которые умещаются на ладони 19986Как 30 000 аккаунтов Facebook оказались в руках вьетнамских хакеров? 19985LofyGang вернулась: как бразильские хакеры охотятся на геймеров через поддельные читы 19984Автономная проверка защиты: как не отстать от ИИ-атак 19983Взлом Trellix: хакеры добрались до исходного кода одной из ведущих компаний по... 19982Почему почти 3000 монет в норвежском поле перевернули представление о викингах? 19981Как поддельная CAPTCHA опустошает ваш счёт и крадёт криптовалюту? 19980Слежка за каждым шагом: как ИИ превращает государство в машину тотального контроля 19979Как хакеры грабят компании через звонок в «техподдержку» 19978Почему именно Нью-Йорк стал самым уязвимым городом восточного побережья перед... 19977Как одна команда git push открывала доступ к миллионам репозиториев 19976Зачем древние народы убивали ножами и мечами: оружие как основа власти 19975Как Python-бэкдор DEEPDOOR крадёт ваши облачные пароли незаметно? 19974Послание в бутылке: математика невозможного 19973Почему ИИ-инфраструктура стала новой целью хакеров быстрее, чем ждали все?
Ссылка