Развитие LLM: взгляд в 2025 год

Языковые модели продолжают развиваться, но их основным недостатком остаются галлюцинации, вызванные архитектурой обучения на больших данных без проверки достоверности. Разработчики сосредоточатся на интеграции с базами проверенных данных и RAG-подходе, который позволяет моделям использовать релевантные данные из подключенных источников, предоставляя ссылки на них. Однако полное устранение галлюцинаций потребует значительных ресурсов.
Развитие LLM: взгляд в 2025 год
Изображение носит иллюстративный характер

Fine-tuning будет терять актуальность, так как базовые модели справляются с большинством задач. Акцент сместится на prompt engineering. Безопасность и защита данных станут приоритетом, с переходом на локальные модели и усиление контроля над тем, что модели «запоминают». Прорыв в ИИ-агентах откладывается из-за их сложности, но увеличится количество фреймворков для их разработки.
Режимы работы, подобные o1-preview, станут более популярными, позволяя повысить когнитивные способности моделей без сбора огромных объемов данных. Провайдеры API будут добавлять уникальные функции, например, structured outputs для ограничения формата ответа, интеграцию анализа текста и изображений в PDF, а также системы RAG с execution sandbox для безопасного тестирования. AGI в 2025 году, скорее всего, не появится.


Новое на сайте

19857Острова как политический побег: от Атлантиды до плавучих государств Питера Тиля 19856Яйца, которые спасли предков млекопитающих от худшего апокалипсиса на Земле? 19855Могут ли омары чувствовать боль, и почему учёные требуют запретить варить их живыми? 19854Премия в $3 млн за первое CRISPR-лечение серповидноклеточной анемии 19853Почему сотрудники игнорируют корпоративное обучение и как это исправить 19852Тинтагель: место силы Артура или красивая легенда? 19851Голоса в голове сказали правду: что происходит, когда галлюцинации ставят диагноз точнее... 19850Куда исчезает информация из чёрных дыр, если они вообще исчезают? 19849Чёрная дыра лебедь Х-1 бросает джеты со скоростью света — но кто ими управляет? 19848Что увидели фотографы над замком Линдисфарн — и почему они закричали? 19847Почему антисептики в больницах могут создавать устойчивых к ним микробов? 19846Правда ли, что курица может жить без головы? 19845Как Оскар Уайльд использовал причёску как оружие против викторианской морали? 19844Назальный спрей против всех вирусов: как далеко зашла наука 19843«Я ещё не осознал, что мы только что сделали»: первая пресс-конференция экипажа Artemis II
Ссылка