Компания LG AI Research представила EXAONE 3.0 (EXpert AI for EveryONE) — первую в Корее большую языковую модель (LLM) с открытым исходным кодом. Эта версия призвана стимулировать исследования и инновации в области ИИ в корейском языковом пространстве, обеспечивая при этом конкурентоспособную производительность в английском языке.

Семейство EXAONE 3.0 включает в себя модели различных размеров, но компания LG решила выложить в открытый доступ версию с 7,8B параметрами, настроенными по инструкциям, для некоммерческих исследовательских целей. Эта модель, обученная на 8 триллионах токенов, демонстрирует сильные двуязычные возможности, но лучше всего она справляется с задачами на корейском языке.

В бенчмарк-тестах EXAONE 3.0 7.8B продемонстрировала впечатляющую производительность в различных категориях:

— В реальных сценариях использования на английском языке она получила высшие баллы в MT-Bench, Arena-Hard и WildBench, опередив другие модели аналогичного размера.

— В корейских бенчмарках она заняла первое место как в реальных сценариях, так и в задачах общего понимания языка.

— Модель также продемонстрировала сильные способности в задачах по математике и кодированию.

Более подробная информация здесь.

Несмотря на эти достижения, LG на текущий момент ограничивает ее использование. Компания позволяет проводить только некоммерческие исследования и запрещает любое коммерческое применение без прямого разрешения. Это резко контрастирует с современными моделями с открытым исходных кодом, такими как Llama 3.1, которые допускают широкое коммерческое использование.

EXAONE 3.0 — первая корейская LLM с открытым весом — способна ускорить исследования и разработки в области ИИ в Корее и за ее пределами и, возможно, привести к прорыву в обработке естественного языка на корейском языке.