АБУ-ДАБИ, 13 мая 2024 (WAM) -- Институт технологических инноваций (TII), ведущий глобальный научно-исследовательский центр, входящий в состав Совета по передовым технологическим исследованиям Абу-Даби, представил второе поколение своей знаменитой большой языковой модели Falcon 2. Было разработано две революционные версии: Falcon 2 11B, более эффективная и доступная языковая модель, обученная на 5,5 триллионах лексем с 11 миллиардами параметров, и Falcon 2 11B VLM, отличительной особенностью которой является возможность преобразования изображений в текст (VLM).
Falcon 2 11B VLM является первой мультимодальной моделью TII и единственной моделью на рынке, обладающей возможностью преобразования изображений в текст.
Falcon 2 11B был испытан в сравнении с несколькими ведущими языковыми моделями ИИ. Языковая модель превзошла по производительности недавно выпущенную Llama 3 от Meta с восемью миллиардами параметров (8B), разделив первое место с Gemma 7B от Google (Falcon 2 11B - 64,28; Gemma 7B - 64,29). Результаты предоставлены Hugging Face, американской платформой, предоставляющей объективные инструменты для оценки и составляющей глобальную таблицу лидеров среди языковых моделй.
Falcon 2 11B и 11B VLM являются моделями с открытым исходным кодом, что позволяет разработчикам по всему миру получить к ним неограниченный доступ.
В ближайшем будущем планируется расширить линейку моделей нового поколения Falcon 2 в различных размерах. Расширенные возможности машинного обучения, такие как "смесь экспертов" (MoE), позволят усовершенствовать эти модели и поднять их производительность на еще более высокий уровень.
Все языковые модели ИИ, выпущенные TII, постоянно занимают первые места как самые мощные языковые модели с открытым исходным кодом. Новые уменьшенные и универсальные модели Falcon 2 11B позволят TII получить большее признание на рынке.
Языковые модели Falcon 2 11B легко справляются с задачами на английском, французском, испанском, немецком, португальском и других языках.. Falcon 2 11B VLM способна идентифицировать и интерпретировать изображения и визуальные образы, что открывает широкие возможности для ее применения в таких отраслях, как здравоохранение, финансы, электронная коммерция, образование и юриспруденция.
Области применения новых языковых моделей обширны - от управления документацией, цифрового архивирования до поддержки людей с нарушением зрения. Кроме того, модели могут эффективно работать всего на одном графическом процессоре (GPU), что обеспечивает их высокую масштабируемость, простоту развертывания и легкость использования на ноутбуках и других небольших устройствах.
Генеральный секретарь Совета по передовым технологическим исследованиям Абу-Даби и советник президента Его Высочества шейха Мохамеда бин Заеда Аль Нахайяна по вопросам стратегических исследований и передовых технологий Фейсал Аль Баннаи сказал: "Выпустив Falcon 2 11B, мы представили первую модель в поколении Falcon 2. Модель Falcon 2 11B показала отличные результаты. Мы подтверждаем нашу приверженность принципу открытого исходного кода и фонду Falcon Foundation. В ближайшее время на рынке появятся другие мультимодальные модели различных размеров. Наша цель - обеспечить разработчикам и организациям, которые дорожат своей конфиденциальностью, доступ к одной из лучших моделей для использования искусственного интеллекта".
Исполнительный директор и главный научный сотрудник подразделения ИИ в TII д-р Хаким Хасид отметил: "ИИ непрерывно развивается, и разработчики признают многочисленные преимущества более компактных и эффективных моделей. Помимо снижения требований к вычислительной мощности и соответствия критериям устойчивости, эти модели обеспечивают повышенную гибкость, легко интегрируясь в периферийную инфраструктуру ИИ - следующую развивающуюся мегатенденцию. Кроме того, возможности Falcon 2 по преобразованию изображений в текст открывают новые горизонты для ИИ, позволяя пользователям взаимодействовать с изображениями и текстами".
Универсальность Falcon 2 11B также заставила TII задуматься о работе над инновациями GenAI. Среди них - "смесь экспертов". Этот метод предполагает объединение небольших сетей с разными специализациями, что помогает получить более сложный и индивидуальный ответ. "Смесь экспертов" практически является командной интеллектуальных помощников, каждый из которых разбирается в определенной области и работает вместе с остальными. Такой подход повышает точность и ускоряет процесс принятия решений, прокладывая путь к созданию более эффективных моделей ИИ.
Falcon 2 11B распространяется в соответствии с TII Falcon License 2.0, лицензией Apache 2.0 на программное обеспечение. Лицензия предусматривает политику, направленную на ответственное использование ИИ.