В Казахстане скоро появится первая национальная ИИ-модель
Опубликовано:
Искусственный интеллект открывает новые возможности для бизнеса, однако не все пользователи могут в полной мере воспользоваться его преимуществами. Большинство ИИ-систем разработаны для языков с высоким уровнем ресурсов - английский, испанский или русский, что создает серьезный языковой разрыв и лишает многих доступа к передовым технологиям на их родном языке, сообщили в Beeline Казахстан.
В Казахстане проблему языкового разрыва в ИИ решает научная рабочая группа под руководством Института умных систем и искусственного интеллекта при Назарбаев Университете (ISSAI NU). Она работает над созданием большой языковой модели KAZ-LLM, охватывающая ключевые для казахстанцев языки: казахский, русский и английский.
Эта фундаментальная модель станет основой для разработки местных сервисов и продуктов, так как будет опубликована в открытом доступе.
Партнером в создании KAZ-LLM участвует Beeline Казахстан и его дочерняя ИТ-компания QazCode. Это далеко не первый опыт компании по разработке ИИ. Так, в прошлом году Beeline запустил и выложил в открытый доступ на Hugging Face для всех разработчиков модель Kaz-RoBERTA-conversational, которая активно используется для обслуживания абонентов на цифровых платформах.
Такие инициативы особенно актуальны на фоне цифровизации, которую подчеркивает президент Казахстана Касым-Жомарт Токаев. Он лично выразил готовность курировать создание системы ИИ в стране.
Благодаря Beeline Казахстан и QazCode, проект по созданию KAZ-LLM, курируемый ISSAI, обеспечен необходимой инфраструктурой. Компанией были предоставлены облачные вычислительные мощности объемом 8 DGX H100, что позволило существенно увеличить объем тренировочных данных и возможности обучения модели.
Компания также предоставила собранные открытые данные, а специалисты Data Science от QazCode присоединились к совместной рабочей группе по обучению модели.
"KAZ-LLM будет играть решающую роль в сохранении национального культурного наследия и будет охватывать исторический контекст, специализированные области и разговорные данные, представляющие Казахстан. Адаптируя генеративный ИИ к местным потребностям, KAZ-LLM продемонстрирует, как национальные проекты могут устранить языковые пробелы и внести свой вклад в глобальный ландшафт инноваций в области ИИ. Наиболее важным является то, что проект KAZ-LLM способствует созданию передовых специалистов в области генеративного ИИ", - прокомментировали в ISSAI NU.
Этот вклад в развитие национальной большой языковой модели KAZ-LLM отражает стратегию цифрового оператора Beeline, а также стремление преодолеть языковой разрыв в ИИ. С этой целью оператор подписал меморандум с Суперкомпьютерным центром Барселоны, специализирующийся на развитии ИИ разных языковых групп, а также анонсировал создание первого в Центральной Азии GPU облака для разработки AI-продуктов на базе технологии NVIDIA.
Сегодня в портфеле компании множество успешных ИИ-проектов для бизнеса: видеоаналитика для продаж и производства, маркетинговые решения и другие.
"Наш накопленный опыт, знания и сотрудничество с Суперкомпьютерным центром Барселоны позволяют сосредоточиться на 3-х ключевых направлениях. Во-первых, это создание отечественного суперкомпьютера для обработки больших объемов данных и предоставление доступа к этим вычислительным мощностям специалистам Назарбаев Университета для обучения моделей. Во-вторых, мы продолжаем развивать казахскую языковую модель KAZ-LLM, чтобы интегрировать ее в цифровое пространство. И, наконец, мы уделяем особое внимание развитию профессионалов в области Data Science, чтобы они могли успешно работать над сложными проектами и конкурировать на международной ИТ-арене", — отметил Алексей Шаравар, CEO QazCode.
Совместные усилия Beeline, QazCode, Назарбаев Университета, консорциума ведущих университетов страны, а также МЦРИАП РК и МНВО РК, не только продвигают технологии ИИ на казахском языке, но и способствуют дальнейшему развитию цифровой экономики страны.
Оригинал статьи: https://www.nur.kz/technologies/business/2153536-v-kazahstane-skoro-poyavitsya-pervaya-nacionalnaya-ii-model/