Ученик NIS разработал инновационную систему перевода казахского жестового языка с помощью искусственного интеллекта, передает DKnews.kz.
Ученик столичной физико-математической школы NIS Жаннур Кали разработал инновационную систему, которая с помощью искусственного интеллекта позволяет распознавать и изучать казахский жестовый язык. Проект базируется на технологиях Mediapipe и Computer Vision, которые позволяют в реальном времени распознавать и переводить казахский жестовый язык. Система, обладая точностью 96%, использует инновационную модель машинного обучения и нейронные сети, такие как CNN (Convolutional Neural Network) и LSTM (Long Short-Term Memory). С помощью OpenAI API она обеспечивает морфологическую и синтаксическую корректировку переводов, делая процесс обучения казахскому жестовому языку более доступным и научно обоснованным.
На сегодняшний день в мире насчитывается 1,3 миллиарда людей с особыми потребностями, из которых 70 миллионов – люди с потерей слуха. В Казахстане проживает более 130 тысяч человек с нарушением слуха, что делает поддержку таких граждан особенно важной. Разработанная Жаннуром система открывает новые возможности для эффективного общения с людьми с нарушением слуха и способствует их интеграции в общество.
Социальный проект направлен на развитие инклюзивного общества. Система улучшает доступ людей с ограниченными возможностями слуха к информации, упрощает их коммуникацию с обществом и может стать инструментом для обучения жестовому языку в образовательных учреждениях. Внедрение этой системы ускоряет процесс взаимодействия, расширяя сферу применения жестового языка.
Научная новизна проекта заключается в создании системы распознавания казахского жестового языка с высокой точностью, способной работать с сложными предложениями и автоматизировать процесс обучения. Используя технологии Mediapipe Holistic и LSTM-архитектуру, проект обеспечивает высокоточное распознавание языка. Уникальность системы в том, что она может интегрироваться с мировыми жестовыми языками, переводя их на казахский.
Система имеет значительный экономический потенциал. По словам Жаннура, она может быть внедрена в рамках социальных программ и использоваться для оказания медицинской помощи. На мировом рынке эта сфера оценивается в 5,9 миллиарда долларов США.
В будущем проект планируется расширить: пополнить словарный запас, наладить сотрудничество со специализированными организациями, разработать кроссплатформенное приложение и внедрить функцию распознавания эмоций. Система найдет применение в общественных местах, образовательных учреждениях и социальных сервисах.
Таким образом, инновационная разработка Жаннура Кали не только способствует развитию инклюзии в казахстанском обществе, но и представляет собой значительный технологический прорыв с международным потенциалом.
