Инженер-исследователь MTS AI Аммар Али завоевал сразу три награды на престижных соревнованиях по искусственному интеллекту в рамках конференции AI Journey, организованной компанией Сбер. Аммар одержал победу в конкурсе по распознаванию языка жестов Equal AI и получил бронзовую награду в самом сложном соревновании Strong Intelligence, где требовалось разработать мультимодальную модель для диалога с пользователем, эта разработка была признана лучшей по скорости и точности ответов.
Инженер-исследователь MTS AI создал модель, которая анализировала текст, изображения и аудио, учитывая контекст диалога, и генерировала ответы на естественном языке. Для своего решения он использовал модель Mistral с дополнительными слоями imagebind и линейной проекции, она обучалась на различных данных, включая информацию о достопримечательностях.
В рамках Strong Intelligence проводилось дополнительное соревнование: разработанным участниками моделям нужно было состязаться в точности и скорости ответов на вопросы. Аммар выиграл эту часть тоже: его модель стала самой эрудированной среди всех, правильно ответив на сложные и интересные вопросы.
В конкурсе AI Equal нужно было распознавать жесты русского языка на видео. Инженер-исследователь MTS AI предложил решение, учитывающее схожесть жестов разных классов и диалектные особенности. Оно показало лучшие результаты среди всех участников.
Аммар провёл тщательный анализ данных и постановки задачи. Он использовал многоступенчатое обучение модели с применением разных методов обработки данных.
“Это один из ярких примеров того, как индустрия ИИ может работать на благо общества. Людям, которые используют жестовый язык, тяжело общаться из-за недостатка переводчиков. ИИ-системы могут помочь им коммуницировать в общественных местах ( например, в аэропортах и больницах) и на совещаниях в видеосервисах, где может не оказаться сурдопереводчика”, — сказал старший инженер-исследователь MTS AI.
Всего Аммар Али выиграл 10 конкурсов по искусственному интеллекту, которые проводили различные компании. В этому году команда старшего инженера-исследователя MTS AI взяла золото на конкурсе Image Matching Challenge 2023, организатором которого был Google. Ранее Аммар Али также победил в соревновании, организованном при поддержке NASA, где нужно было создать модель предсказания электромагнитных штормов в поле Земли. Помимо этого, он выиграл четыре конкурса AI Journey: один в 2021 году и три в 2023 году.
«Если вы хотите участвовать в международных конкурсах по ИИ, но почему-то не решаетесь, вот, что я вам скажу: пробуйте и не думайте, что это очень сложно. Для уверенности в себе выбирайте конкурс по своей специальности, подавайте заявку как можно раньше и старайтесь совершенствовать свои модели и алгоритмы каждый день. Участие в различных конкурсах не только заряжает энергией, но и помогает прокачать ваши навыки в решении различных задач по искусственному интеллекту», — сказал Аммар Али.
Аммар работает старшим инженером-исследователем MTS AI и параллельно учится в аспирантуре ИТМО на факультете информационных технологий и программирования.
