Инженер-исследователь MTS AI одержал тройную победу на соревнованиях AI Journey

fgfg Picture

Инженер-исследователь MTS AI Аммар Али завоевал сразу три награды на престижных соревнованиях по искусственному интеллекту в рамках конференции AI Journey, организованной компанией Сбер.  Аммар одержал победу в конкурсе по распознаванию языка жестов Equal AI и получил бронзовую награду в самом сложном соревновании Strong Intelligence, где требовалось разработать мультимодальную модель для диалога с пользователем, эта разработка была признана лучшей по скорости и точности ответов. 

Инженер-исследователь MTS AI создал модель, которая анализировала текст, изображения и аудио, учитывая контекст диалога, и генерировала ответы на естественном языке. Для своего решения он использовал модель Mistral с дополнительными слоями imagebind и линейной проекции, она обучалась на различных данных, включая информацию о достопримечательностях.

В рамках Strong Intelligence проводилось дополнительное соревнование: разработанным участниками моделям нужно было состязаться в точности и скорости ответов на вопросы. Аммар выиграл эту часть тоже: его модель стала самой эрудированной среди всех, правильно ответив на сложные и интересные вопросы.

В конкурсе AI Equal нужно было распознавать жесты русского языка на видео. Инженер-исследователь MTS AI предложил решение, учитывающее схожесть жестов разных классов и диалектные особенности. Оно показало лучшие результаты среди всех участников.

Аммар провёл тщательный анализ данных и постановки задачи. Он использовал многоступенчатое обучение модели с применением разных методов обработки данных.

“Это один из ярких примеров того, как индустрия ИИ может работать на благо общества. Людям, которые используют жестовый язык, тяжело общаться из-за недостатка переводчиков. ИИ-системы могут помочь им коммуницировать в общественных местах ( например, в аэропортах и больницах) и на совещаниях в видеосервисах, где может не оказаться сурдопереводчика”, — сказал старший инженер-исследователь MTS AI. 

Всего Аммар Али выиграл 10 конкурсов по искусственному интеллекту, которые проводили различные компании. В этому году команда старшего инженера-исследователя MTS AI взяла золото на конкурсе Image Matching Challenge 2023, организатором которого был Google. Ранее Аммар Али также победил в соревновании, организованном при поддержке NASA, где нужно было создать модель предсказания электромагнитных штормов в поле Земли. Помимо этого, он выиграл четыре конкурса AI Journey: один в 2021 году и три в 2023 году. 

«Если вы хотите участвовать в международных конкурсах по ИИ, но почему-то не решаетесь, вот, что я вам скажу: пробуйте и не думайте, что это очень сложно. Для уверенности в себе выбирайте конкурс по своей специальности, подавайте заявку как можно раньше и старайтесь совершенствовать свои модели и алгоритмы каждый день. Участие в различных конкурсах не только заряжает энергией, но и помогает прокачать ваши навыки в решении различных задач по искусственному интеллекту», — сказал Аммар Али.

Аммар работает старшим инженером-исследователем MTS AI и параллельно учится в аспирантуре ИТМО на факультете информационных технологий и программирования.

Новости
Главное за последнее время
Смотреть все
События
ВЕБИНАР: LLM для бизнес: возможности, ограничения и реальные кейсы
События
ВЕБИНАР: Возможности генеративного ИИ для бизнеса
ВобъективеИИ
Жажда скорости и ИИ против подделок
MTS AI в медиа
MTS AI создала LLM для корпоративного сектора
Новости команды
MTS AI провела специальную оценку условий труда
Новости команды
Сотрудник MTS AI вошел в Научный совет Альянса в сфере ИИ
ВобъективеИИ
Защита от биоугроз и LLM под знаком дракона
Решения
Использование LLM в телекоме для суммирования звонков
ВобъективеИИ
Спящие агенты и новые возможности GPT
Решения
По каким критериям оценивать качество голосового бота
ВобъективеИИ
Джейлбрейк LLM и ИИ для обучения роботов