Ensenas Инструмент коммуникации — Saeli Seira Saenz and Alana Betanzo Carriles

Работа Ensenas Инструмент коммуникации дизайнера Saeli Seira Saenz and Alana Betanzo Carriles является высоко ценимым лауреатом престижной премии 2023 Железная премия A' Design Award в конкурсной категории Социальный дизайн.

ЖелезнаяСоциальный· 2023

Ensenas Инструмент коммуникации

Автор: Saeli Seira Saenz and Alana Betanzo Carriles

Клиент: Universidad de Monterrey

Лауреат премии Железная премия A' Design Award в категории Социальный

35,348

Подтверждённый лауреат

Проверить статус награды для #149366

Посетить сайт Смотреть на A' Design Award Пресс-релиз Значок награды

Цвета

Дизайн

О дизайне Ensenas Инструмент коммуникации

Ensenas — цифровой инструмент, созданный для улучшения коммуникации между людьми с нарушениями слуха и слышащими людьми в Мексике. Ensenas использует модель машинного обучения, которая считывает мексиканский язык жестов в реальном времени и переводит слова в письменный испанский. Модель была обучена на наборе данных из 400 видеозаписей распространённых жестов, размеченных и проанализированных кадр за кадром с помощью оценки положения тела. Адаптивный веб-сайт представляет проект и предлагает исследование, модель и набор данных для бесплатной загрузки. Цель — сократить разрыв в коммуникации.

Признание

О награде Железная премия A' Design Award

Ensenas Инструмент коммуникации — лауреат Железной премии A' Design Award, престижного признания, присуждаемого хорошим проектам, которые отвечают профессиональным и промышленным требованиям, ожидаемым от хорошо продуманных творений. Обладатели Железной премии демонстрируют большое мастерство, высокую специализацию, экспертное понимание и творческие способности их авторов. Ожидается, что Ensenas Инструмент коммуникации станет высокоценимым, вызывающим восхищение и дорогим сердцу творением, практичным и инновационным. Этот проект, получивший Железную премию A' Design Award, интегрирует лучшие отраслевые практики и обладает компетентными техническими характеристиками, сочетающимися с ноу-хау и талантом. Благодаря основательности Ensenas Инструмент коммуникации заслуживает уважения и создан для того, чтобы улучшать качество жизни, помогая сделать мир лучше.

За кулисами дизайна

Пресс-кит

Авторы, участники команды и технические детали, предоставленные дизайнером.

Уникальные свойства: Likewise, thanks to technology and current tools, we were able to generate a Machine Learning model or tool which makes a real time reading of the Mexican Sign Language; where it is possible to solve the communication gap between people with hearing disabilities and people without such disability; avoiding that people make the effort to learn the Mexican Sign Language.
Размеры и упаковка: This is a model in a website, whit a responsive design.
Теги: IA, Machine Learning, LSM, Data base, Service Design, education and tools, Sign Language,
Технология производства: We developed a model and data set of machine learning in order to create new tools and opportunities for people with hearing disabilities and make their lives easier through it. We created a platform in which anyone can learn more about the project and download the machine learning model.
Дизайнерская задача: The first step in creating this project was the creation of a data set consisting of a collection of 400 videos of the most used words in the Mexican sign language. These were ordered by categorize and label individually.
The next step was the pose prediction process, in which the model analyzes the content of the data set analyzing frame by frame by means of ML pipe pose Estimation.
At the end of this estimation, our supervised learning model is able to detect patterns in the poses without the need for human intervention in order to identify which words, letters, numbers and phrases they belong to. To complete this process, a manual selection of frames was also performed in order to achieve a more accurate prediction of the signals.

In order to open this project to the public, a digital platform was created in which it is possible to freely download our research, the LSM recognition model, the data set generated so that other developers, technology companies, educational institutions can take advantage of our project and can create more inclusion tools for the non-hearing community.
Исследование: It is estimated that 5% of the world population, being 430 million people, will suffer a loss of disabling audio and in Mexico there are limited resources and tools to create an environment where everyone feels heard.
Following a design process, we conducted a series of interviews with experts, case studies and surveys to understand the perception of hearing impairment. We found that one of the limitations for the use of sign language is the learning curve.

We also found that some basic tasks for people with this disability can be more complicated than normal, which limits their independence. That's why we wanted to find a solution
inclusion to this problem.

This is Enseñas, an initiative that seeks inclusion through a digital tool made by through a machine learning model (LSM Model) with the purpose of creating a new way of
communication that facilitates the interaction between people with hearing disabilities and hearing people in real times. This model will be able to translate words from the Mexican sign language into Spanish written and vice versa in real time.
Вдохновение: The lack of education and tools about Mexican Sign Language to improve the communication and experience of hearing impaired people in Mexico, has led us to create awareness and promote the inclusion of this problem through a digital platform.
Продолжительность проекта: 6 months on Universidad de Montery and Monterrey City in México
Участники команды: Saeli Seira Sáenz
Alana Betanzo Carriles