Site icon Полезные статьи от Бюро переводов iTrex

Искусственный интеллект и язык жестов: что получится, если их объединить?

Искусственный интеллект и язык жестов: что получится, если их объединить?

Мы в Бюро переводов iTrex очень любознательные и постоянно следим за новейшими исследованиями в области лингвистики и языкознания. Ну а вдруг произойдет какой-нибудь суперпрорыв, а мы пропустили? Не годится!

Мы уже поднимали тему того, как развиваются и эволюционируют языки. Прочитать можно здесь >>>

И вот появилось кое-что новенькое, чем мы с вами и решили поделиться!

Очевидно, что лингвистам трудно прийти к единому мнению о том, как и почему развиваются языки. Уже столько версий существует! Но с помощью искусственного интеллекта (ИИ) они, возможно, смогут это сделать.

Пройдите за 3 минуты короткий квиз в нашем телеграм-боте и получите бесплатный тестовый перевод и скидку 10%!

Начнем?

В новом исследовании, посвященном языку жестов, была предпринята попытка структурно смоделировать, как язык формируется под влиянием людей, которые используют его для общения. «Языки жестов – это уникальная возможность узнать, как тело формирует структуру языка, потому что они поддаются иному набору перцептивных и моторных способностей, чем «разговорные» языки», – пишут авторы исследования.

Наоми Казелли из Бостонского университета обнаружила, что сложные для понимания знаки языка жестов – редкие или когда руки принимают необычное положение – делаются ближе к лицу жестикулирующего, чтобы привлечь внимание собеседника. Напротив, для изображения более простых знаков, руки убираются дальше от лица, часто находясь лишь в периферийном зрении воспринимающего.

Изображение Unsplash

Чтобы прийти к таким выводам, Казелли вместе с исследователями из Сиракузского университета и Рочестерского технологического института изучили эволюцию языка жестов с помощью искусственного интеллекта, проанализировав видеозаписи более 2500 знаков из ASL-LEX, крупнейшей в мире интерактивной базы данных языка жестов.

В результате ученые пришли к выводу, что язык жестов со временем эволюционировал, чтобы людям было легче распознавать знаки. «Каждый раз, когда мы используем слово, оно немного меняется, – рассказала Казелли. – Слова, для «произношения» которых требовались сложные знаки, менялись так, чтобы воспринимающему человеку было легче их увидеть и распознать: говорящий подносил руки все ближе и ближе к лицу».

Любопытно, что для оценки положения тела и рук жестикулирующего команда использовала алгоритм ИИ. «Мы передавали видео в алгоритм машинного обучения, который использует компьютерное зрение, чтобы определить, где находятся ключевые точки тела. Затем смотрели, где находились руки по отношению к лицу в каждом знаке».

И чтобы выводы об упрощении языка жестов с течением времени получились достоверными, исследователи сопоставили эти данные с данными из базы ASL-LEX о том, как часто используются знаки и каково положение рук при изображении каждого отдельного знака. Оказалось, что многие простые знаки, такие как знак для слова «дети», делаются дальше от лица, по сравнению со знаками, где требуется более сложное положение рук, например, для слова «свет».

Изображение Unsplash

Казелли считает, что понимание того, как работают языки жестов, может помочь улучшить образование глухих, и надеется, что результаты исследования привлекут внимание к разнообразию человеческих языков и удивительным способностям человеческого мозга.»Если мы изучаем только разговорные языки, то трудно отделить то, что относится к языку в целом, от того, что характерно для слухо-оральной модальности. Языки жестов дают прекрасную возможность узнать о том, как работают все языки, – отметила Казелли. – Теперь с помощью ИИ мы можем манипулировать большим количеством видео на языке жестов и проверять эти вопросы эмпирически».

Пройдите за 3 минуты короткий квиз в нашем телеграм-боте и получите бесплатный тестовый перевод и скидку 10%!

Начнем?

И все-таки искусственный интеллект неотделим от языков. Хотя вряд ли в ближайшем будущем, а возможно, что и никогда, виртуальные переводчики заменят живых людей, все-таки значимость ИИ при изучении процессов, происходящих при развитии и в структуре языка, сложно переоценить. Мы в Бюро переводов iTrex пока не переводим с языка жестов, но можем перевести с практически с любого разговорного. Так что, если вам нужен перевод, не стесняйтесь – обращайтесь! Мы с радостью вам поможем. Просто напишите на info@itrex.ru или позвоните по телефону +7 495 739-5696!


Часто задаваемые вопросы

Какие факторы влияют на эволюцию языка жестов?

Одним из важнейших факторов, влияющих на эволюцию языка жестов, является удобство восприятия. Сложные знаки, которые трудно понять, со временем упрощаются, чтобы их было легче распознавать.

Другими факторами, которые могут влиять на эволюцию языка жестов, являются:

Какие еще есть преимущества использования искусственного интеллекта для изучения языка жестов?

Например, ИИ можно использовать для:

Каковы возможные будущие направления исследований в области языка жестов?

Исследователи продолжают изучать, как язык жестов эволюционирует и как его можно улучшить. Некоторые из возможных будущих направлений исследований включают:

Первая версия этой статьи опубликована 18 мая, 2022 @ 16:27

Exit mobile version