Теперь новое программное обеспечение, разработанное в Массачусетском технологическом институте, можно использовать, чтобы помочь людям практиковать свои навыки межличностного общения до тех пор, пока они не почувствуют себя более комфортно в таких ситуациях, как собеседование при приеме на работу или первое свидание. Программное обеспечение, называемое MACH (сокращение от My Automated Conversation coacH), использует созданное компьютером экранное лицо, а также программное обеспечение для анализа и синтеза лица, речи и поведения для имитации разговоров лицом к лицу. Затем он предоставляет пользователям обратную связь об их взаимодействиях.Исследование проводилось докторантом MIT Media Lab М. Эхсаном Хоке, который говорит, что эта работа может быть полезна широкому кругу людей.
Документ, документирующий разработку и тестирование программного обеспечения, был принят для презентации на Международной совместной конференции 2013 года по повсеместным и повсеместным вычислениям, известной как UbiComp, которая состоится в сентябре.«Межличностные навыки — ключ к успеху на работе и дома», — говорит Хок. «То, как мы выглядим и как мы передаем свои чувства другим, определяет нас. Но нет особой помощи, чтобы улучшить этот сегмент взаимодействия».
Многие люди, страдающие социальными фобиями, говорит Хок, хотят «иметь возможность иметь какую-то автоматизированную систему, чтобы они могли практиковать социальные взаимодействия в своей собственной среде… Они хотят контролировать темп взаимодействия, практиковаться столько раз, сколько захотят. , и владеть их данными ".По словам Хоука, программное обеспечение MACH предлагает все эти функции.
Фактически, в рандомизированных тестах с 90 юниорами из Массачусетского технологического института, которые добровольно участвовали в исследовании, программное обеспечение показало свою ценность.Сначала испытуемые — все они были носителями английского языка — были случайным образом разделены на три группы. Каждая группа участвовала в двух смоделированных собеседованиях с интервалом в неделю с консультантами по вопросам карьеры Массачусетского технологического института.
Но между двумя интервью, без ведома консультантов, студенты получили помощь: одна группа посмотрела видео с советами на собеседовании, а вторая группа провела практическое занятие с имитацией интервьюера MACH, но не получила никакой обратной связи, кроме видео их собственного выступления. . Наконец, третья группа использовала MACH, а затем просмотрела видеоролики о себе, сопровождаемые анализом таких показателей, как то, насколько они улыбались, насколько хорошо они поддерживали зрительный контакт, насколько хорошо они модулировали свои голоса и как часто они использовали слова-вставки, такие как " типа "в основном" и "ммм".Оценки, проведенные другой группой консультантов по вопросам карьеры, показали статистически значимое улучшение у членов третьей группы по таким критериям, как «выглядит взволнованным работой», «общей производительностью» и «порекомендуете ли вы нанять этого человека?» Для сравнения, во всех этих категориях не было значительных изменений для двух других групп.Программное обеспечение, лежащее в основе этих улучшений, разрабатывалось более двух лет в рамках докторской диссертации Хока с помощью его научного руководителя, профессора медиаискусств и наук Розалинд Пикар, а также Матье Куржона и Жан-Клода Мартена из LIMSI-CNRS во Франции, Бильж.
Мутлу из Висконсинского университета и студентка Массачусетского технологического института Сумит Гогиа.Разработанная для работы на обычном ноутбуке, система использует веб-камеру компьютера для отслеживания мимики и движений пользователя, а его микрофон — для записи речи объекта. Затем система MACH анализирует улыбки пользователя, жесты головы, громкость и скорость речи, а также, среди прочего, использование слов-заполнителей.
Автоматический интервьюер — трехмерное смоделированное лицо в натуральную величину — может улыбаться и кивать в ответ на речь и движения субъекта, задавать вопросы и давать ответы.Хотя эта первоначальная реализация была направлена на помощь кандидатам на работу, Хок говорит, что обучение работе с программным обеспечением может быть полезным во многих видах социального взаимодействия.
Получив этим летом докторскую степень в области медиаискусств и наук, осенью Хок станет доцентом кафедры информатики в Университете Рочестера.