Модальность (взаимодействие человека с компьютером) - Википедия - Modality (human–computer interaction)

Не путать с Режим (пользовательский интерфейс).

В контексте взаимодействие человека с компьютером, а модальность это классификация отдельного независимого канала сенсорной ввод, вывод между компьютером и человеком.[1]Система считается унимодальной, если в ней реализована только одна модальность, и мультимодальный если их больше одного.[1] Когда для некоторых задач или аспектов задачи доступны несколько модальностей, считается, что система имеет перекрывающиеся модальности. Если для задачи доступно несколько модальностей, говорят, что в системе есть избыточные модальности. Несколько модальностей могут использоваться в комбинации для предоставления дополнительных методов, которые могут быть избыточными, но более эффективно передавать информацию.[2] Модальности обычно можно определить в двух формах: модальности человек-компьютер и компьютер-человек.

Компьютерно-человеческие модальности

Компьютеры используют широкий спектр технологий для связи и отправки информации людям:

Любой человеческий смысл можно использовать как компьютерную модальность для человека. Тем не менее, способы видя и слушание являются наиболее часто используемыми, поскольку они способны передавать информацию с более высокой скоростью, чем другие способы, от 250 до 300[3] и от 150 до 160[4] слов в минуту, соответственно. Хотя тактика обычно не реализуется как компьютерно-человеческая модальность, она может достигать в среднем 125 слов в минуту[5] за счет использования обновляемый дисплей Брайля. Другими более распространенными формами тактики являются вибрации смартфона и игрового контроллера.

Человеко-компьютерные модели

Компьютеры могут быть оснащены различными типами устройства ввода и датчики, позволяющие им получать информацию от людей. Общие устройства ввода часто взаимозаменяемы, если у них есть стандартизованный метод связи с компьютером и предоставлять практические настройки для пользователя. Некоторые методы могут обеспечивать более богатое взаимодействие в зависимости от контекста, а наличие вариантов реализации позволяет создавать более надежные системы.[6]

С ростом популярности смартфоны, широкая публика все больше привыкает к более сложным модальностям. Распознавание речи было основным преимуществом Айфон 4С и после яблоко продукты, с введением Siri.[7] Эта технология дает пользователям альтернативный способ связи с компьютерами, когда печатать на клавиатуре менее желательно. Однако в шумной обстановке метод прослушивания не совсем эффективен. Это пример того, как определенные методы обладают разной силой в зависимости от ситуации.[8] Другие сложные методы, такие как компьютерное зрение в виде Microsoft с Kinect или другие подобные технологии могут упростить передачу сложных задач компьютеру, особенно в форме трехмерного движения.[9]

Использование нескольких модальностей

Наличие нескольких модальностей в системе дает больше аффорданс пользователям и может способствовать созданию более надежной системы. Чем больше, тем лучше доступность для пользователей, которые работают более эффективно с определенными модальностями. Когда определенные формы коммуникации невозможны, можно использовать несколько способов. Это особенно верно в случае избыточных модальностей, в которых два или более модальностей используются для передачи одной и той же информации. Определенные комбинации модальностей могут добавить к выражению взаимодействия компьютер-человек или человек-компьютер, поскольку каждая из модальностей может быть более эффективной при выражении одной формы или аспекта информации, чем другие.

Существует шесть типов сотрудничества между модальностями, и они помогают определить, как сочетание или слияние модальностей работают вместе для более эффективной передачи информации.[10]

  • Эквивалентность: информация представлена ​​несколькими способами и может быть интерпретирована как одна и та же информация
  • Специализация: когда определенный вид информации всегда обрабатывается одним и тем же способом
  • Резервирование: несколько модальностей обрабатывают одну и ту же информацию
  • Дополнительность: несколько модальностей берут отдельную информацию и объединяют ее
  • Передача: модальность производит информацию, которую потребляет другая модальность
  • Параллелизм: несколько модальностей принимают отдельную информацию, которая не объединяется

Комплементарно-избыточные системы - это системы, которые имеют несколько датчиков для формирования единого понимания или набора данных, и чем эффективнее информация может быть объединена без дублирования данных, тем эффективнее взаимодействуют методы. Наличие нескольких способов связи является обычным явлением, особенно в смартфонах, и часто их реализации работают вместе для достижения одной и той же цели, например гироскопы и акселерометры, работающие вместе для отслеживания движения.[10]

Смотрите также

Рекомендации

  1. ^ а б Каррей, Фахреддин; Алемзаде, Милад; Салех, Джамиль Абу; Араб, Мо Нур (март 2008 г.). «Взаимодействие человека и компьютера: обзор современного состояния» (PDF). Международный журнал по интеллектуальному зондированию и интеллектуальным системам. 1 (1). Архивировано из оригинал (PDF) 30 апреля 2015 г.. Получено 21 апреля, 2015.
  2. ^ Паланке, Филипп; Патерно, Фабио (2001). Интерактивные системы. Дизайн, спецификация и проверка. Springer Science & Business Media. стр.43. ISBN  9783540416630.
  3. ^ Ziefle, M (декабрь 1998 г.). «Влияние разрешения дисплея на визуальные характеристики». Человеческие факторы. 40 (4): 554–68. Дои:10.1518/001872098779649355. PMID  9974229.
  4. ^ Уильямс, Дж. Р. (1998). Руководство по использованию мультимедиа в обучении, Протоколы 42-го ежегодного собрания Общества по человеческому фактору и эргономике, 1447–1451
  5. ^ «Брайль». ACB. Американский совет слепых. Получено 21 апреля 2015.
  6. ^ Бейнбридж, Уильям (2004). Беркширская энциклопедия взаимодействия человека и компьютера. ООО «Издательская группа Беркшир». п. 483. ISBN  9780974309125.
  7. ^ Эпштейн, Зак (2 ноября 2011 г.). «Говорят, что Siri является движущей силой огромных продаж iPhone 4S». Получено 21 апреля, 2015.
  8. ^ Курковский, Стан (2009). Мультимодальность в мобильных вычислениях и мобильных устройствах: методы адаптируемого использования. IGI Global. С. 210–211. ISBN  9781605669793.
  9. ^ Куросу, Масааки (2013). Взаимодействие человека и компьютера: способы и методы взаимодействия. Springer. п. 366. ISBN  9783642393303.
  10. ^ а б Грифони, Патриция (2009). Мультимодальное взаимодействие человека с компьютером и повсеместные услуги. IGI Global. п. 37. ISBN  9781605663876.