Подтвердить что ты не робот

Технология общения с кем-то с выразительной афазией?

У члена семьи был инсульт несколько лет назад и теперь имеет выразительную афазию. Она понимает, что ей говорят, познает происходящее, но не может выразить себя. Она может ответить на вопросы "да/нет" (вы хотите пойти по магазинам? Ищете ли вы свои серьги?) Она, однако, не умеет читать (английский не является ее родным языком, и она не читала хинди для десятилетия.)

Я - технолог в семье, и я собираюсь придумать что-то, что поможет нам общаться. Идея состоит в том, чтобы иметь какую-то книжку с картинками, где она может указать на то, что она хочет.

Мой первый вопрос: существует ли какая-то вспомогательная технология для людей с экспрессивной афазией? Это могут быть аппаратные или программные устройства?

Если нет, тогда такое программное обеспечение не представляется сложным писать. Моя первоначальная мысль заключалась в том, чтобы иметь интерфейс с картинками - возможно, разделенный по категориям (еда, шоппинг) - где она может указывать на отдельную картинку, чтобы указать, что ей нужно. Мы могли бы легко добавить больше предметов с таким программным обеспечением, и у нас мог бы быть интерфейс, где она (или мы) могла бы "переворачивать страницы".

Это говорит о том, что лучшим решением будет использование сенсорного экрана, а не мыши. Было бы очень трудно научить ее нацеливать мышь или находить ключи на клавиатуре.

Мы думаем, может быть, получить планшет и написать базовое программное обеспечение. Но планшетные компьютеры дорогие и хрупкие - я не уверен, что он сможет выдержать разливы или быть сбитым в доме престарелых.

Итак, мой следующий вопрос: какие устройства, подобные таблеткам, там, где я могу программировать? Я ничего не знаю об оборудовании, но если есть что-то, то мы можем его заказать. Что было бы безопасным и долговечным для такого проекта? Мы могли бы что-то сделать на iPod или сотовом телефоне, но я чувствую, что этот интерфейс будет слишком маленьким.

И наконец, есть ли у кого-нибудь опыт работы с подобными вспомогательными технологиями? Что я могу не предвидеть при разработке такой системы?

изменить

Я добавил (довольно здоровенный!) баунти. Я бы хотел открыть этот вопрос для любых предложений, комментариев и опыта, которые могут иметь люди. Это довольно реальный и важный проект, поэтому, пока мы будем (разрабатываем) решение, любые идеи будут особенно полезны.

Сейчас план состоит в том, чтобы установить экран в своей комнате. Мы либо научим ее использовать трекбол, либо использовать сенсорную панель, увидев, что она может использовать с простым прототипом. Затем программное обеспечение похоже на старую колоду "гиперкарта":

----------------------------------------------------------------
|   --------------          --------------                     |
|   |  Clothes   |          |    Food    |      ...            |       
|   --------------          --------------                     |
|                                                              |
|    Pic of item 1     Pic of item 2     Pic of item  3        |
|                                                              |
|                                                              |
|                                                              |
|                                                              |
|    Pic of item 4     Pic of item 5     Pic of item  6        |
|                                                              |
|                                                              |
|                                                              |
|                                                              |
|  <-Back                                       Next->         |
----------------------------------------------------------------

commentcommentcomment!

4b9b3361

Ответ 1

Как насчет хорошей старомодной бумажной книги? (Это не должно быть snarky). Интерфейс с сенсорным экраном, как вы говорите, будет очень круто, но пока вы можете распечатать несколько страниц с наиболее распространенными изображениями и ламинировать их. Они будут иметь мгновенное время загрузки, быть прочными перед лицом разливов/капель, и достаточно дешевы, чтобы вы могли иметь их в каждой комнате плюс один в машине.

Я не предлагаю, чтобы это было окончательное решение, но в качестве промежуточного шага вы получаете много функциональных возможностей для не больших усилий и даже можете служить прототипом, который дает вам представление о том, как ваш член семьи будет взаимодействовать с вашим устройством, Это также может быть поручено не программисту, когда вы работаете над решением для любителей.

Ответ 2

Вы могли бы рассмотреть EEG Headsets как платформу исследования. В последние годы многое сделано в такой степени, что сухие ЭЭГ-гарнитуры теперь могут быть запрограммированы так, чтобы связывать отдельные мозговые волны с сообщениями. Вы должны пройти калибровку, так как у двух человек не было подобных мозговых волн (подобно отпечаткам пальцев), но после этого вы должны думать, что бы вы ни хотели. Кроме того, они не будут препятствовать языковым барьерам, так как ее мысль будет языковой агностикой для самого устройства.

Я даже видел эти управляющие кресла-коляски и видеоигры.

У Emotive есть SDK за $299 гарнитура.

Ответ 3

Другая возможность - это что-то вроде этого устройства:

http://www.aphasia.com/patients/product.aspx

пользователь создает предложения/фразы из значков, которые представляют понятия или фразы. фразы воспроизводятся синтезированным голосом.

есть несколько планшетов, предназначенных для прочных приложений и медицинских применений. Один список здесь:

http://www.tabletpc2.com/CompareRugged.htm

И некоторые планшеты, такие как Dell Latitude XT2 XFR, также прочны.

iphone или Android могут использоваться как платформа с сенсорным экраном, но там не так много экранной недвижимости.

Ответ 4

Я не могу много помочь с программным обеспечением, но в качестве аппаратной платформы вы можете рассмотреть Nokia N800 "Интернет-планшет". У меня был один на пару лет, и это в основном платформа Linux с gtk. Подробнее о программном обеспечении на maemo.org. Главное в Nokia, что дисплей и сенсорный экран выдающиеся. (Радиоприемники также выдающиеся, но не столь важные для вас.)

Если вы просто хотите начать работу с некоторыми фотографиями, Quiver Image Viewer является родным приложением Maemo и очень хорошо справляется с управлением большими количество фотографий. Ваш родственник будет относительно легко указать на фотографии того, что она хочет.

Новый N800 стоит $179 по состоянию на декабрь 2009 года. Они продаются на eBay около $100. Колчан свободен.

Ответ 5

Это довольно интересный вопрос, один из членов моей семьи также пострадал от нескольких ударов, но он все еще может говорить довольно хорошо, поэтому на самом деле я в основном отвечал из-за ваших вопросов о оборудовании/программировании, потому что у меня есть друг, который также отключен и не может использовать обычное готовое оборудование, потому что в противном случае он неизбежно нарушит его довольно быстро (синдром Туретта). Независимо от этого, я нашел несколько вещей на линии, специально связанных с афазией, поэтому я добавил эти ссылки здесь, но у меня нет личного опыта ни с одной из упомянутых компаний или продуктов.

Мой первый вопрос: существует ли какая-то вспомогательная технология для людей с экспрессивной афазией? Это могут быть аппаратные или программные устройства?

Мои данные показывают, что "аппаратные" решения для людей, которые с трудом могут сформулировать себя, включают в себя:

Решения, специально предназначенные для пациентов с афазией, включают:

Вы можете найти этот обзор, который гласит:

Существует новый мобильный аксессуар под названием SmallTalk для тех, кто страдает от Aphasia [...]. Это устройство очень портативное, легкое и удобное для карманных устройств и выгодно для общения и практики на ходу. Это устройство позволяет пользователям в любое время носить с собой набор фраз, значков и видеороликов. Устройство речевой генерации Lingraphica в сочетании с SmallTalk обеспечивает полную всестороннюю систему обмена афазией

И интересно также:

Устройство Lingraphica может быть возмещено через Medicare. Он приходит с мобильным аксессуаром SmallTalk для испытания без обязательств

Обзор содержит демонстрационные видеоролики, но также есть канал YouTube, показывающий все в действии: http://www.youtube.com/user/Lingraphica

Кроме того, вы можете проверить следующее сообщение в блоге, в котором перечислены другие производители таких устройств (блог также содержит некоторые обзоры): http://aphasiainfo.blogspot.com/2009/03/augmentativealternative-communication.html

  • Dynavox
  • Меркурий
  • Say-It! Sam
  • Lingraphica

Терапевтические программные пакеты, специально предназначенные для людей с афазией, рассматриваются здесь: http://www.aphasianow.org/Aphasia_Recovery/Aphasia_therapy_software,_aids~211/

По программному обеспечению я мог бы найти что-то под названием SentenceShaper":

SentenceShaper® - это инновационная запатентованная программа, которая помогает людям с афазией общаться в собственных голосах.

Мы думаем, может быть, получить планшет и написать базовое программное обеспечение. Но планшетные компьютеры дорогие и хрупкие - я не уверен, что он сможет выдержать разливы или быть сбитым в доме престарелых.

Если бы я был прототипом/адаптировал такую ​​пользовательскую систему, я лично рассмотрел бы промышленные компьютеры (в частности, планшетные ПК/ПК), то есть те, которые являются "прочными" или предназначены для использования в наружных или даже военных целях.

Обычно они очень прочны и предназначены для использования в тяжелых условиях. Другими словами, они предназначены для использования в этих условиях, и поэтому у вас даже есть гарантия на этот тип использования.

Итак, мой следующий вопрос: какие устройства, подобные таблеткам, там, где я могу программировать?

Пока вы нацелены на что-то, что основано на PC/WinTel, то есть которое запускает любую "текущую" 32-битную версию Windows (т.е. >= Win98), вы должны иметь возможность писать программное обеспечение с помощью стандартных инструментов, таких как .NET, Java, Python и т.д.

Лично я хотел бы, однако, воздерживаться от выбора каких-либо экзотических платформ, особенно на этапе прототипирования. Это сделало бы его излишне дорогостоящим и сложным.

Я ничего не знаю об оборудовании, но если есть что-то, мы можем его заказать. Что было бы безопасным и долговечным для такого проекта? Мы могли бы что-то сделать на iPod или сотовом телефоне, но я чувствую, что этот интерфейс будет слишком маленьким.

И IPhone или сотовый телефон обычно не предназначены для использования в таких "тяжелых" условиях, поэтому я бы воздержался от прототипирования/разработки чего-либо на этих платформах, но также из-за вероятных недостатков интерфейса, которые вы в конечном итоге столкнетесь.

В то время как вы, возможно, сможете разработать что-то полезное, вы наверняка столкнетесь с ограничениями на платформу, независимо от отсутствия поддержки аппаратного обеспечения, состояния экрана или чего-то еще.

Аналогично, для разработки любого мобильного телефона потребуется использование специфичных для конкретного телефона SDK/API и/или других зависимостей конкретного поставщика, то есть ваше решение не будет особенно переносимым, оно будет очень специфичным для платформы и ограничено функции, предоставляемые этой платформой.

Прочные планшетные ПК:

Итак, в то время как промышленные/жесткие планшетные ПК (с сенсорными экранами) действительно довольно дорогие компьютеры (обычно в диапазоне от 2000 до 5000 долларов США), более старые (то есть отремонтированные, с менее современными спецификациями) обычно можно получить на ebay или другие подержанные аппаратные средства - в диапазоне от 200 до 500 долларов США или даже меньше).

Если размер, вес, мобильность, мощность аккумулятора и т.д. в конечном итоге станут решающими факторами, может оказаться лучшим вариантом для надежного мини-ноутбука (sub-ноутбук), но разработка для промышленного планшетного ПК гарантирует, что ваша работа переносится и может быть легко перенесена на другую цель.

Прочные планшетные ПК рассмотрены здесь.

Кроме того, для ваших дальнейших исследований, согласно веб-сайту The National Aphasis Association, эти устройства называются "Устройства расширенной связи":

Дополнительное коммуникационное устройство - это фраза, придуманная для описания различных вспомогательных средств связи. Он может относиться к низкотехнологичному устройству (например, к карточке с алфавитом) или к высокотехнологичному устройству (например, компьютеру, управляемому глазом, мигает его пользователем). Важнейшей задачей является согласование потребностей и способностей пользователя к правильному устройству.

Возможно, что-то из этого полезно, все самое лучшее!

Ответ 6

Как вы сказали, интерфейс не кажется сложным в теории, и он может уже существовать... Я оставляю эту часть другим.

Я бы хотел дать вам предложения с точки зрения HW.

  • сенсорные мониторы уже доступны, и они даже дешевы. Например. HP.
  • существуют полноценные сенсорные планшетные компьютеры, но они, как правило, дороги. Например. Dell
  • читатели с сенсорным экраном могут быть гораздо более дешевой альтернативой 2. (и много портативных, чем 1.). Но вам может потребоваться много взломать, так как они обычно TiVoizated. Ниже приведен список таких устройств
  • есть много rumors о выпуске Apple планшета в 2010 году - так что лучше всего будет ждать, прежде чем инвестировать в лот денег в hw

Ответ 7

Пожалуйста, не удивляйтесь, но все это довольно дорого.

Оборудование
Так называемые болтуны существуют. Устройства, на которых вы нажимаете кнопку, и произносят соответствующее слово/предложение. С помощью этих устройств вы также можете позвонить человеку, который находится в соседней комнате. Найдите alpha и delta talkers или посмотрите здесь.

Программное обеспечение
Для программных решений для ПК вы можете посмотреть MindExpress и Сетка.

Ответ 8

Для этой цели у локального человека есть своего рода электронная книга с картинками. Я никогда не рассматривал его подробно. Если вы обратитесь к местным экспертам, занимающимся умственными недостатками, я уверен, что вы можете найти свой путь к тому же устройству.

Ответ 9

Интересно, что я видел именно такую ​​систему, которая используется недавно, но, возможно, не там, где вы ожидаете.

Woolworths (в Австралии) недавно представила выписки для самообслуживания, где вы можете сканировать свой материал через считыватель штрих-кода и в основном вытаскивать человека из цикла.

Масштабы на каждой станции и один человек, контролирующий 8 контрольных станций, используются для обеспечения того, чтобы вы не разорвали их, и теперь вы можете подобрать эти восемь проверок в пространстве, которое имело два. Но это действительно в стороне.

Мясо этого ответа - это вещи, которые не имеют штрих-кодов (в основном, мясные деликатесы, фрукты и овощи). Для этого вы размещаете их на весах, а затем используйте именно ту систему, которую вы описываете: выбирая широкую категорию и, в конечном счете, сверлящую к определенному предмету (фрукты/яблоки/розовые леди, овощи/зеленый/горох/чеканит или горох/мясо/нарезанная ветчина/ветчина/шампанское, например).

Я готов поклясться, что Woolies провела большую нагрузку на исследования, прежде чем навязать это широкой публике, поэтому, возможно, это одно из лучших решений.

Трюк состоит в том, чтобы выяснить наиболее эффективный способ получения от 3 или 4 вариантов изображения к когерентному предложению. Один пример, который сразу приходит в голову, - это разница между "Я хочу обоих" и "О, Боже мой, тебе действительно нужна ванна". Использование одних и тех же изображений, но только наличие стрелки, указывающей либо на члена вашей семьи, либо на участника, с которым они разговаривают, может быть одним из решений.

По этой причине (и многим другим), вероятно, вам следует как можно скорее настроить часть файла изображения в цепочку изображений. У вас будет много ложных запусков, поэтому это позволит значительно облегчить вашу рабочую нагрузку.

Что касается разработки, я бы сделал это на обычной машине (с мышью и клавиатурой), но сделаю все, что в программном обеспечении зависит от щелчков мыши. Сенсорный сенсорный экран будет неотличим от мышиного при условии, что вы делаете изображения достаточно большими и оставляете достаточное расстояние между ними. Люди, пишущие программы для iPhone, на самом деле не пишут их на iPhone - нет причин, по которым вам следует разрабатывать планшет.

Вам понадобится один для тестирования в конце концов, но это не должно произойти сразу. Вы даже можете протестировать свой член семьи без сенсорного экрана. Просто сидите с ними, и вы щелкаете мышью в соответствующем месте, когда они касаются экрана. Таким образом, вы можете отложить затраты до тех пор, пока проект не будет хорошо (и вы более уверены в успехе).

И вам не нужно слишком беспокоиться о надежности. Вы можете получить очень надежные портативные ПК. Я проделал некоторую работу для Telco около десяти лет назад, которая включала в себя получение рабочих мест для рабочей силы на местах (те, которые фиксируют ваши телефонные трубки или локальную петлю), и они были самой грубой группой пользователей, которых я когда-либо видел.

Раньше мы использовали машины, помеченные как "проблема связи", которые были покрыты грязью, потому что "Джо" бросился через открытое окно фургона в коровник, потому что он не мог связаться с базовой станцией: -)

Ответ 10

Эмотив упоминался ранее.

Вот немного информации со своего сайта:

Expressiv™ Suite

В пакете Expressiv используются сигналы, измеренные neuroheadset, для интерпретации лицевых выражений игрока в режиме реального времени. Это обеспечивает естественное улучшение игрового взаимодействия, позволяя игровым персонажам оживать. Когда игрок улыбается, их аватар может имитировать выражение еще до того, как они осознают свои собственные чувства. Искусственный интеллект теперь может реагировать на игроков естественным путем, до тех пор, пока люди до сих пор не смогли.

Affectiv™ Suite

Набор Affectiv контролирует эмоциональные состояния игроков в реальном времени. Он обеспечивает дополнительное измерение в игровом взаимодействии, позволяя игре реагировать на эмоции игрока. Символы могут трансформироваться в ответ на ощущение игрока. Музыка, освещение сцены и эффекты могут быть адаптированы для повышения производительности для игрока в режиме реального времени. Набор Affectiv можно использовать для мониторинга состояния ума игроков и позволить разработчикам настраивать трудности в соответствии с каждой ситуацией.

Cognitiv™ Suite

Набор Cognitiv читает и интерпретирует сознательные мысли и намерения игрока. Геймеры могут манипулировать виртуальными объектами, используя только силу своей мысли! Впервые можно испытать фантазию о магии и сверхъестественной силе.


Как я понимаю, каждая из этих "люксов" доступна на другом уровне их SDK. Вам не обязательно знать аппаратное обеспечение, вы просто должны знать их API.

Если вы идете с такой гарнитурой, вам понадобится довольно надежная платформа для ее запуска (на основе требований к гарнитуре разработчика):

Requirements Windows XP or Vista 2.2 GHz Dual Core CPU or faster 
1.5GB RAM 150MB Hard drive Graphic cards with 256MB memory

Что касается аппаратного обеспечения для этого, вам придется использовать Microsoft (windows embedded?), чтобы использовать свой SDK. Вы можете рассмотреть прочный ноутбук от dell. Экран будет проще для всех видеть выход.

Это очень благородный проект, и я желаю вам удачи!

Ответ 11

Некоторые предложения поздно ночью:

a) Я очень уверен, что Apple выпустит 10-дюймовое планшетное устройство с мультитач-ОС, похожее на iPhone, в ближайшем будущем. Возможно, это будет вариант и может быть покрыт мягким футляром, который защищает его от падения и повреждение.

b) iPod Touch довольно маленький. Но это имеет некоторые преимущества: b.1) Маленький! Поэтому она может взять ее с собой куда угодно. b.2) Хорошо документированный SDK для кодирования. На мой взгляд, не слишком сложно. b.3) Отличный сенсорный экран (намного лучше, чем все, что я знаю) Но это имеет большой недостаток: вам может потребоваться "джейлбрейк", чтобы избавиться от блокирующего стартового экрана после его включения. Ей всегда нужно будет разблокировать экран и найти значок приложения в документе, каждый раз, когда она хочет общаться. Вероятно, джейлбрейк может обойти эту нагрузку.

c) Цифровая фоторамка с кнопками вперед/назад. Просто создавайте изображения, например, открытки для разных тем. Картина с одеждой, картинка с туфлями, картинка с действиями... она могла проскочить через них, чтобы найти правильный. Кроме того, это аппаратное обеспечение не слишком сложное, поэтому может быть возможно купить устройство и разработать для нее более подходящий футляр с гораздо большими кнопками и более безопасным от падения/повреждения.

d) Tobii, устройство отслеживания глаз. но все еще тихо. Возможно, это позволяет ей общаться даже намного быстрее. Альтернатива: на рынке есть очки, которые могут проецировать изображение перед левым или правым глазом, в то время как они остаются прозрачными. Я немного помню, что было устройство дополненной реальности, подобное встроенному отслеживанию глаз. Что-то вроде этого, в сочетании с передачей изображения, которое она видит на портативное устройство, может привести к очень быстрой связи. Но опять же, очень дорого и сложно развиваться.

Возможно, я начну с iPod touch, который просто покажет изображения. Тот, с которым она хочет общаться, может включить устройство для нее. Затем вы можете использовать встроенное приложение для фотографий, которое содержит обзор фотографий с квадратным эскизом и добавление к нему сложенных изображений. Это очень просто сделать, и устройство тихо доступно по сравнению с другими решениями. Она может быстро перелистывать изображения, а затем указывать на то, что она имеет в виду. Но также было бы нелегко создать более подходящее приложение, в котором будут отображаться миниатюры для различных категорий. Я думаю, что категоризация здесь действительно важна. IPod touch также имеет еще одно преимущество: если вы что-то разработаете для этого, многие другие могут легко воспользоваться им, просто загрузив его из магазина приложений.

Theres еще одно преимущество с iPod touch: если Apple выпустит планшет, и я уверен, что 99,999% будет, вы сможете с легкостью переносить свое программное обеспечение на это устройство. И, возможно, вы также можете воспользоваться сенсорными жестами, чтобы очень быстро перейти в категорию карточек с картинками. Благодаря акселерометрам возможны даже движения-жесты. Я думаю, что экран iPod touch может содержать не более 6 предметов за раз. Зависит от того, насколько мала таргетинг табуляции.

Кстати: я не врач, и я не очень много знаю о медицине. Но я слышал отличные истории о технике под названием "Bio Feedback". Возможно, вы могли бы также подумать о разработке устройства/приложения Bio Feedback, которое позволяет ей повторно тренировать свои навыки. Кроме того, музыкальная терапия все еще находится на ранней стадии исследования, но уже продемонстрировала большой успех. Возможно, это также хорошая идея подумать о включении звука/музыки.

Изменить: я вижу, что многие люди здесь предлагают хорошие идеи. Желаю вам наилучшего успеха в вашем проекте и надеюсь, что вы поделитесь своим решением! Возможно, вы можете найти связанных людей, которые готовы совместно инвестировать в ваши усилия, возможно, в форме полезной организации или фонда, чтобы развить что-то действительно потрясающее.

Ответ 12

http://www.pecsusa.com/

Это обычно используемый предмет в мире терапии.