Science and Innovations in MedicineScience and Innovations in MedicineНаука и инновации в медицине2500-13882618-754XFSBEI of Higher Education SamSMU of Ministry of Health of the Russian Federation2155010.35693/2500-1388-2016-0-3-72-76ArticlesСтатьиResearch ArticleDEVELOPMENT OF EYE-TRACKING BASED SYSTEMS FOR ALTERNATIVE AND AUGMENTATIVE COMMUNICATIONРАЗРАБОТКА СИСТЕМЫ АЛЬТЕРНАТИВНОМ И ДОПОЛНЕННОЙ КОММУНИКАЦИИ НА ОСНОВЕ РЕГИСТРАЦИИ ДВИЖЕНИЯ ГЛАЗBalovnevD AБаловневД А

division manager, JSC «Institute of Electronic Control Computers n. a. I. S. Bruk».

начальник отдела ПАО «ИНЭУМ им. И.С. Брука».

balovnev_d@ineum.ruZnaykoG GЗнайкоГ Г

PhD, deputy general manager, JSC «Institute of Electronic Control Computers n. a. I. S. Bruk»

к.т.н., зам. гендиректора ПАО «ИНЭУМ им. И.С. Брука».

znayko_g@ineum.ruJoint Stock Company “Institute of Electronic Control Computers n. a. I. S. Bruk”ПАО «Институт электронных управляющих машин им. И.С. Брука»1509201613NO3 (2016)№3 (2016)727610032020Copyright ©; 2016, Balovnev D.A., Znayko G.G.Copyright ©; 2016, Баловнев Д.А., Знайко Г.Г.2016Balovnev D.A., Znayko G.G.Баловнев Д.А., Знайко Г.Г.https://creativecommons.org/licenses/by/4.0https://innoscience.ru/2500-1388/article/view/21550

Rehabilitation of people with communication impairments is a socially important issue in Russia. Currently, there are no high-tech alternative and augmentative communication devices on the Russian market. On creation of such devices, a need arises for a model which structures any occurring communication impairment. The article sets out the structure of an alternative model of speech production developed on the basis of Levelt’s model of speech production. Practical application of the developed model is shown in the course of designing a high-tech platform for alternative and augmentative communication.

Одной из социально значимых проблем в России является реабилитация людей с нарушениями коммуникативных возможностей. В настоящее время на российском рынке отсутствуют высокотехнологичные устройства альтернативной и дополненной коммуникации. При создании подобных устройств возникает потребность в модели, структурирующей возникающие коммуникативные нарушения. В статье приведена структура альтернативной модели порождения высказываний, разработанная на базе модели порождения высказываний Левелта. Показано практическое применение разработанной модели при проектировании высокотехнологичной платформы альтернативной и дополненной коммуникации.

augmentative and alternative communicationspeech production modeleye trackingvideo-oculographybrain-computer interfaceальтернативная и дополненная коммуникациямодель порождения высказыванийрегистрация движения глазвидеоокулографияинтерфейс «мозг-компьютер»Стивен фон Течнер. Введение в альтернативную и дополнительную коммуникацию: жесты и графические символы для людей с двигательными и интеллектуальными нарушениями, а также с расстройствами аутического спектра. М., Теревинф, 2014Tobii Annual Report 2014. Available at: http://www.tobn. com/siteassets/tobii-group/investor-relations/tobii_annual_ report_2014_en.pdf/?v=1Carlos G Pinheiro Jr. Alternative communication systems for people with severe motor disabilities: a survey. Bio Medical Engineering On Line. 2011; 10:30.doi: 10.1186/1475-925X-10-31. Available at: http://www.biomedical-engineering-online. com/content/10/1/31. Accessed October 10, 2016Fager S, Beukelman D, Karantounis R, Jakobs T. Use of safe-laser access technology to increase head movement in persons with severe motor impairment: A series of case reports. AAC: Augmentative and Alternative Communication. 2006 Sep; 22(3):222-229. doi: 10.1080/07434610600650318Borgestig M, Sandqvist J, Parsons R, Falkmer T, Hemmingsson H. Eye gaze performance for children with severe physical impairments using gaze-based assistive technology - A longitudinal study. Assistive Technology. 2016;28(2):93-102. doi:10.1080/10400435.2015.1092182Wolpaw JR, Birbaumer N, McFarland DJ, Pfurtscheller G, Vaughan TM. Brain-computer interfaces for communication and control. Clin Neurophysiol. 2002 Jun;113(6):767-91Pasqualotto E, Matuz T, Federici S, Ruf CA, Bartl M, Olivetti Belardinelli M, Birbaumer N, Halder S. Usability and Workload of Access Technology for People With Severe Motor Impairment: A Comparison of Brain-Computer Interfacing and Eye Tracking. Neurorehabil Neural Repair. 2015 Nov-Dec; 29(10):950-7. doi: 10.1177/1545968315575611Kathner I, Ku bler A, Halder S. Comparison of eye tracking, electrooculography and an auditory brain computer interface for binary communication: a case study with a participant in the locked-in state. Journal of Neuro Engineering and Rehabilitation. 2015, 12:76. doi: 10.1186/s12984-015-0071-z. Available at: https://jneuroengrehab.biomedcentral.com/ articles/10.1186/s12984-015-0071-z. Accessed 10.10.2016Томассело М. Истоки человеческого общения. М.: Языки славянских культур, 2011Light J, McNaughton D. From Basic to Applied Research to Improve Outcomes for Individuals Who Require Augmentative and Alternative Communication: Potential Contributions of Eye Tracking Research Methods. Augmentative and Alternative Communication. 30:2, 99-105, doi: 10.3109/07434618.2014.906498Шишкин С. Л.,Козырский Б. Л., Трофимов А.Г., Нуждин Ю. О., Федорова А. А., Свирин Е. П., Величковский Б. М.. Улучшение работы интерфейса «глаз-мозг-компьютер» при использовании частотных компонентов электроэнцефалограммы. Вестник Российского государ-ственного медицинского университета. (2):39-44, 2016