ACIONAMENTO POR SINAIS ELETRIOMIOGRFICOS DE SOFTWARE

PARA COMUNICAO ASSISTIVA

Vitor A. N. Guimares*, Nayara N. Moraes*, Eduardo L.M.Naves*, Pierre Pino**

Universidade Federal de Uberlndia, Faculdade de Engenharia Eltrica, Laboratrio de Engenharia Biomdica, Uberlndia
MG, Brasil
**
Universit Paul Verlaine de Metz, Laboratoire d'Automatique humaine et de Sciences Comportementales (LASC)
Metz France
e-mail: vitorazvdo@hotmail.com

Resumo - Neste trabalho apresenta-se uma interface

Homem-Computador (HCI) controlada atravs de sinais
eletromiogrficos (EMG) provenientes da contrao
muscular. A ferramenta desenvolvida foi testada para
controlar um sistema de comunicao assistiva (ACS)
baseado em um escaneamento automtico e acionado
atravs de clicks . Resultadosevidenciaram que o
mtododesenvolvidocontribuiu para aprimorar os
sistemas de comunicaoalternativa a fim de que
usuriosportadores de disfunoesmotoras graves e de
perda da fala (comunicao oral), possam se comunicar
de maneira mais simples.
Keywords - Comunicao Assistiva, Eletromiografia,
Interface Homem-Computador.
1

AN EMG-BASED HUMAN COMPUTER

INTERFACE DRIVING AN ASSISTIVE
COMUNICATION SYSTEM
Abstract -We present a human computer interface
(HCI)based in on-line electromyogram(EMG)from the
muscle contraction. The designed tool was designed to
control an assistive communication system (ACS)based
on automatic scanning and single clicks. Tests were
performed and results showed that the developed method
is a good alternative to extend the ACS utilization for
users
unable
to
communicate
due
to
severemotordysfunction and loss of speech.
INTRODUO
Estudos integrando conhecimentos com base nas cincias
cognitivas, inteligncia artificial e processamento de dados
tm sido realizados a fim de desenvolver alternativas para
que pessoas portadoras de disfunes motoras severas
possam se comunicar interagindo com a sociedade e
diminuindo assim, sua dependncia[1]. Um exemplo destas
disfunes motoras graves a Esclerose Lateral Amiotrfica,
doena que acomete o sistema nervoso causando perda da
funo locomotora e da fala do paciente. Outroexemplo a

Tetraplegia ou Quadriplegiadecorrente de leso na medula

espinhal que afeta os membros superiores e inferiores, alm
da musculatura do tronco. Para que pacientes portadores
destas deficincias possam desenvolver atividades bsicas de
comunicao ou interao com computadores, a
comunicao alternativa assistiva uma ferramenta essencial
que auxilia nestas tarefas.
Ao longo dos anos o desenvolvimento de sistemas
auxiliares comunicao de pessoas portadoras de
disfunes motoras tem sido investigado por pesquisadores
de diversos centros de pesquisa [2], [3], [4]. Contudo, a
produo e implementao destes sistemas geralmente um
processo altamente complexo, por envolver concepo de
hardware dedicado, processamento de dados em tempo real,
implementao de interfaces amigveis para o simples
controle do sistema pelo usurio, e desenvolvimento de
ferramentas para a traduo de aes dos pacientes em
comandos a serem interpretados pelos sistemas
computacionais. Porm, mesmo com vrios estudos e
sistemas de comunicao alternativa assistiva desenvolvidos
at o momento, a utilizao de muitos destes limitada a
grandes centros de pesquisa, devido dificuldade de uso ou
alto custo.
Em Outubro de 2006, foi consolidada uma cooperao
cientfica entre a Faculdade de Engenharia Eltrica (FEELT)
da Universidade Federal de Uberlndia e a Universidade Paul
Verlaine de Metz, da Frana. Especificamente, pesquisadores
do LASC (Laboratoire d'Automatique humaine et de
Sciences Comportementales) interagiram com pesquisadores
do Biolab (Laboratrio de Engenharia Biomdica). Foram
abordadas ento, duas sub-reas da Engenharia Biomdica:
Processamento de sinais biolgicos e Engenharia de
Reabilitao, sendo quea equipe brasileira possui experincia
na primeira rea e,o grupo francs na segunda. Portanto,
estas duas reas de conhecimento foram integradas, sendo
quea equipe francesa desenvolveu um software de
comunicao alternativa baseado em escaneamento
automticocapaz de ser acionado por comandos simples do
tipo ON/OFF.
Nesta pesquisa,foram utilizados sinais de EMG para
acionar funes oferecidas pelo software, especificamente,
sinais provenientes deum msculo facial prximoa
sobrancelha, j que estudos realizados relatam que em vrias
doenas onde h degenerao muscular, os msculos
prximos aos olhos so os ltimos a serem afetados.
Portanto, este objeto de trabalhorealizado, prope a
utilizao da eletromiografia para controle de um software de
comunicaoassistiva, que facilite o relacionamento de

pessoasportadoras de disfunesmotorasseveras
disfunesmotorassever
perderam a falacom o ambienteaoseuredor.
ambienteaoseuredor

que
.

MATERIAIS E MTODOS
Este trabalho foi dividido em duas etapas distintas de
forma que estas se integrassem ao final do mesmo para que
fosse concretizado o desenvolvimento de uma ferramenta de
comunicao auxiliar.
Inicialmente, trabalhou-se
se com a captao, anlise e
tratamentoo do sinal EMG. Posteriormente foram
desenvolvidos artifcios computacionais que permitissem a
comunicao entre o software utilizado e os comandos para
acion-lo,
lo, obtidos atravs dos sinais de contrao muscular.

Comunicao Oral:
Para este tipo de comunicao, um conjunto de frases prpr
gravadas foi armazenado separadas por tpicos nas funes
do EDiTH. Quando o cursor (cor verde) passa sobre o
elemento desejado e o usurio o aciona, um sintetizador de
voz emite um comando sonoro para que algum prximo
prx
reconhea uma necessidade do usurio.
Esta funo executa normalmente, pedidos rpidos e
simples como, por exemplo, expressar a sensao de fome do
usurio. Em um hospital pode ser de grande auxlio,
desempenhando funes como, por exemplo, mostrar uma
parte do corpo que est dolorida ou algum desconforto do
paciente, e em seguida fazer um pedido de massagem (Figura
2) ou de reposicionamento no leito.

EDiTH: Sistema a ser controlado

O sistemaasercontroladopelacontraomuscularvoluntria
contraomuscularvoluntria
o EdiTH. Este software possui diversas funcionalidades
para auxiliar a comunicao de pessoas com disfunes
motoras graves e que perderam a fala. O EDiTH baseia-se
baseia
em um escaneamento automtico que executa uma varredura
sequencial de linhas e/ou colunas do software (de acordo
com cada funo especfica), e pode ser controlado
controla
facilmente pelo usurio atravs de um sensor on-off.
Este
sistema
foi
projetado
para
serutilizadoemcomputadorescomsuporte de multimdia, para
permitircomunicaoatravs
da
escrita,
alm
de
reproduzircomandossonoros pr-estabelecidos
estabelecidos que facilitem
a comunicao
unicao entre o paciente e o ambienteaoseuredor.
Seroexplicitadas a seguir, as principaisfunes de
comunicaooferecidaspelo software EdiTH :
Comunicaoescrita:
Para realizaracomunicaoescrita utilizadoumtecladovirtual
ilizadoumtecladovirtual
(Figura 1). Para selecionarumcaractere
umcaractere no tecladovirtual do
EDiTH, o usuriodeve, primeiramente, selecionar a coluna
que contm a letradesejadaquando o cursor de escaneamento
(em cor azul)) passa portalcoluna. Logo emseguida, a cor do
cursormuda para verde e inicia-se
se umescaneamentoporlinhas,
umescaneamentop
passando
pelas
letras
que
compem
a
colunaselecionadaanteriormente. Desta forma, o usurio
capaz de selecionar a letradesejadaatravs de dois comandos
simples.

Sesso
de
Comunicao
Figura2.
usuriosolicitandomassagememuma dada regio do corpo.

Oral :

Chamar a Enfermeira ou um parente:

Esta funo disponvel em todas as telas e quando acionada
emite um sinal semelhante ao de uma buzina, que informa
enfermeira ou a uma pessoa que est cuidando do usurio
que ele necessita de algum tipo de ajuda.
Leitura de textos:
Esta funo permite que o usurio possa localizar um
determinado texto ou um livro em formato de arquivo
armazenado no computador, abrir, ler, ir para a pgina
seguinte ou voltar para o anterior, e usar um marcador de
texto para, aps umaa pausa, poder retomar a leitura, voltando
na pgina em que havia parado.
Acesso a um ambiente de multimdia:
multim
O sistema permite ao usurio acesso a arquivos
armazenados de msica (MP3, WMA e CD) e tambm de
filmes (AVI e MPG), permitindo que ele escolha
escol uma msica
ou um filme dentre as opes disponveis e ainda controle o
volume do som destas atividades.
Escrever e ler e-mails:
Esta opo uma das mais utilizadas pelos usurios
portadores de disfunes motoras severas, pois permite que
eles enviem e leiam mensagens, reduzindo o isolamento com
qual o paciente convive.

Figura 1. Teclado Virtual do EDiTH

Interface de configurao:
Podem ser feitas alteraes nas cores e nas teclas do teclado
virtual, adicionar ou remover livros, arquivos de msicas e
filmes, ou criar novas opes de frases prontas que so
comumente utilizadas pelo usurio, para facilitar

a comunicao deste (Figura 3).O

O usurio no tem controle
sobre esta opo. A pessoa responsvel pelo paciente pode
personalizar a interface operacional do EDiTH, modificando
algumas opes de acordo com a necessidade do usurio.

Para a aquisio e tratamento do sinal obtido,

obtido foi utilizado
um aparelhode eletromiografia que desempenha as funes
de filtragem de rudos e amplificao do sinalpara que este
possa, ento, ser analisado. Este aparelho permite a
comunicao com um PC atravs de dados enviados a uma
porta USB do computador,
utador, para que seja possvel manipular
aes a serem executadas de acordo com a interpretao da
faixa de amplitude do sinal coletado. Para isso, foi utilizado
o software LABVIEW, onde foram especificadas certas
funes lgicas que permitiam, atravs de um grfico de
tenso pelo tempo, analisar o sinal.

Figura3. Interface de Configuraes do EDiTH

A velocidade de varredura dos objetos a serem

selecionados, bem como do teclado virtual, tambm pode ser
ajustada em dois modos: um modo padro fixo, em que se
define esta velocidade e ela permanece durante todo o tempo
de execuo do software, ou um modo
do adaptativo, onde de
acordo com o treinamento do usurio, o cursor passa a se
mover mais rapidamente ou de maneira mais lenta [5].
Aquisio do Sinal EMG:
A fim de selecionar as opes oferecidas pelo sistema
EDiTH, contraes musculares voluntrias de um msculo
localizado logo acima da sobrancelha foram realizadas e os
bio-sinais
sinais emitidos por essa ao, desempenharam o papel de
um click para acionar a opo de interesse.

Figura5. Sinal EMG da contrao muscular citada, analisado pelo

software LABVIEW

Neste software, foi fixado um limiar de amplitude de

tenso de 2V, para que, quando realizada uma contrao
muscular, se o bio-sinal
sinal obtido ultrapassasse este limiar de
voltagem, um comando de acionamento (click)
(
seria enviado
ao sistema EDiTH para acionar uma de suas funes. Para
que este sistema funcione, o LABVIEW e o EDiTH, devem
ser executados simultaneamente.
RESULTADOS
Foram realizados experimentos deste sistema em que o
usurio era uma pessoa no portadora de disfunes motoras,
que escreveu por vrias vezes a palavra water (gua, em
ingls). Inicialmente escolhemos nas configuraes do
EDiTH, o modo adaptativo para a velocidade da varredura,
sendo assim, de acordo com que o usurio iria escolhendo as
opes de maneira correta, o cursor se movia com maior
velocidade. Obtivemos, assim, os seguintes resultados
(Tabela 1):
Tabela1. Resultados obtidos com
co o tempo de varredura
adaptativo.

Figura4. Usurioacionando o sistemaEdiTHatravs de sinais EMG

Para a captao destes sinais, foi utilizado no msculo

evidenciado (Figura 4), um sensor de EMG especfico
desenvolvido no Laboratrio de Engenharia Biomdica, que
permite captar superficialmente sinais de amplitudes muito
baixas, o que, normalmente, no
o possvel ser feito com
sensores convencionais, j que so desenvolvidos para captar
a ao de msculos maiores. Outro eletrodo, o de referncia,
foi posicionado superficialmente logo acima da clavcula.

Experimento
1
2
3
4
5
6
Mdia

Tempo de escrita da palavra water (s)

26,10
22,67
30,09
22,23
21,52
19,93
23,75

Posteriormente, com o usurio j adaptado ao sistema,

fixamos o tempo de varredura em 800ms, e o tempo mdio
para escrever a mesma palavra, foi reduzido, como pode ser
visto na Tabela 2.
Tabela 2. Resultados obtidos com o tempo de varredura fixo
em 800ms.
Experimento

Tempo de escrita da palavra water (s)

1
2
3
4
5
6
Mdia

21,68
20,97
24,10
20,51
20,53
20,23
21,33

Deve-se levar em considerao, que em alguns

experimentos (em ambos as situaes), o usurio errou a
coluna em que estava letra desejada e, ento, teve que
esperar o escaneamento resetar e passar novamente pela
coluna em que estava a letra desejada, aumentando o tempo
de escrita da palavra em questo.
DISCUSSO
O sistema de comunicao alternativa assistiva acionado
por sinais EMG mencionado neste trabalho, possibilita,
atravs de uma interao homem-computador que pessoas
portadoras de disfunes motoras graves e que no
conseguem se expressar de forma oral, possam se comunicar
utilizando artifcios computacionais programados para
desempenhar funes de escrita e fala.
Resultados demonstraram que, apesar de ser um processo
lento devido ao tempo de espera do escaneamento e devido a
erros que comumente ocorrem durante a execuo do sistema
pelo usurio, a ferramenta aqui apresentada bastante
interessante para auxiliar pacientes que, s vezes, no
conseguem se comunicar de maneira alguma.
Em outro trabalho, no qual tambm foram realizados
experimentos em que se escrevia a palavra water, porm
acionando um teclado virtual por meio de navegao
horizontal e vertical (sem escaneamento) atravs da captao
de sinais Eletrooculogrficos (EOG), levou-se em mdia 24,7
segundos para escrever tal palavra [6].
J em outra pesquisa desenvolvida, o sinal EOG foi
utilizado como comando on-off, em que, assim como neste
plano, o sinal captado acionava o mesmo sistema de
escaneamento e escrevia a mesma palavra atravs de um
limiar de amplitude de tenso. Com o mesmo tempo de
varredura (800ms), foi gasto em mdia 7,63 segundos por
caractere [7]. Porm, deve-se considerar que na frase escrita
neste outro trabalho (cinco palavras e 57 caracteres) a chance
de ocorrerem erros na seleo das colunas ou linhas maior,
aumentando o tempo mdio final de escrita.
Dados evidenciados neste plano mostraram que os
softwares baseados em escaneamento automtico,
atualmente, so mais rpidos que os sistemas que utilizam
navegao horizontal e vertical em um teclado virtual com
posterior acionamento de uma tecla atravs de um comando,
como por exemplo, uma piscada voluntria.

Alm disso, em contrapartida a outros sistemas de

comunicao assistivos comerciais, o sistema apresentado
neste trabalho um sistema bastante simples, barato, e
facilmente implementado, pois se necessita apenas de um
computador com os devidos softwares (EDiTH e
LABVIEW) instalados, um sensor de eletromiografia e um
eletrodo de referncia conectados a um aparelho que realiza a
aquisio dos sinais EMG.
Portanto, o desejo da equipe que trabalhou neste projeto
de que, aps a realizao de mais testes com diversas pessoas
portadoras de disfunes graves, este sistema seja
implementado para auxiliar a todos que necessitam de um
suporte que facilite a comunicao deles com a sociedade.
AGRADECIMENTO
Os autores agradecem o apoio da CAPES atravs do projeto
CAPES/COFECUB n 627/2009.
REFERNCIAS BIBLIOGRFICAS
[1] TIDE, (1994). Commission of the European
Communities, Technology Initiative for the Disabled and
Elderly People, Workplan.
[2] N. Alm, J.L. Arnott, A.F. Newell (1992), Prediction and
conversational
momentum
in
an
augmentative
communication system, Communications of the ACM,
vol.35, n5, 1992, pp.47-57.
[3] J. Angelo (2000), factors affecting the use of a single
switch with assistive technology devices, Journal of
Rehabilitation Research and Development, vol.37, n5, septoct 2000.
[4] G. Bourhis, J.M. Andr, E. Yvroud (1986), Dsigneur
polyvalent pour grandshandicapsmoteursprsentant des
troubles de la communication verbale, Innovation
Technologique en Biologie et Mdecine, n4, vol.7, 1986,
p.474-481.
[5] S. Ghedira, P. Pino, and G. Bourhis, Conception and
experimentation of a communication device with adaptative
scanning, ACM Transactions on Accessible Computing,
special issue on Augmentative and Alternative
Communication, vol.1, no. 3, pp. article n14, 2009.
[6]A. B. Usakli, S. Gurkan, F. Aloise et al., On the use of
electrooculogram for efficient human computer interfaces,
Computational Intelligence and Neuroscience, vol. Vol
2010, pp. Article ID 135629, 5 pages, 2009.
[7] Naves, E. L. M. ; Andrade, A. O. ; Soares, A. B. ; Pereira,
A. A.; Pino, P. ; Bourhis, G. . Interface EOG pour la contrle
d une aide la communication. In: Congrs HANDICAP
2010. Anais do HANDICAP Congrs 2010, Paris, Frana,
2010.