Play with me: Sistema Musical Interativo para promover uma construo

expressiva musical em crianas de 4 at 8 anos.

Mara Teresa Novelo Pava
Universidade Federal de Minas Gerais
Palavras Chave: Sistemas Musicais Interativos, Composio, Kinect, Crianas,
Expresso Musical.
Resumo
Play with me um sistema interativo para a composio de msica
atravs da linguagem corporal. Ele baseado no uso de gestos corporais que
so usados como metforas para controlar um sistema de estruturas musicais
bsicos como escalas pentatnicas (McFerrin, 2009) e transformao tmbrica
(Kinoki). O sistema foi concebido como uma ferramenta para promover a
expresso musical de crianas de quatro a oito anos, sem exigir para tal fim
instrumentos musicais ou qualquer conhecimento musical anterior. Para o seu
desenvolvimento tem-se prestado muita ateno s limitaes de conduo de
crianas dessa idade e tem sido favorecida a experimentao. O sistema foi
desenvolvido utilizando vrias tcnicas de viso computacional, anlise e
sntese de udio digital.
Introduo
A ideia de que alunos devem aprender por aprender, sem que haja um
significado no contedo a assimilar, j foi h muito ultrapassada. As teorias de
aprendizagem cognitivistas atestam a importncia da motivao para a
aprendizagem. A presente pesquisa busca contribuir com uma reflexo sobre a
tecnologia voltada para a Educao e suas possibilidades para a rea de
Educao Musical, dentro de perspectivas da arte contempornea. A pesquisa
tem como objetivo geral, buscar desenvolver propostas pedaggicas utilizando
recursos tecnolgicos com um grupo de ensino fundamental.
A tecnologia faz parte de um dos trabalhos mais estudados por exemplo,
Tod Machover (2008) professor do laboratrio de mdia do MIT em uma
conferncia em TED (Tecnologia, Entretenimento, projeto) mostra a importncia
da tecnologia na msica falando que a criao de msica no "projetada" para
estar disponvel para "todos" porque exige tcnica, habilidades e conhecimentos

que tornam a msica difcil e menciona que sempre se requer alguma

experincia previa. Neste sentido, necessita-se de estudos metodolgicos no
tocante a uma Educao Musical Interativa1. Sob tal perspectiva, so elencados
objetivos especficos atravs dos quais investigam-se as possibilidades
tecnolgicas digitais com a rea de Educao Musical, tendo o escopo de criar
propostas pedaggicas e metodologias interdisciplinares dentro do campo dos
Sistemas Musicais Interativos.
Objetivos
Foram estabelecidos os seguintes objetivos para o trabalho:
@ Utilizando o sistema musical interativo Play with me, criar trechos
musicais
@
originais que serviro como partede uma composio.
@
@ Relacionar o movimento ao som;
@ Desenvolver a criatividade.
Metodologia
As atividades do projeto aconteceram a partir de uma parceria entre as
disciplinas de Educao Musical e Informtica Educativa. O trabalho de campo
desenvolvido na pesquisa foi visitar uma sala de aula com crianas com idade
entre quatro e oito anos de idade que foram convidados a ouvir cinco rimas
canes de ninar diferentes. O experimento consistia em fazer variaes das
caractersticas de som, tais como intensidade, durao, timbre, tom e passo, e
observar a reao das crianas a estas variaes. Esta experincia metforas
com que as crianas, naturalmente, se relacionam com a msica atravs de
movimentos do corpo foram removidos. Encontramos, por exemplo, que o
aumento da intensidade de crianas de som estavam tentando fazer maior e se
isso diminuiu "tornou-se" menor. Subindo o tom as crianas tentou subir
1 Educao Musical Interativa: conceito que expressa a ideia de um processo de Educao Musical
significativo, baseado na utilizao de recursos tecnolgicos e que proporciona interatividade a travs
dessa utilizao.

abruptamente e agachou diminuio. Embora no tenha sido planejado desde o

incio, foi descoberto que as crianas marcado com aplausos ou pisar as batidas
da melodia.
Objeto
O sistema desenvolvido para capturar os gestos da criana como uma
ferramenta usa a captura de movimento Kinect. As vantagens de usar este
dispositivo em comparao com cmeras de vdeo digital o uso de escalas de
cinza como uma medida de profundidade para atribuir valores aos corpos de
distncia. Em geral, qualquer objeto que est voltado para o dispositivo ter um
espao bidimensional depende do nmero de pixels, que ocupam, alm de um
valor de profundidade. Com estes trs valores, possvel interpolar que pode
extrair dimenses precisas de rgos, favorecendo clculos do movimento e da
posterior aquisio de gestos (Figura 1).

Figura 1. Esquema de funcionamento

O Kinect usado em combinao com o software Open NI desenvolvido

para extrair dados a partir da posio de um corpo humano simplificado em um
esqueleto constitudo por grandes extremidades: mos, ps, cabea, ombros,
joelhos, cintura, tronco (OpenNI, 2010). Para permitir postura sistema de
reconhecimento, a criana deve ser posicionado em frente do sistema com o
brao levantado, o que desencadeia o algoritmo de reconhecimento e gerar
dados tridimensionais de a posio de cada elemento do esqueleto. Estes dados
so codificados em uma mensagem aberta Sound Control (OSC) (Wrigh, 2005),

onde cada elemento e suas coordenadas so indexados. O protocolo OSC

projetado para transmitir dados em redes, tornando possvel receber todos os
dados a partir de qualquer computador com esqueleto em que a rede
compartilhada.

Figura 2. Instalao do dispositivo

O sistema concebido para uso interior e os dispositivos necessrios

para a sua utilizao so um ecr de televiso localizado numa das paredes do
espao (com uma tabela), um sensor localizado na parte inferior do ecr, dois
computadores ligados um sistema de som e um guias visuais no cho
denotando a rea de interao da criana, que vai indicar onde localizar (Figura
2).

Concluses
Com base no referencial terico, trabalho de campo e pesquisas pode ser
visto que a msica est intimamente relacionado com o modo de vida das
pessoas. Desde a msica ir para a faculdade ou trabalho, dana ou compartilhar
uma cerveja com um amigo, a msica est presente.
Pesquisas e grupos focais realizados indicam que a maioria das pessoas
que escutam msica j tentou faz-la atravs de tocar um instrumento ou
atravs de sua voz. Para fazer msica, seja com um instrumento ou um editor de
som precisa saber, alm de uma tcnica, a maneira em que a msica (teoria
musical) estruturada e isso muito separado da maioria das pessoas, porque "
muito difcil e tedioso para entender e fazer msica tambm ".

A pesquisa e o quadro terico mostra que as crianas no tm medo de

cometer erros, porque esse fato no tem um impacto social. Ele tambm indica
que a aprendizagem de novos rapidamente, devido falta de experincia coisas
e na prtica, a partir de experincias que possam viver.
Ao trabalhar com essas experincias observou-se que as crianas criam
metforas de acordo as qualidades de movimentos e formas motoras
intuitivamente, sem instrues avanadas. Isso leva concluso de que as
crianas devem comear a experimentar com a msica sem entender como ele
funciona na teoria, mas incentivar a pratica das metforas e o relacionamento
entre as qualidades de som e msica. Para desenvolver propostas que
enfrentam as questes levantadas nesta pesquisa, necessrio o uso de
tcnicas que se adaptem s habilidades motoras bsicas das crianas.
Bibliografia
Jaques-Dalcroze,.(1917). Theeurhythmics
Londres: Constable & Company Ltd.

of

Jaques-Dalcroze

(2a

ed.).

Mc Ferrin, B. (Junio de 2009). Notes & Neurons: In Search of the Common

Chorus. Audience as Instrument [video]. Conferencia apresentada em: 2009
World Science Festival. Recuperado de: http://worldsciencefestival.com/blog/
audience_as_instrument
OpenNI. (Nov. de 2010). Introducing OpenNI. http://www. openni.org
Puckette, M. (1996). Pure Data: another integrated computer music environment.