Projeto CoCoa: Um Colete De Comunicação Alternativa: 8 Steps

2024 Autore: John Day | [email protected]. Ultima modifica: 2024-01-30 10:00

Il Progetto CoCoA è un giubbotto indossabile connesso a Internet che consente l'accoppiamento di simboli tattili di comunicazione alternativa per assistere le persone con disabilità del linguaggio o non verbali.

O Colete de Comunicação Alternativa (CoCoA) consiste in un vestito completo (indossabile) connesso a Internet che consente di accoppiare i simboli con comunicazioni alternative per dispositivi ausiliari con carenze di errore o senza verbi.

Deficiências de fala afetam pessoas com autismo, afasia, paralisia cerebral, surdez parcial ou total, entre outros transtornos. Em pessoas com autismo, por exemplo, é frequent a presença de não verbalização ou atraso de fala. A ausência de fala pode também ser uma deficiência temporária devido a alguma enfermidade.

O comprometimento de fala, permanente ou temporário, necessita de atenção e tratamento, pois esta habilidade é importante para a socialzação e para que a pessoa que apresente outra condição ou deficiência possa ser melhor compreendida em suas necessidades.

Ricorrenze assistive di comunicazione alternativa (CA) sono utilizzate per ausiliari come persone con carenze di comunicazione e comunicazioni con più familiari, terapeutiche e richieste. Pictogramas são uma das forms più frequenti de recurso de CA, onde a pessoa pode apontar para os símbolos fixados in pontos estratégicos da casa o então usar aplicativos que vocalizam estes símbolos, come o Proloquo2Go.

Porém, os pictogramas físicos só podem ser utilizados para a pessoa se comunicar com outras pessoas no mesmo ambiente, o que dificulta a comunicação com seus cuidadores caso ela tenha uma necessidade urgente e eles estejam em outros ambientes.

O Colete de Comunicação Alternativa (CoCoA) consiste em um colete vestível (weareable) conectado a internet que permite o acoplamento de símbolos táteis de comunicação per auxiliar pessoas con deficiência de fala o não verbais a cui expressar sues necessidores, a tera outros profissionais de saúde, sem que eles estejam semper presents no mesmo ambiente da pessoa com deficiência, facilitando o monitoramento.

O CoCoA possibilitará ao usuário include seis símbolos de CA, realizando differenti combinazioniçes, os quais serão sensors (botões) que, ao serem pressionados, tomam duas ações:

Emitir o som das ações escolhidas por meio de um alto falante acoplado ao colete;Envio das ações escolhidas em formato text via internet para algum aplicativo de comunicação dos cuidados, terapeutas ou n professores, possibilitando ques da comunicam que eles nessun mesmo recinto

Per dar um feedback a pessoa com deficiência, os botões pressionados também piscaram um LED per indicare come ações escolhidas. Assim, è proposta per una soluzione di interfaccia vestita, connessa, non intrusiva, portável e de fácil utilização per ausiliare pessoas com deficiência de fala e comunicar suas necessidades in loco o remotely. O colete não requerer esforço físico para utilização, pode ser usado em differenti locais e facilita a assistência à pessoa com deficiência para atender suas necessidades, potencialmente impedindo que elas fiquem deconfortáveis ou estressadas

Este projeto foi desenvolvido por Mauro Pihiliani ([email protected]) e Talita Pagani ([email protected])

Passaggio 1: componenti hardware

Para o progetto CoCoA utilizamos os seguintes elementi fisici (hardware):

1 placca DragonBoard 410C. Custo approssimativo: 75 dollari.

1 Arduino NodeMCU ESP 8266 o outro arduino con meno 13 portas GPIO PWN. Custo approssimativo: R$ 59, 90

1 Modulo leitor de tags Modello RFID RC522 da Mifare. Custo approssimativo: R$ 39, 90

8 Tag RFID da Mifare. Custo approssimativo: R$ 23, 20

8 Botes tipo pulsante. Custo approssimativo: R$ 2, 90

8 LED de diversas nuclei. Custo approssimativo: R$ 16, 90

6 Resistenze da 330Ohm. Custo approssimativo: R$ 1, 90.

5 metros quadrados de tecido TNT marrom. Custo approssimativo: R$ 12, 90

1 metro de tira de velcro. Custo vicino R$ 16, 74

8 Immagini di simboli impressi su carta

1 USB contralto. Custo approssimativo: R$ 32, 05

1 adattatore per USB. Custo approssimativo:R$ 25, 90

1 scheda di memoria miniSD 4GB. Custo approssimativo: R$ 19, 90

1 confezione di pile come fonte di alimentazione (2000 mAPH e 12 V di uscita). Custo approssimativo: R$ 115, 00

20 metros da cabo parallelo Cristal. Custo approssimativo: R$ 20, 00

Ferramentas gerais (alicate, chave de fenda, ferro de solda, pistola de cola quente, etc), fios e fita isolante

Fase 2: Schemi di funzionamento

Para auxiliar a compreensão do funcionamento do colete vamos explicar seu uso por meio de três diagramas:

Diagrama 1: Este fluxo Representativea o uso inicial da roupa descrevendo os passo necessário para vestí-la e acessar os áudio já cadastrados.

Diagrama 2:Este diagrama mostra os passos para se trocar uma das almofadas existentes para que outro símbolo/som seja colocado no colete

Diagrama 3:Este diagrama mostra os passis para trocar o áudio associada a uma almofada existente. Este fluxo não foi implementado na versão 1.0 do colete

Passaggio 3: software

Utilizza i seguenti software senza progetto:

IDE fai Arduino

Python 3.5

As dependências externas do do projeto foram a biblioteca do arduino para lidar com o módulo leitor do RFID, a biblioteca do Python twx.botapi para interagir com o Telegram e a biblioteca PySerial para ler/gravar dados pela porta serial com o Python. As bibliotecas do Python podem ser instaladas utilizando o gerenciador de pacotes pip.

Tutti i codici sorgente dei progetti disponibili per la disponibilità non seguiranno il repository di GitHub:

github.com/pihiliani/CoCoA

Fase 4: Conexões Físicas

Un'architettura del progetto CoCoA se baseia na placa DragonBoard 410C, em um arduino NodeMCU 8622, na placa leitora de RFID, leds, pusb button e uma caixa de som. Também é feita uma integração com um bot do Telegram chamado ProjectCoCoABot que envia uma mensagem com o áudio gerado cada vez que um dos botões for pressionado. Cofigra na figura a arquitetura completa da solução.

É preciso primeiro conectar o leitor RFID e os Leds no arduino e depois fazer o upload do código que está na pasta /CocoaNodeMCUServer no GitHub. Os diagramas de conexões tanto dos Leds como do leitor RFID são most nas nas figures que ilustram este passo.

Ainda na parte de conexão física precisamos realizar a conexão dos push button com a placa DragonBoard. Este diagrama e tabela também são mostrados em imagens que acompanham este passo.

Passaggio 5: Costruzione das Almofadas

As almofadas que contém os símbolos devem ser construídas em seguida. Esistono vari simboli e sistemi per la comunicazione verbale, ma indica i punti o PECS come un ponte di partizione. Este sistema possibile diversi simboli que podem ser impressions e colocados nas almofadas.

Come almofadas possuem cerca de 10x10cm e foram preenchidas com algodão. È importante leggere il codice all'interno di cada almofada um dos chaveiros que contém a tag RFID per seja possível identificator cada uma das almofadas e seus rispettivo figli.

Na parte da frente da frente da almofada colocamos os mesmo símbolo duas vezes: um com a imagem voltada para cima e outro para baixo. Desta forma é possível que o usuário do colete osservare qual símbolo foi pressionado. Não esqueça de colocar na parte de trás da almofada um pedaço de um dos lados do velcro para que seja possível colocar e retirar a almofada do colete.

Fase 6: Costruzione di Colete

A próxima etapa é a construção do colete. Para isso use um molde de colete infantil masculino e faça os cortes no tecido de modo que haja um forro. Nestes links podemos encontrar alguns moldes de coletes para imprimir:

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/

cortandoecosturando.com/Pap%20colete.html

È importante definir o local na parte da frente onde as almofadas vão ser encaixadas. Nestes locais devemos colocar partes do velcro para que as almofadas sejam encaixadas corretamente. Ainda na parte da frente podemos fazer os furos para colocar a parte que brilha dos leds logo acima das almofadas.

Na parte de trás do local das almofadas precisamos encaixar os leds e cada um dos push button. É importante encaixar os push button de forma que eles fiquem exatamente atrás do local do velcro no colete. Desta forma assim que o usuário pressionar o centro da almofada ele forçará a parte "dura" da almofada (o chaveiro com a tag rfid) e pressionará o push button.

Recomendados fixar todas as partes internas do colete (leds, resistores, push buttons e fios) utilizando a cola quente. Já a ligação dos fios pode ser feita com solda+fita isolante. Un'altra alternativa per evitare l'uso del solda è cola quente o un trasparente trasparente del tipo "base".

A próxima parte do colete é construir pequenos bolsinhos para guardar os components de cada área das almofadas na parte de dentro. Crie também um bolso na parte da frente do colete mais perto da cintura para guardar a caixa de som. É recomendável colocar diversas tiras de velcro para fechar o colete na parte da cintura e dar firmeza à roupa.

Ogni volta che si collegano i componenti (led e pulsanti) è necessario che l'area del toque sia quella dei componenti. Desta forma teremos seis tiras com dois cabos cada. Vale a pena lembrar que cada cabo possui dois fios: o positivo e o negativo. È importante contrassegnare l'ordine con i cavi e qualsiasi componente sia legato al cavo (led o pulsante). Recomendamos passar as tiras de fios pelos ombros dividindo em dois grupos de três.

Uma vez que os cabos e os fios já estejam conectados podemos fechar o colete colocando o forro. Per finalizzare, gridare a destra in orizzontale na parte de trás do colete para guardar as placas (NodeMCU e DragonBoard), o conector de som USB e a bateria que vai ligar a DragonBoard.

Fase 7: Ligação Geral E Teste

Uma vez que as tiras do colete já estejam passadas para a parte de trás é preciso fazer as conexões com as placas. Se necessario 12 collegamenti per os pulsanti (6x2) e più 12 collegamenti per os led.

É preciso um cuidado adicional para ligar os fios que levam o sinal de terra (GND - Groud) para os leds, pois todas as seis "perninhas" dos leds devem ser ligadas no mesmo fio. De forma semelhante, se "perminhas" dos push button corrispondenti ao terra (GND) devem ser ligados no mesmo fio.

Por fim, conecte na porta USB o Adaptador de som (dongle) e ligue o Adaptador na caixa de som, que devem ser colocada no bolso da frente do colete que fica na parte de baixo. Collega o cabo USB senza NodeMCU e oltre porta da USB da placa DragonBoard 410c. Per fim, ligue o pack de pilhas da bateria ao pino de alimentação (força) e inicie o programa CoCoaServer.py na placa DragonBoard come sudo (use uma coneão SSH o conecte um monitor+teclado+mouse direttamente sulla placa):

$ sudo python CoCoaServer.py

A cada botão pressionado uma mensagem aparecerá no console da placa, o áudio corrispondente será tocado e o led associado com a almofada será tocado.

Para um resumo do projeto veja o vídeo indicado no link abaixo:

www.youtube.com/embed/-DxK2O-LcAA

Fase 8: Referências

Referências relacionadas à comunicação alternativa:

Applicazione vocale dei simboli Proloquo2Go –

Saba M. P., Filippo D., Pereira F. R., de Souza P. L. P. (2011) Hey yaa: un avvertimento tattile indossabile per supportare la comunicazione delle persone sorde. In: Vivacqua A. S., Gutwin C., Borges M. R. S. (a cura di) Collaborazione e tecnologia. CRIWG 2011. Appunti di lezione in Informatica, vol 6969. Springer, Berlino, Heidelberg. DOI 10.1007/978-3-642-23801-7_17

Referências sobre as bibliotecas de Python utilizadas:

PySerial

Twx.botapi

Informações sobre a placa DrabonBoard 410c

Exemplo de uso do leitor de RFID no arduino

Moldes de colete masculino infantil

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/https://cortandoecosturando.com/Pap%20colete.html