Projeto CoCoa: Um Colete De Comunicação Alternativa: 8 trinn

2024 Forfatter: John Day | [email protected]. Sist endret: 2024-01-30 11:21

CoCoA-prosjektet er en bærbar vest koblet til internett som gjør det mulig å koble taktile symboler for alternativ kommunikasjon for å hjelpe mennesker med tale eller ikke-verbale funksjonshemninger.

O Colete de Comunicação Alternativa (CoCoA) consiste em um colete vestível (weareable) conectado à internet que permite o acoplamento de símbolos táteis de comunicação alternativa para auxiliar pessoas com deficiência de fala ou não verbais.

Deficiências de fala afetam pessoas com autismo, afasia, paralisia cerebral, surdez parcial ou total, entre outros transtornos. Em pessoas com autismo, exemplo, é frequente a presença de não verbalização ou atraso de fala. A ausência de fala pode também ser uma deficiência temporária devido a alguma enfermidade.

O comprometimento de fala, permanentente ou temporário, necessita de atenção e tratamento, pois esta habilidade é importante para a socialização e para que a pessoa que apresente outra condição ou deficiência possa ser melhor compreendida em suas necessidades.

Recursos assistivos de comunicação alternativa (CA) são usados para auxiliar as pessoas com deficiência de fala a se comunicar com seus familiares, terapeutas e demais pessoas. Pictogramas são uma das formas mais frequentes de recurso de CA, onde a pessoa pode apontar para os símbolos fixados em pontos estratégicos da casa ou então usar aplicativos que vocalizam estes símbolos, como o Proloquo2Go.

Vi kan også bruke disse piktogrammer for å gjøre det enklere for oss å gjøre noe mer enn det er, eller at det er vanskelig å komme sammen med en hvilken som helst situasjon.

O Colete de Comunicação Alternativa (CoCoA) consiste em um colete vestível (weareable) conectado à internet que permite o acoplamento de símbolos táteis de comunicação alternativa para auxiliar pessoas com deficiência de fala ou não verbais e expressar suas nødvendidades aos outros profissionais de saúde, som que eles estejam semper presenterer ingen mesmo ambiente da pessoa com deficiência, facilitando o monitoramento.

O CoCoA possibilitará ao usuário incluir até seis símbolos de CA, realizando diferentes combinações, os quais serão sensores (botões) que, ao serem pressionados, tomam duas ações:

Emitir o som das ações escolhidas por meio de um alto falante acoplado ao colete; Envio das ações escolhidas em formato textual via internet para algum aplicativo de comunicação dos cuidados, terapeutas ou professores, possibilitando que eles possamamo ingen mesmo recinto

Tilbakemeldinger kan også gjøres på grunn av at vi kan trykke på en LED -lampe som kan brukes som esolhidas. Assim, é proposta uma solução de interface vestível, conectada, não intrusiva, portável e de fácil utilização para auxiliar pessoas com deficiência de fala a comunicar suas needsidades in loco ou remotamente. O colete não requerer esforço físico para utilização, pode ser usado em diferentes locais e facilita a assistência à pessoa com deficiência para atender suas necessidades, potencialmente impedindo que elas fiquem desconfortáveis ou estressadas

Este projeto foi desenvolvido av Mauro Pichiliani ([email protected]) og Talita Pagani ([email protected])

Trinn 1: Komponenter av maskinvare

Para o projeto CoCoA utilizamos os seguintes elementos físicos (hardware):

1 plass DragonBoard 410C. Custo ca: 75 dolares.

1 Arduino NodeMCU ESP 8266 ou outro arduino com pelo menos 13 portas GPIO PWN. Custo ca: R $ 59, 90

1 Merker for etiketter RFID -modellen RC522 da Mifare. Custo ca: R $ 39, 90

8 Merker RFID da Mifare. Custo ca: R $ 23, 20

8 Trykk på knappen. Custo ca: R $ 2, 90

8 lysdioder med forskjellige kjerner. Custo ca: R $ 16, 90

6 motstander på 330Ohm. Custo ca: R $ 1, 90.

5 metros quadrados de tecido TNT marrom. Custo ca: R $ 12, 90

1 metro de tira de velcro. Custo aroximado R $ 16, 74

8 Imagens de símbolos impressos em papel

1 alt falante USB. Custo ca: R $ 32, 05

1 adapter for USB. Custo ca: R $ 25, 90

1 Cartão de memória miniSD 4GB. Custo ca: R $ 19, 90

1 pakke med alimentação (2000 mAPH og 12 V utgang). Custo ca: R $ 115, 00

20 metros da cabo paralelo Cristal. Omtrentlig beløp: R $ 20, 00

Ferramentas gerais (alicate, chave de fenda, ferro de solda, pistola de cola quente, etc), fios e fita isolante

Trinn 2: Diagramas De Funcionamento

Para auxiliar a compreensão do funcionamento do colete vamos explicar seu uso por meio de três diagramas:

Diagram 1: Este fluxo representa o uso inicial da roupa descrevendo os passo nødvendário para vestí-la e acessar os áudio já cadastrados.

Diagram 2: Este diagrama mostra os passos para se trocar uma das almofadas existentes para que outro símbolo/som seja colocado no colete

Diagram 3: Este diagrama mostra os passos para trocar o áudio associada a uma almofada existente. Este fluxo não foi implementado and versão 1.0 do colete

Trinn 3: Programvare

Utnyttelse av programvare som ikke har noen programmer:

IDE do Arduino

Python 3.5

As dependências externas do do projeto foram a biblioteca do arduino para lidar com o módulo leitor do RFID, a biblioteca do Python twx.botapi para interagir com o Telegram e a biblioteca PySerial para ler/gravar dados pela porta serial com o Python. Som bibliotecas gjør Python podem ser instaladas utilizando o gerenciador de pacotes pip.

Disse skriftene kan brukes for å disponere noe som ikke kan oppbevares i GitHub:

github.com/pichiliani/CoCoA

Trinn 4: Conexões Físicas

A arquitetura do projeto CoCoA se baseia on placa DragonBoard 410C, em um arduino NodeMCU 8622, med placa leitora de RFID, leds, pusb buttons e uma caixa de som. Também é feita uma integração com um bot do Telegram chamado ProjectCoCoABot que envia uma mensagem com o áudio gerado cada vez que um dos botões for pressionado. Cofigra na figura a arquitetura completea da solução.

É preciso primeiro conectar o leitor RFID e os Leds no arduino e depois fazer o last up do código que está na pasta /CocoaNodeMCUServer no GitHub. Os diagramas de conexões tanto dos Leds como do leitor RFID são mostrados nas figuras que ilustram este passo.

Ainda na parte de conexão física precisamos realizar a conexão dos trykknapper som en plassering DragonBoard. Este diagrama e tabela também são mostrados em imagens que acompanham este passo.

Trinn 5: Construção Das Almofadas

Som almofadas que contém os símbolos devem ser construídas em seguida. Existe vários símbolos e sistemas para comunicação não verbal, mas podemos indicar o PECS como um bom ponto de partida. Este sistema possui diversos símbolos que podem ser impressos e colocados nas almofadas.

Som almofadas possuem cerca de 10x10cm e foram preenchidas com algodão. É importante lembrar de colocar dentro de cada almofada um dos chaveiros que contém a tag RFID para que seja possível identifierar cada uma das almofadas and seus respectivos sons.

Na parte da frente da frente da almofada colocamos os mesmo símbolo duas vezes: um com a imagem voltada para cima e outro para baixo. Desta forma é possível que o usuário do colete observere qual símbolo foi pressionado. Não esqueça de colocar na parte de trás da almofada um pedaço de um dos lados do velcro para que seja possível colocar e retirar a almofada do colete.

Trinn 6: Construção Do Colete

A próxima etapa é a construção do colete. Para isso utilize um molde de colete infantil masculino e faça os cortes no tecido de modo que haja um forro. Nestes linker podemos encontrar alguns moldes de coletes para imprimir:

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/

cortandoecosturando.com/Pap%20colete.html

É importante definir o local na parte da frente onde as almofadas vão ser encaixadas. Nestes locais devemos colocar partes do velcro para que as almofadas sejam encaixadas corretamente. Ainda na parte da frente podemos fazer os furos para colocar a parte que brilha dos leds logo acima das almofadas.

Etter parte de trás gjør lokale das almofadas presisamos encaixar os leds e cada um dos trykknapper. Én viktig knapp kan vi trykke på forma que eles fiquem exatamente atrás do local do velcro no colete. Desta forma assim que o usuário pressionar o centro da almofada ele forçará a parte "dura" da almofada (o chaveiro com a tag rfid) e pressionará o trykknapp.

Anbefaler å fikse todas som partes internas do colete (leds, resistores, trykknapper og fios) utilizando a cola quente. Já a ligação dos fios pode ser feita com solda+fita isolante. Outra alternativa para evitar o uso de solda é cola quente ou esmalte de unha transparentente tipo "base".

A próxima parte do colete é construir pequenos bolsinhos para guardar os componentes de cada área das almofadas na parte de dentro. Crie também um bolso na parte da frente do colete mais perto da cintura para guardar a caixa de som. É recomendável colocar diversas tiras de velcro para fechar o colete na parte da cintura e dar firmeza à roupa.

Os fios que vão ligar os componentes (leds e trykknapper) de cada área de toque devem ser agrupados de dois em dois. Desta forma teremos seis tiras com dois cabos cada. Vale a pena lembrar que cada cabo possui dois fios: o positivo e o negativo. Det er viktig å bestille en ordentlig dosering og kvalitetskomponenter som kan sendes på en ledig knapp (LED eller trykknapp). Anbefaler som tiras de fios pelos ombros dividindo em dois grupos de três.

Uma vez que os cabos e os fios já estejam conectados podemos fechar o colete colocando o forro. Para finalizar, crie um bolso horizontal to parte de trás do colete para guardar as placas (NodeMCU e DragonBoard), o conector de som USB e a bateria que vai ligar a DragonBoard.

Trinn 7: Ligação Geral E Teste

Uma vez que as tiras do colete já estejam passadas para a parte de trás é preciso fazer as conexões com as placas. Det er nødvendig 12 koneksjoner for trykknapper (6x2) og 12 koneksjoner for våre leds.

É preciso um cuidado adicional para ligar os fios que levam o sinal de terra (GND - Groud) para os leds, pois todas as seis "perninhas" dos leds devem ser ligadas no mesmo fio. De forma semelhante, se "perminhas" dos trykknapper correspondentes ao terra (GND) devem ser ligados no mesmo fio.

For fim, conecte na porta USB or adaptador de som (dongle) e ligue o adaptador na caixa de som, que devem ser colocada no bolso da frente do colete que fica na parte de baixo. Tilkoblet USB -no NodeMCU og USB -port for DragonBoard 410c. For fim, ligue o pack de pilhas da bateria ao pino de alimentação (força) and inicie of programa CoCoaServer.py na placa DragonBoard como sudo (use uma coneão SSH ou conecte um monitor+teclado+mouse diretamente na placa):

$ sudo python CoCoaServer.py

A cada botão pressionado uma mensagem aparecerá no console da placa, o áudio correspondente será tocado e o led associado com a almofada será tocado.

Para um resumo do projeto veja o vídeo indicado no link abaixo:

www.youtube.com/embed/-DxK2O-LcAA

Trinn 8: Referanse

Referanser relacionadas à comunicação alternativa:

Aplicativo de vocalização de símbolos Proloquo2Go -

Saba M. P., Filippo D., Pereira F. R., de Souza P. L. P. (2011) Hey yaa: A Haptic Warning Wearable to Support Deaf People Communication. I: Vivacqua A. S., Gutwin C., Borges M. R. S. (red) Samarbeid og teknologi. CRIWG 2011. Forelesningsnotater i informatikk, vol 6969. Springer, Berlin, Heidelberg. DOI 10.1007/978-3-642-23801-7_17

Referere til bibliotecas de Python utilizadas:

PySerial

Twx.botapi

Informasjon om DrabonBoard 410c

Eksempel på bruk av RFID uten arduino

Moldes de colete masculino infantil

marlenemukaimoldeinfantil.com.br/2017/02/07/colete-social/https://cortandoecosturando.com/Pap%20colete.html