Please use this identifier to cite or link to this item:
https://hdl.handle.net/10316/82924
DC Field | Value | Language |
---|---|---|
dc.contributor.advisor | Cortesão, Rui Pedro Duarte | - |
dc.contributor.author | Reis, Ana Cláudia Fernandes dos | - |
dc.date.accessioned | 2018-12-22T18:43:53Z | - |
dc.date.available | 2018-12-22T18:43:53Z | - |
dc.date.issued | 2017-07-25 | - |
dc.date.submitted | 2019-01-22 | - |
dc.identifier.uri | https://hdl.handle.net/10316/82924 | - |
dc.description | Dissertação de Mestrado Integrado em Engenharia Electrotécnica e de Computadores apresentada à Faculdade de Ciências e Tecnologia | - |
dc.description.abstract | Recentemente, o campo de interação humana-computador tem sido o foco de bastante interesse, particularmente o tópico de reconhecimento gestual. Estas pesquisas procuram melhorar a qualidade de vida de idosos e indivíduos com necessidades especiais, através da criação de uma nova interface de comunicação entre humanos e computadores. Mais especificamente, estes estudos exploram a natureza elétrica do sistema nervoso humano, procurando aplicá-lo ao controlo de aparelhos assistivos. Deste modo, o objetivo destes sistemas passa pela tradução de movimentos simples em comandos através da deteção, processamento e classificação de biosinais, nomeadamente sinais electromiográficos (EMG). Este trabalho foca-se no reconhecimento de língua gestual (SLR), um problema desafiante e complexo com várias abordagens de resolução. Esta multiplicidade de abordagens é causada pela complexidade inerente a estes tipos de gestos, que podem ser classificados como gestos estáticos ou como gestos dinâmicos, onde mais do que uma fase de movimento é diferenciável. Assim, há diferentes tipos de métodos de classificação que podem ser aplicados a estes tipos de sinais, nomeadamente "Hidden Markov Models" (HMMs), máquinas de estado finito, filtragem de partículas e redes neuronais artificiais. Contudo, apesar do uso de redes neuronais artificiais ser bastante comum na classificação de movimentos simples, o seu uso no reconhecimento de língua gestual ainda está a ser explorado. De facto, a maioria dos esforços em SLR é empregue com o uso de HMMs, dada a sua eficácia no reconhecimento de sinais que variam ao longo do tempo. Esta dissertação tem como objetivo o desenvolvimento de um sistema de reconhecimento de língua gestual, através da medição de sinais EMG. Deste modo, a metodologia proposta baseia-se na extração de um conjunto discriminatório de características ("features") e na sua classificação através de uma rede neuronal artificial. O método desenvolvido foi aplicado á classificação de 10 sinais gestuais, de maneira a determinar os parâmetros ótimos da arquitetura da rede neuronal. Deste modo, o presente documento inclui um estudo sobre os parâmetros do modelo escolhido e os resultados de classificação correspondentes. Não só, apresenta uma análise sobre a influência de certos fatores na performance do sistema, nomeadamente o tamanho da população de amostra e o conjunto de "features" utilizado na representação.Por sua vez, os resultados obtidos apoiam o uso de uma rede neuronal artificial como ferramenta de classificação, na área de reconhecimento de língua gestual. Neste caso, o sistema desenvolvido classifica 10 sinais gestuais, provenientes de 4 sujeitos, com uma taxa de precisão de 95.4%. Não só, o sistema também é adequado para a classificação de movimentos simples, alcançando uma precisão de 92.7% na classificação de 10 movimentos efetuados por 4 sujeitos. | por |
dc.description.abstract | In recent years, a significant amount of effort has been dedicated to the field of human-computer interaction, particularly regarding the topic of gesture recognition. These developments aim to improve the quality of life of elderly and disabled people, through the creation of a new communication interfacebetween humans and computers. More precisely, these reseaches explore the electric nature of the human nervous system and attempt to apply it to the control of human-assisting devices.As such, the goal of these systems is to translate hand and arm motions into commands, through the detection, processing and classification of biosignals, namely electromyography signals (EMG). This work focuses on sign language recognition (SLR), an intricate and challenging problem which has yielded different approaches in the past. This is due to the inherent complexity of these types of gestures, which can either be static or dynamic, when more than one stage of motion is required.Thus, there are different classification method suitable for these types of signals such as Hidden Markov Models (HMMs), Finite State Machines, Particle Filtering and Artificial Neural Networks. However, while the use of artificial neural networks is very common in the classification of simple arm/hand movements it's use in sign language recognition is still being explored. In fact, most efforts at SLR are employed with HMMs due to the fact that they are more effective at recognizing signals which vary over time.Therefore, this study presents a step-by-step development of an EMG pattern recognition system, based on the classification of a discriminatory set of features by an artificial neural network. Moreover, it evaluates the performance of the aforementioned system by applying it to the classification of 10 sign language gestures. As such, this document includes an analysis on the optimal parameters of the networks architecture as well as a study on the influence of the sampling population and the representation of the input data on the system's performance.Moreover, the obtained classification results support the efficacy of an artificial neural network as a classifying tool, for complex sign language gestures. The developed system can classify 10 sign language gestures, from 4 subjects, with a classification accuracy of 95.4%. Not only, this system is also suitable for the classification of simple movements, achieving an accuracy rate of 92.7% for the classification of 10 hand and arm movements, performed by 4 subjects. | eng |
dc.language.iso | eng | - |
dc.rights | openAccess | - |
dc.rights.uri | http://creativecommons.org/licenses/by-nc/4.0/ | - |
dc.subject | Reconhecimento de língua gestual | por |
dc.subject | Reconhecimento de gestos | por |
dc.subject | Bio-sinais | por |
dc.subject | Sinais electromiográficos | por |
dc.subject | Rede neuronal artifical | por |
dc.subject | Sign language recognition | eng |
dc.subject | Gesture recognition | eng |
dc.subject | Biosignals | eng |
dc.subject | Electromyographic signals | eng |
dc.subject | Artificial neural network | eng |
dc.title | Extraction of sign language information through biosignals | eng |
dc.title.alternative | Extração de informação gestual através de bio-sinais | por |
dc.type | masterThesis | - |
degois.publication.location | DEEC | - |
degois.publication.title | Extraction of sign language information through biosignals | eng |
dc.peerreviewed | yes | - |
dc.identifier.tid | 202120490 | - |
thesis.degree.discipline | Engenharia Electrotécnica e de Computadores | - |
thesis.degree.grantor | Universidade de Coimbra | - |
thesis.degree.level | 1 | - |
thesis.degree.name | Mestrado Integrado em Engenharia Electrotécnica e de Computadores | - |
uc.degree.grantorUnit | Faculdade de Ciências e Tecnologia - Departamento de Eng. Electrotécnica e de Computadores | - |
uc.degree.grantorID | 0500 | - |
uc.contributor.author | Reis, Ana Cláudia Fernandes dos::0000-0001-5163-0246 | - |
uc.degree.classification | 18 | - |
uc.degree.presidentejuri | Perdigão, Fernando Manuel dos Santos | - |
uc.degree.elementojuri | Peixoto, Paulo José Monteiro | - |
uc.degree.elementojuri | Cortesão, Rui Pedro Duarte | - |
uc.contributor.advisor | Cortesão, Rui Pedro Duarte | - |
uc.controloAutoridade | Sim | - |
item.openairecristype | http://purl.org/coar/resource_type/c_18cf | - |
item.openairetype | masterThesis | - |
item.cerifentitytype | Publications | - |
item.grantfulltext | open | - |
item.fulltext | Com Texto completo | - |
item.languageiso639-1 | en | - |
crisitem.advisor.dept | Faculty of Sciences and Technology | - |
crisitem.advisor.parentdept | University of Coimbra | - |
crisitem.advisor.researchunit | ISR - Institute of Systems and Robotics | - |
crisitem.advisor.parentresearchunit | University of Coimbra | - |
crisitem.advisor.orcid | 0000-0003-1338-3138 | - |
Appears in Collections: | UC - Dissertações de Mestrado |
Files in This Item:
File | Description | Size | Format | |
---|---|---|---|---|
Dissertação_Ana_Reis.pdf | 2.18 MB | Adobe PDF | View/Open |
Page view(s) 50
486
checked on Apr 16, 2024
Download(s) 50
487
checked on Apr 16, 2024
Google ScholarTM
Check
This item is licensed under a Creative Commons License