prikaz prve stranice dokumenta Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja
Access restricted to students and staff of home institution
doctoral thesis
Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja
2021. urn:nbn:hr:179:582571
Kraljević, Luka
University of Split
Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture
Department of Electronics and Computing

Cite this document

Kraljević, L. (2021). Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja (Doctoral thesis). Split: University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture. Retrieved from https://urn.nsk.hr/urn:nbn:hr:179:582571

Kraljević, Luka. "Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja." Doctoral thesis, University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture, 2021. https://urn.nsk.hr/urn:nbn:hr:179:582571

Kraljević, Luka. "Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja." Doctoral thesis, University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture, 2021. https://urn.nsk.hr/urn:nbn:hr:179:582571

Kraljević, L. (2021). 'Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja', Doctoral thesis, University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture, accessed 14 November 2024, https://urn.nsk.hr/urn:nbn:hr:179:582571

Kraljević L. Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja [Doctoral thesis]. Split: University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture; 2021 [cited 2024 November 14] Available at: https://urn.nsk.hr/urn:nbn:hr:179:582571

L. Kraljević, "Unaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja", Doctoral thesis, University of Split, Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture, Split, 2021. Available at: https://urn.nsk.hr/urn:nbn:hr:179:582571

Please login to the repository to save this object to your list.
Metadata
TitleUnaprijeđena prirodna korisnička interakcija u paradigmi pametne okoline temeljena na metodama dubokog učenja
Title (english)Advanced natural user interaction in a smart environment paradigm based on deep learning methods
AuthorLuka Kraljević https://orcid.org/0000-0003-0539-4179
MentorMladen Russo (mentor)
Committee memberDinko Begušić (predsjednik povjerenstva)
Committee memberNikola Rožić (član povjerenstva)
Committee memberMaja Matijašević (član povjerenstva)
Committee memberMarjan Sikora (član povjerenstva)
Committee memberMaja Stella (član povjerenstva)
GranterUniversity of Split
Faculty of Electrical Engineering, Mechanical Engineering and Naval Architecture
(Department of Electronics and Computing)
Split
Defense date and country2021-02-02, Croatia
Scientific / art field,
discipline and subdiscipline		TECHNICAL SCIENCES
Electrical Engineering
Telecommunications and Informatics
Universal decimal classification
(UDC)		621.3 - Electrical engineering
Abstract
Promatrajući pametnu okolinu ne samo iz aspekta integracije tehnološkog napretka u društvo već kao i novu računalnu paradigmu koja za cilj ima unaprjediti način interakcije čovjeka i računala, vidljivo je da ona u svojoj srži zahtjeva razradu novih koncepata korisničkih sučelja orijentiranih prema oblicima interakcije urođenih u ljudsko ponašanje. Razmatrajući govor, geste i emocije kao tri najvažnija faktora međuljudske interakcije, u ovoj doktorskoj disertaciji je predstavljen skup znanstvenih istraživanja čiji znanstveni doprinosi utječu na unaprjeđenje korisničke interakcije. Preglednim poglavljem ova disertacija adresira ključne faktore koji su pridonijeli razvoju područja prirodnih korisničkih sučelja. Kao rezultat istraživanja u području govornih sučelja u ovoj disertaciji predstavljena je nova metoda za lokalizaciju izvora zvuka u 3D prostoru. Simulacijskom i eksperimentalnom analizom utvrđeno je da se razvijena metoda može koristi za precizno pozicioniranje izvora zvuka u otvorenom prostoru, a time ujedno predstavlja temelj za poboljšanje performansi govornog sučelja u uvjetima udaljenog snimanja. U kontekstu unaprjeđenja sučelja temeljenog na gestama, predložen je novi sustav za prepoznavanje dinamičkih gesti temeljen na algoritmu dubokog učenja gdje se kroz praktičnu provedbu na prepoznavanju hrvatskog znakovnog jezika pokazala mogućnost interakcije s pametnom okolinom. U sklopu istraživanja usmjerenim na afektivna sučelja, u ovoj disertaciji predložena je također i nova metoda za prepoznavanje emocija u glazbi koja se temelji na obradi audio signala realističnim biofizičkim modelom pužnice u svrhu generiranja vjernog prikaza ljudskog slušnog spektrogram te upotrebom konvolucijske neuralne mreže za ekstrakciju novih vrsta značajki. Analiza performansi na javno dostupnoj bazi potvrdila je izvrsne rezultate implicirajući pritom da se razvijeni sustav može koristiti za efikasno pretraživanje i organizaciju glazbenih datoteka na temelju emocionalnih vrijednosti. Predočene metode, znanstveni doprinosi kao i rezultati cjelokupnog istraživanja u području prirodnih korisničkih sučelja zajedno tvore novi znanstveni doprinos u smislu unaprjeđenja korisničke interakcije u pametnoj okolini.
Abstract (english)
Thinking of the smart environment not just only as of the integration of technological progress into society but also as a new computing paradigm aimed at reforming the way humans and computers interact, it is apparent that it requires the elaboration of new user interface concepts oriented towards forms of interaction innate to human behavior. Regarding speech, gestures, and emotions as the three most crucial interpersonal interaction factors, this doctoral dissertation presents a set of scientific research whose scientific contributions directly influence user interactions. With a given review chapter, this dissertation addresses the key factors contributing to the development of natural user interfaces. As a result of research in speech interfaces, a new method for sound source localization in 3D space was presented in this dissertation. Simulation and experimental analysis of the proposed approach showed that the method could precisely estimate the position of the sources in the free- field, and as such, it represents the basis for improving the performance of the speech interface in distant speech recognition. In the context of improved gesture-based interfaces, a new system for recognizing dynamic gestures was proposed based on a deep learning algorithm. Through practical implementation on the recognition of Croatian sign language, the possibility of interaction with a smart environment was demonstrated. As part of the research focused on affective interfaces, in this dissertation, a new method for recognizing emotions in music has also been proposed based on processing audio signals by a detailed biophysical cochlear model to generate an accurate representation of the human auditory spectrogram and use a convolutional neural network to extract new types of features. The presented methods, scientific contributions, and the results of the research in the field of natural user interfaces together form a new scientific contribution in improving user interaction in a smart environment.
Keywords
Keywords (english)
Languagecroatian
URN:NBNurn:nbn:hr:179:582571
Promotion2022
ProjectNumber: UIP-2014-09-3875
Title: Pametna okruženja za poboljšanje kvalitete života
Title: ELISE: Easy Living in Smart Environments
Acronym: ELISE
Leader: Mladen Russo
Jurisdiction: Croatia
Funder: HRZZ
Funding stream: UIP
ProjectNumber: DOK-2015-10
Title: Projekt razvoja karijera mladih istraživača - izobrazba novih doktora znanosti
Leader: Mladen Russo
Jurisdiction: Croatia
Funder: HRZZ
Study programmeTitle: Electrical Engineering and Information Technology
Study programme type: university
Study level: postgraduate
Academic / professional title: doktor/doktorica znanosti, područje tehničkih znanosti, polje elektrotehnika (doktor/doktorica znanosti, područje tehničkih znanosti, polje elektrotehnika)
Type of resourceText
Extent103 str.
File originBorn digital
Access conditionsAccess restricted to students and staff of home institution
Terms of useLicence In copyright icon
Created on2022-02-28 11:34:25