Цей курс пропонує вичерпний огляд людино-машинного («людина-комп’ютер») та нейрокомп'ютерного («мозок-комп’ютер») інтерфейсів, зосереджуючись як на теоретичних, так і на технологічних основах сучасних інтерактивних систем. Студенти досліджуватимуть традиційні та нові методи користувацького інтерфейсу, включаючи командний рядок, графічні, мовленнєві та сенсорно-орієнтовані підходи. Особливий акцент робиться на таких технологіях, як аудіо- та візуальні сенсори, мікрофони, камери, дисплеї, тактильні пристрої, нюхові та смакові інтерфейси, а також біосенсори, що використовуються для комунікації типу «мозок-комп'ютер». Курс охоплює отримання сигналів, обробку, інтеграцію апаратного та програмного забезпечення та мультимодальне об'єднання даних, а також проєктування та оцінку інтерактивних систем. Практичні аспекти включають розроблення користувацьких інтерфейсів, застосування MEMS та цифрової обробки сигналів, а також інтеграцію штучного інтелекту в середовища XR. Навчальна програма підкреслює доступність, зручність використання та етичні міркування при проєктуванні інтерфейсів наступного покоління.
Після успішного завершення цього курсу студенти зрозуміють ключові концепції та механізми, що лежать в основі інтерфейсів типу «людина-комп'ютер» та «мозок-комп'ютер». Вони зможуть описати фізіологічні та технічні основи сенсорних інтерфейсів для зору, слуху, дотику, нюху та смаку. Студенти отримають компетенції в аналізі, проєктуванні та оцінці користувацьких інтерфейсів, включаючи практичні навички роботи з аудіо- та візуальними сигналами, обробкою зображень та мовлення, а також системами XR. Крім того, вони розвинуть критичне мислення щодо інтеграції мультимодальних вхідних даних, доступності, зручності використання, а також етичного та суспільного впливу сучасних технологій інтерфейсів.
- M. Mikuláštík, Komunikační dovednosti v praxi, 2. dopl. a přeprac. vyd. Praha: GRADA Publishing, a.s., 2010.
- J. A. Hall and M. L. Knapp, Nonverbal Communication. in Handbooks of Communication Science. De Gruyter, 2013.
- Sylvain Marchand, RESPECT: A FREE SOFTWARE LIBRARY FOR SPECTRAL SOUND SYNTHESIS, SCRIME / LaBRI – CNRS, Université Bordeaux 1 351 cours de la Libération, 33405 Talence cedex, France.
- https://www.raypcb.com/audio sensors/#:~:text=An%20audio%20sensor%20can%20be,processing%20circuitry%20and%20a%20microphone.
- https://www.thomannmusic.com/onlineexpert_page_dynamic_microphones_what_is_a_dynamic_microphone.html
- Horowitz S, Nishida T, Cattafesta L, Sheplak M. Development of a micromachined piezoelectric microphone for aeroacoustics applications. J Acoust Soc Am. 2007 Dec;122(6):3428-36. doi: 10.1121/1.2785040. PMID: 18247752.
- https://www.researchgate.net/publication/37413321_Loudspeaker_behaviour_under_incident_sound_fields/citations
- Nilu Singh, R.A. Khan, Raj Shree, Applications of Speaker Recognition, Procedia Engineering,Volume38,2012,Pages3122-3126,ISSN1877-7058,https://doi.org/10.1016/j.proeng.2012.06.363.
- https://www.uaudio.com/blog/audio-compression-basics/#:~:text=Compressors%20are%20one%20of%20the,also%20injecting%20coloration%20and%20tone.
- Sánchez López de Nava A, Somani AN, Salini B. Physiology, Vision. [Updated 2023 May 1]. In: StatPearls [Internet]. Treasure Island (FL): StatPearls Publishing; 2024 Jan-. Available from: https://www.ncbi.nlm.nih.gov/books/NBK538493/
- Polatoğlu, A., & Özkesen, İ. C. (2022). Working principles of ccd and cmos sensors and their place in astronomy. Journal of Anatolian Physics and Astronomy, 2(1), 51-59.
- https://www.researchgate.net/profile/AlbertoBoem/publication/326390381/figure/fig2/AS:648123797999618@1531536163436/Two-VRMIs-represented-through-the-Volflex-interface.png
- Adrian David Cheok, Kasun Karunanayaka, Digital Smell Interface, Virtual Taste and Smell Technologies for Multisensory Internet and Virtual Reality, 2018, ISBN : 978-3-319-73863-5.
- Abiri R., Borhani S., Sellers E. W., Jiang Y., Zhao X. (2019). A comprehensive review of EEG-based brain–computer interface paradigms. J. Neural Eng. 16:011001.
- Hohaia, W., Saurels, B.W., Johnston, A. et al. Occipital alpha-band brain waves when the eyes are closed are shaped by ongoing visual processes. Sci Rep 12, 1194 (2022). https://doi.org/10.1038/s41598-022-05289-6
- Simard, F., BCI Paradigms Cheat sheet, https://medium.com/@re-ak/bci-paradigms-layer-cheat-sheet-ccc60a03d302, online
- FaceFusion, https://github.com/facefusion/facefusion, online