Podstrona: Informatyka afektywna / Wizytówka pracownika PRz

Jednostka prowadząca: Katedra Informatyki i Automatyki

• 3 semestr, informatyka st. II-go stopnia
• ECTS: 3

     Kurs online     

Wykłady, 30 godzin

1. Wprowadzenie do informatyki afektywnej

1. Historia i definicja informatyki afektywnej. Przegląd zastosowań i znaczenie emocji w interakcji człowiek-komputer. 

2. Psychologiczne podstawy emocji

1. Teorie emocji (m.in. teoria podstawowych emocji, teoria dwuczynnikowa). Behawioralne i poznawcze aspekty emocji. 

3. Metody rozpoznawania emocji 

0. Klasyfikacja metod: analiza obrazu, śledzenie wzroku, analiza tekstu i głosu. Problemy i wyzwania w rozpoznawaniu emocji. 

4. Analiza ekspresji twarzy – podstawy. 

0. Wprowadzenie do analizy obrazu: wykrywanie twarzy i cech kluczowych. Wprowadzenie do algorytmów rozpoznawania emocji z obrazu. 

5. Analiza ekspresji twarzy – metody zaawansowane. 

0. Deep learning w rozpoznawaniu emocji z obrazów twarzy. Architektury sieci neuronowych używane w analizie obrazów (np. CNN). 

6. Śledzenie wzroku – podstawy. 

0. Czym jest śledzenie wzroku i jak działa? Technologie i narzędzia do analizy ruchu gałek ocznych (np. okulografy, kamery). 

7. Śledzenie wzroku w analizie emocji. 

0. Korelacja ruchu wzroku z emocjami użytkownika. Przykłady aplikacji: badania UX, systemy adaptacyjne. 

8. Analiza emocji w tekście. 

0. Wykorzystanie metod NLP do analizy sentymentu i emocji. Porównanie narzędzi i algorytmów (np. BERT, VADER). 

9. Wielomodalne podejście do rozpoznawania emocji. 

0. Łączenie analizy obrazu, ruchu wzroku, głosu i tekstu. Przykłady systemów wielomodalnych w praktyce. 

10. Rozpoznawanie emocji w czasie rzeczywistym. 

0. Wyzwania techniczne i algorytmiczne. Wykorzystanie modeli w systemach interaktywnych. 

11. Projektowanie afektywnych interfejsów użytkownika. 

0. Interakcja człowiek-komputer, oparta na emocjach. Przykłady aplikacji (np. systemy edukacyjne, gry). 

12. Informatyka afektywna w sztucznej inteligencji. 

0. Jak AI rozumie i reaguje na emocje? Przegląd aplikacji w chatbotach i asystentach wirtualnych. 

13. Algorytmy generatywne i ich zastosowanie w interfejsach afektywnych. 

0. Generatywne sieci neuronowe (GAN) a emocje w obrazach i animacjach. Praktyczne przykłady generowania emocjonalnych wyrazów twarzy. 

14. Etyka w informatyce afektywnej

0. Problemy związane z prywatnością, zgodą użytkownika i nadzorem. Przykłady dobrych praktyk.

15. Podsumowanie i przegląd projektów studenckich 

0. Dyskusja na temat wyzwań, zastosowań przyszłości.

Laboratoria, 15 godzin

1. Wprowadzenie do narzędzi do analizy emocji

   Instalacja i konfiguracja środowisk (np. Python, biblioteki: OpenCV, librosa, scikit-learn). Wykrywanie twarzy i cech kluczowych za pomocą OpenCV 

2. Analiza emocji z ekspresji twarzy

   Wykorzystanie OpenCV i OpenFace do analizy obrazów twarzy.  Budowa prostego klasyfikatora emocji (np. SVM). 

3. Wykorzystanie sieci neuronowych do analizy emocji z obrazów  

   Implementacja modelu CNN do rozpoznawania emocji.  Testowanie modelu na zestawie danych (np. FER2013). 

4. Analiza emocji z wideo

   Rozpoznawanie emocji z serii klatek wideo. Przegląd narzędzi do analizy ruchu twarzy (mediapipe). 

5. Realizacja systemu analizy emocji w czasie rzeczywistym

   Wykorzystanie strumienia wideo i modeli deep learning. Integracja z kamerą lub nagranymi materiałami. 

6. Projektowanie interaktywnego systemu opartego na emocjach

   Stworzenie prototypu aplikacji, która reaguje na emocje użytkownika.  Przykład: interfejs adaptacyjny lub gra interaktywna. 

7. Prezentacja projektów końcowych

   Studenci przedstawiają swoje projekty, omawiają zastosowane metody i wyniki. Dyskusja na temat napotkanych problemów i potencjalnych udoskonaleń.