Καλλιτεχνικές εμπειρίες XR

Abstract

Η πανδημία Κορονοϊού του 2019 έφερε τα πάνω κάτω σε πολλούς τομείς και σε πάμπολλους επαγγελματικούς χώρους. Ένας από τους χώρους που πλήγηκε ήταν και ο μουσικός. Διαφάνηκε έτσι η ανάγκη εξεύρεσης εναλλακτικών τρόπων παρουσίασης της εργασίας των μουσικών. Οι εικονικές συναυλίες είναι η ουσιαστική λύση στο πρόβλημα. Μια πρώιμη εργασία στη λύση του προβλήματος επιχειρήθηκε στη Διατριβή αυτή. Χρησιμοποιώντας το πρόγραμμα τρισδιάστατης μοντελοποίησης “Blender” κατασκευάστηκαν πλήκτρα πιάνου που μπορούσαν να κινούνται. Στην συνέχεια, μέσω του “Unreal Engine”, έγινε σύνδεση του ήχου με το παίξιμο των πλήκτρων κάνοντας χρήση του MIDI. Ακολούθησε η δημιουργία μουσικής σκηνής, τροποποιώντας υπάρχων τρισδιάστατο μοντέλο. Αξιοποιώντας το Metahuman Creator δημιουργήθηκε ο εικονικός μουσικός. Η καταγραφή των εκφράσεων του πραγματικού μουσικού και η μετάδοσή του στον εικονικό, συνόδευε την εργασία, κάτι που επιτεύχθηκε μέσω του Live Link Face. Η κίνηση σε πραγματικό χρόνο του σώματος του εικονικού μουσικού (όλου του χεριού με τα δάκτυλα) υλοποιήθηκε σε ικανοποιητικό βαθμό με IK. Έτσι, σε ευθετότερο χρόνο, η τελειοποίηση της εικονική συναυλίας με προσθήκη θεατών και αντικατάσταση του πιάνου με άλλα μουσικά όργανα δεν αποτελεί ανέφικτη προσδοκία.