PRESENCE

A toolset for hyper-realistic and XR-based human-human and human-machine interactions
Ταυτότητα Έργου
Φορέας Χρηματοδότησης:
Πρόγραμμα Χρηματοδότησης:
HORIZON-CL4-2023-HUMAN-01-CNECT
Εργαλείο Χρηματοδότησης:
Research and Innovation Action
Ημερομηνία Έναρξης:
01/01/2024
Διάρκεια:
36 μήνες
Σύνολο Προϋπολογισμού:
7.655.707 EUR
Προϋπολογισμός Ι.Π.ΤΗΛ.:
469.375 EUR
Επιστημονικός Υπεύθυνος:

Η έννοια της «παρουσίας» μπορεί να οριστεί ως μια σύνθεση αλληλένδετων ψυχοφυσικών συστατικών όπου εμπλέκονται πολλαπλές αντιληπτικές διαστάσεις. Η καλύτερη κατανόηση του πώς συγκεκριμένες πτυχές της, όπως η αληθοφάνεια (η ψευδαίσθηση ότι τα εικονικά γεγονότα συμβαίνουν πραγματικά), η συν-παρουσία (η ψευδαίσθηση ότι είσαι μαζί με άλλους) ή η ψευδαίσθηση του τόπου (η ψευδαίσθηση ότι είσαι κάπου αλλού) επηρεάζουν τις εμπειρίες XR, είναι το κλειδί για τη βελτίωση της ποιότητάς τους. Η διαθεσιμότητα και η απόδοση των τρεχουσών τεχνολογιών δεν αρκούν για «παρουσία» υψηλού επιπέδου στα πλαίσια του XR, κάτι που είναι απαραίτητο για να έρθουμε επιτέλους πιο κοντά στο διαχρονικό όνειρο της εικονικής πραγματικότητας: να είμαστε οπουδήποτε, να κάνουμε οτιδήποτε μαζί με άλλους, από οποιοδήποτε μέρος. Η «παρουσία» λοιπόν, αντιμετωπίζει τρεις κύριες προκλήσεις: i) πώς να δημιουργήσουμε ρεαλιστικές οπτικές αλληλεπιδράσεις μεταξύ απομακρυσμένων ανθρώπων παρέχοντας «ολομεταφορά – holoportation» βασισμένη σε τεχνικές ζωντανής ογκομετρικής καταγραφής, συμπίεσης και βελτιστοποίησης υπό ετερογενείς συνθήκες υπολογισμού και δικτύου, ii) πώς να παρέχουμε ρεαλιστική επαφή μεταξύ απομακρυσμένων χρηστών και συνθετικών αντικειμένων, αναπτύσσοντας νέα απτικά συστήματα και επιτρέποντας τον χωρικό συγχρονισμό πολλαπλών συσκευών σε σενάρια πολλαπλών χρηστών, και iii) πώς να δημιουργούνται ρεαλιστικές κοινωνικές αλληλεπιδράσεις μεταξύ avatars και πρακτόρων, δημιουργώντας εικονικούς ανθρώπους με τεχνητή νοημοσύνη που αντιπροσωπεύουν πραγματικούς χρήστες ή πράκτορες τεχνητής νοημοσύνης. Το PRESENCE θα διασφαλίσει τη μελλοντική αξιοποίηση των ερευνητικών αποτελεσμάτων ακολουθώντας μια τριπλή μέθοδο αξιολόγησης: 1) κάθε τεχνολογία θα αξιολογηθεί ανεξάρτητα για να κατανοηθεί ο αντίκτυπός της στην ψευδαίσθηση της παρουσίας, 2) κάθε στοιχείο θα αξιολογηθεί από την ομάδα ολοκλήρωσης, παρέχοντας επιστημονική και τεχνική ανατροφοδότηση προκειμένου να διευκολυνθεί η χρήση τους σε κάποια μελλοντική επέκταση του έργου, καθώς και πέρα από το πεδίο εφαρμογής του έργου, και 3) όλα τα στοιχεία θα ενσωματωθούν σε δύο δοκιμαστικά περιβάλλοντα (επαγγελματικό και κοινωνικό), ακολουθώντας μια ανθρωποκεντρική προσέγγιση σχεδιασμού, και τελικά αξιολογώντας την εμπειρία του χρήστη.

Η ομάδα μας ασχολήθηκε με: 1) Τη χωρική βαθμονόμηση συστήματος πολλαπλών αισθητήρων χρώματος-βάθους, 2) Αλγορίθμους 3Δ ανακατασκευής ανθρώπου από πολλαπλούς αισθητήρες χρώματος-βάθους, 3) Ανακατασκευή avatar κεφαλής, βασισμένη σε Gaussian Splatting.

Κοινοπραξία

FUNDACIO PRIVADA I2CAT, INTERNET I INNOVACIO DIGITAL A CATALUNYA
ACTRONIKA
UNIVERSITAET HAMBURG
ETHNIKO KENTRO EREVNAS KAI TECHNOLOGIKIS ANAPTYXIS
RAYTRIX GMBH
SENSEGLOVE B.V.
GO TOUCH VR
DIDIMO, S.A.
VECTION ITALY SRL
UNIVERSITAT DE BARCELONA
UNITY TECHNOLOGIES APS
SOUND HOLDING B.V.
INTERUNIVERSITAIR MICRO-ELECTRONICA CENTRUM
JOANNEUM RESEARCH FORSCHUNGSGESELLSCHAFT MBH
SYNCVR MEDICAL NL B.V.
ZAUBAR UG (HAFTUNGSBESCHRAENKT)

Επικοινωνία

Δρ. Δημήτριος Ζαρπαλάς
(Επιστημονικός Υπεύθυνος)
Κτήριο Β - Γραφείο 0.18

Ινστιτούτο Τεχνολογιών Πληροφορικής και Επικοινωνιών
Εθνικό Κέντρο Έρευνας & Τεχνολογικής Ανάπτυξης
1ο χλμ Θέρμης - Πανοράματος, 57001, Θέρμη - Θεσσαλονίκη
Τηλ.: +30 2310 464160 (εσωτ.. 145)
Fax: +30 2310 464164
Email: zarpalas@iti.gr