H ταχύτητα που προχωρά η Artificial Intelligence είναι τόσο συγκλονιστική ώστε πρέπει να μας βάλει σε σκέψεις. Από τα image generators που μόλις ξεπήδησαν την περασμένη χρονιά τώρα περνάμε στα video generators, τα οποία έχουν πολύ μεγαλύτερη πολυπλοκότητα, αφού αποτελούνται από το άθροισμα περισσότερων (διαδοχικών) καρέ. Το όνομα των εφευρετών του κινηματογράφου, των αδελφών Lumiere, υιοθετεί το αναμενόμενο από καιρό video image generator της Google, που μόλις “συστήθηκε” στο παγκόσμιο κοινό.
Η Google λοιπόν διάλεξε ένα ιστορικό θέμα για να φέρει στην επιφάνεια τη νέα τεχνολογία (να την πούμε artificial video), το στήσιμο της σημαίας, στην ιστορική μάχη της νήσου Iwo zima, με βάση την ιστορική φωτογραφία του πολεμικού ρεπόρτερ Joe Rosenthal, μια από τις πιο αναγνωρίσιμες φωτογραφίες όλων των εποχών. Επίσης η Google έκανε γνωστές μερικές πρωτοποριακές δυνατότητες του Lumiere όπωςτο Video Stylization, Cinemagraph,, Inpainting κλπ.
Το Google Lumiere ακολουθεί την αρχιτεκτονική Space TimeU-net που με ένα μόνον πέρασμα εξελίσσει την αρχική εικόνα σε video animation ακολουθώντας εντολές φυσικής γλώσσας και δουλεύοντας σε ένα μοντέλο εκμάθησης T2V πάνω σε βιβλιοθήκη τουλάχιστον 30 εκ. video διάρκειας 5sec έκαστο με τις λεζάντες τους.
.jpg)
