Animer des captures de jeux rétro avec l'IA vidéo — vos avis ?

[andersoneditor]

Bonjour à tous,
Petite réflexion après avoir passé quelques soirées à bidouiller des captures d'écran de vieux jeux.
L'idée : reprendre une image fixe d'un jeu d'époque (un écran titre, une cinématique pixelisée) et en faire une courte vidéo animée — caméra qui avance lentement, léger parallaxe, ambiance sonore ajoutée par-dessus. Rien de révolutionnaire, mais ça donne parfois des résultats étonnamment nostalgiques, un peu comme ces « remasters » amateurs qu'on voit passer.
J'ai testé plusieurs outils en ligne. Le plus simple que j'aie trouvé pour du texte vers vidéo et de l'image vers vidéo est Kling 3.0 (kling3ai.co), qui tourne directement dans le navigateur sans installation. Ce qui m'a plu : on peut décrire le mouvement de caméra voulu et conserver le style visuel d'origine. Ce qui m'a moins plu : sur des scènes très détaillées en basse résolution, l'IA a tendance à inventer des détails qui n'existaient pas.
Du coup, deux questions pour ceux qui ont déjà tenté ce genre d'exercice :
1. Est-ce que vous voyez un intérêt réel à animer des captures de jeux abandonware, ou est-ce que ça trahit l'original ?
2. Il existe d'autres pistes (interpolation d'images, upscaling temporel, outils de restauration vidéo) — est-ce que certaines donnent de meilleurs résultats sur du pixel art ?
Curieux de lire vos retours.

[Dudujones]

Je suis contre se genre de modification car dans quelques années, on ne fera plus la difference entre le vrai du faux. Dans 10 ans, quand on cherchera une vidéo de PacMan de 1980, les 20 premiers resultats obtenus seront des video en 3D d'une boule jaune avec des pectoraux qui box des fantômes à l'effigie de Gasper.

[willow2]

Vaut mieux faire une vidéo en prenant des extraits de jeux abandonware si tu vais des petits clips animés quitte à les monter d'une certaine façon si tu veux que ça soit dynamique que créer des clips à partir de choses qui n'existent pas. Comme dit dudujones, dans quelques années quand on voudra des vidéos des jeux, on tombera sur tellement de vidéos fausses faites avec ia et qui seront évidemment pas étiquetées telles qu'on ne saura plus quelles sont les vidéos montrant vraiment le jeu et celles qui sont créés par IA.

Après si tu veux faire un remaster de ces jeux, tu peux en faire un en t'aidant de l'ia si tu veux mais faut le faire bien et pas laisser l'ia faire, sortir le projet et le laisser dans son jus avec les bugs et l'absence de finition.

[gameslover]

Je doute que ça soit une très bonne chose d’utiliser l’IA dans ce cadre car elle va irrémédiablement dénaturer les images originales en les rendant trop lisses par exemple ou trop propres.

[GT400]

Oui, le pixel art passé à la moulinette IA donne la plupart du temps des trucs lisses et sans âme. On perd le "grain" d'époque. Un truc que j'ai toujours eu du mal à décrire et avec lequel je me suis battu pendant des années quand je bricolais des images à partir d'anciens graphismes...
J'ai d'ailleurs demandé son avis à ChatGPT. Ce qu'il me sort à ce sujet correspond bien à ce que je pense :

Le pixel art n'est pas simplement une image basse résolution. C'est une image dont la matière, les couleurs et les formes ont été pensées à l'échelle du pixel.
Le pixel art a un grain particulier parce qu’il repose sur des contraintes techniques qui sont devenues un véritable langage artistique.
Et lorsqu'on remplace cela par davantage de précision, il peut perdre ce grain et ce charme si particuliers.
Le charme du pixel art ne vient pas de son manque de résolution, mais de la façon dont chaque pixel est utilisé.

Bref, c'est comme essayer de passer un canevas brodé en une peinture réaliste... en général, ça fait un truc artificiel très moche...