ComfyUI-EquirectProjector

ComfyUI-EquirecProjector est un ensemble spécialisé de nœuds pour la plate-forme populaire ComfyUI qui étend sa fonctionnalité pour travailler avec des panoramas sphériques à 360 degrés. L'objectif principal de l'outil est d'intégrer des images panoramiques et des vidéos dans un pipeline d'IA génératif pour créer du contenu de réalité virtuelle et traiter des projections sphériques. L'ensemble se compose de deux composants clés : le nœud de projection Rectilinéaire → Equirect, qui convertit les images de perspective standard en format équirectangulaire, et le groupe de nœuds Equirect Seam, conçu pour les coutures panoramiques sans soudure avec suppression visible des frontières. L'outil a été développé avec la compatibilité avec le modèle LTX2.3 VR-Outpaint à l'esprit et est conçu pour le traitement par lots de données vidéo.

La principale valeur de cet ajout est qu'il résout les problèmes typiques rencontrés lors du travail avec les panoramas en génération d'IA : projeter correctement des images plates sur une sphère et éliminer les artefacts à la jonction des bords du panorama (le soi-disant « joint »). Grâce à son code open-source et à son modèle de distribution gratuit, cet outil est accessible à un large éventail de développeurs et de passionnés.

Caractéristiques du programme ComfyUI-EquitectProjector

Pour qui est ComfyUI-EquirecProjector?

Développeurs et passionnés de contenu VR

L'outil est destiné aux professionnels et amateurs qui créent du contenu pour la réalité virtuelle. Le jeu de nœuds permet d'intégrer la génération panoramique à 360 degrés dans les flux de travail familiers de ComfyUI, ce qui est particulièrement pertinent pour les développeurs d'applications VR et les créateurs d'environnements immersifs.

Spécialistes vidéo panoramiques

Puisque l'outil prend en charge le traitement vidéo par lots, il sera utile pour ceux qui travaillent avec des vidéos panoramiques. La possibilité de traiter des lots d'images permet d'automatiser le pipeline de traitement des séquences vidéo dans la projection sphérique.

Utilisateurs de ComfyUI intéressés par la peinture

L'ensemble contient des outils pour dépeindre (dessiner) l'espace autour d'un cadre inséré sur une sphère. Cela intéressera les artistes et les designers qui veulent étendre les images panoramiques au-delà du cadre original tout en conservant une géométrie correcte.

Comment utiliser ComfyUI-EquitectProjector?

Installation via Git

Pour commencer, vous devez cloner le dépôt de l'outil dans le custom_nodes dossier situé dans le répertoire d'installation de ComfyUI. C'est la façon standard de connecter des extensions personnalisées à la plate-forme.

Mise en place des dépendances

Après le clonage, vous devez installer les dépendances énumérées dans le requirements.txt fichier. Il est important de noter que l'outil a une dépendance optionnelle à la bibliothèque scipy - il est utilisé pour accélérer les calculs. Si scipy n'est pas installé, le jeu de nœuds reviendra automatiquement aux outils standard PyTorch.

Courir et utiliser

Après l'installation des dépendances, vous devez redémarrer ComfyUI. Les nouveaux nœuds apparaîtront dans l'interface utilisateur sous la 360/projection catégorie. De là, ils peuvent être ajoutés au graphique de flux de travail comme les éléments ComfyUI réguliers, les combinant avec d'autres nœuds pour créer le pipeline de traitement souhaité.

Principales caractéristiques de ComfyUI-EquitectProjector

Rectilinéaire → Projection Equitect

Le nœud clé de l'ensemble convertit des images ou des vidéos en perspective standard en projection équirectangulaire. Il prend en charge la configuration du champ de vision (FOV) ainsi que les paramètres d'orientation de la caméra sur la sphère — lacet et pas. Une caractéristique importante est la capacité d'utiliser le masque, qui est nécessaire pour la peinture ultérieure.

Nœuds de couture sans couture

Le groupe Equirec Seam Inpaint Prep, Export, and Compose node est conçu pour résoudre le problème des limites visibles (semelles) sur les images panoramiques. Ces nœuds permettent de préparer une image pour la peinture, l'exportation des résultats intermédiaires, et l'assemblage final de l'image panoramique transparente.

Traitement et filtrage des lots

L'outil prend en charge le traitement d'image par lots, ce qui le rend adapté pour travailler avec des fichiers vidéo. La transformation utilise grid_sample méthode avec filtrage bilinéaire, offrant une transformation de pixel lisse et de haute qualité pendant la projection.

Avantages de ComfyUI-EquitectProjector

• Intégration panoramique dans le pipeline AI: l'outil permet d'inclure des images 360 degrés dans le processus de génération, qui n'est pas disponible avec les outils standard ComfyUI.
• Résoudre le problème des coutures: des nœuds d'inpeinture spécialisés automatisent le processus de suppression des frontières visibles sur les panoramas, simplifiant grandement la création d'images sphériques de haute qualité.
• Support vidéo: la possibilité de travailler avec des lots d'images rend l'outil adapté au traitement de matériel vidéo panoramique.
• Ouvrir une source: la licence MIT permet l'utilisation gratuite, la modification et la distribution du code, ainsi que l'adaptation à vos propres besoins.
• Gratuit: l'absence de frais rend l'outil accessible à toutes les catégories d'utilisateurs.

Inconvénients de ComfyUI-EquitectProjector

Les sources disponibles ne fournissent pas d'information sur les inconvénients évidents de l'outil. Comme tout outil spécialisé, il exige que l'utilisateur ait une connaissance de base de la plate-forme ComfyUI et une compréhension du fonctionnement des projections panoramiques. En outre, la fonctionnalité complète peut nécessiter l'installation de la dépendance supplémentaire scipy, bien que la fonctionnalité soit préservée sans elle. Les limites de performance lors du traitement de grands tableaux vidéo ne sont pas non plus décrites dans les données sources.

Quelles tâches ComfyUI-EquirecProjector résout-il ?

Production de panorama VR

L'outil permet de créer des panoramas à 360 degrés pour une utilisation dans des applications de réalité virtuelle. Il permet d'intégrer la génération d'images sphériques dans des pipelines ComfyUI automatisés.

Conversion des images de perspective en images sphériques

En utilisant le rectiligne → Equirect noeud, des images plates régulières peuvent être converties en format équirectangulaire avec contrôle sur le champ de vue et l'orientation de la caméra. Ceci est nécessaire pour une utilisation ultérieure des images dans un contexte panoramique.

couture panoramique sans couture

L'ensemble de nœuds Equirec Seam résout le problème de l'élimination des frontières visibles sur les panoramas. Ceci est particulièrement important lorsque l'on produit des images avec des réseaux neuraux, qui créent souvent des artefacts aux bords des projections sphériques.

Espace de peinture sur une sphère

Grâce au masquage, l'outil permet de dessiner des zones au-delà du cadre original, en poursuivant logiquement l'image sphérique. Ceci est utile pour élargir les panoramas ou combler les lacunes.

Prix du promoteur

L'outil est distribué gratuitement. Le modèle économique du projet repose sur le principe de l'open source — il n'y a pas de frais d'utilisation, d'abonnement ou de frais cachés. Les utilisateurs peuvent télécharger, installer et utiliser librement le jeu de nœuds sans restrictions.

Conditions d'utilisation de ComfyUI-EquirecProjector

Exigences environnementales

L'outil nécessite l'installation de la plate-forme ComfyUI. L'installation se fait par clonage du dépôt dans le custom_nodes répertoire, après quoi les dépendances de requirements.txt doivent être installés. En option, scipy est recommandé pour un traitement plus rapide.

Conditions de licence

Le projet est distribué sous licence MIT, qui permet l'utilisation commerciale et non commerciale, la modification et la distribution du code à condition que l'avis de copyright soit conservé.

ComfyUI-EquitectProjector Disponibilité

La plateforme est une installation ComfyUI locale. Python et dépendances installées sont nécessaires pour l'utilisation. L'outil est disponible en téléchargement via un dépôt GitHub ; aucune région spécifique ou exigence VPN n'est indiquée. La langue de l'interface est l'anglais, qui correspond à l'interface standard ComfyUI.

Comment ComfyUI-EquirectProjector diffère des alternatives

La principale différence entre cet ensemble de nœuds et d'autres outils panoramiques est son intégration étroite avec l'écosystème ComfyUI. Contrairement aux programmes de traitement de panorama autonomes, cet outil fait partie du graphique de nœud d'un pipeline génératif, ce qui permet de le combiner avec d'autres nœuds ComfyUI, y compris des modèles de surpeinture et de génération. Le groupe spécialisé Equirec Seam Node résout délibérément le problème des coutures, qui reste souvent non résolu dans les outils universels. Une autre différence est l'optimisation pour le modèle spécifique LTX2.3 VR-Outpaint et le support intégré pour le traitement vidéo par lots, ce qui le rend pratique pour travailler non seulement avec des images simples mais aussi avec des séquences vidéo.

Conclusion

ComfyUI-EquirecProjector est un ensemble de nœuds open-source gratuit conçu pour intégrer des panoramas à 360 degrés dans les workflows de ComfyUI. Il fournit des outils pour projeter des images régulières en format équirectangulaire, couture panoramique transparente, et De la peinture. L'outil s'adresse aux développeurs et aux passionnés qui créent du contenu VR et traitent des vidéos panoramiques. Grâce à la licence MIT et à l'absence de frais, elle est disponible pour une utilisation et une modification gratuites, ce qui en fait un ajout précieux à l'écosystème ComfyUI.