VENI: варіаційний кодер для природного освітлення
Зворотне рендеринг є неправильно поставленою проблемою, але попередники, такі як ілюмінаційні пріоритети, можуть спростити її. Існуюча робота або ігнорує сферичний та обертно-еквівалентний характер освітлювальних середовищ, або не забезпечує добре поводженого прихованого простору. Ми пропонуємо обертально-еквівалентний варіаційний автокодер, який моделює природне освітлення на кулі, не покладаючись на 2D-проекції. Щоб зберегти SO (2) -еквівалентність карт середовища, ми використовуємо новий векторний трансформатор зору нейронів (VN-ViT) як кодер та умовне нейронне поле, еквівалентне обертання як декодер. У кодері ми зменшуємо еквівалентність від SO (3) до SO (2), використовуючи новий SO (2) -еквівалентний повністю з'єднаний шар, розширення векторних нейронів. Ми показуємо, що наш SO (2) -еквівалентний повністю з'єднаний шар перевершує стандартні векторні нейрони при використанні в нашій SO (2) -еквівалентної моделі. Порівняно з попередніми методами, наш варіаційний автокодер забезпечує більш плавну інтерполяцію в латентному просторі та пропонує більш якісний прихований простір.
At a glance
- Source
- arXiv
- Published
- Jan 20, 2026
- Read time
- 1 min read
- Primary lane
- Computer Vision
Quick read
1 bullets- Зворотне рендеринг є неправильно поставленою проблемою, але попередники, такі як ілюмінаційні пріоритети, можуть спростити її. Існуюча робота або ігнорує сферичний та обертно-еквівалентний характер освітлювальних середовищ, або не забезпечує добре поводженого прихованого простору. Ми пропонуємо обертально-еквівалентний варіаційний автокодер, який моделює природне освітлення на кулі, не покладаючись на 2D-проекції. Щоб зберегти SO (2) -еквівалентність карт середовища, ми використовуємо новий векторний трансформатор зору нейронів (VN-ViT) як кодер та умовне нейронне поле, еквівалентне обертання як декодер. У кодері ми зменшуємо еквівалентність від SO (3) до SO (2), використовуючи новий SO (2) -еквівалентний повністю з'єднаний шар, розширення векторних нейронів. Ми показуємо, що наш SO (2) -еквівалентний повністю з'єднаний шар перевершує стандартні векторні нейрони при використанні в нашій SO (2) -еквівалентної моделі. Порівняно з попередніми методами, наш варіаційний автокодер забезпечує більш плавну інтерполяцію в латентному просторі та пропонує більш якісний прихований простір.
Чому це важливо
Зворотне рендеринг є неправильно поставленою проблемою, але попередники, такі як ілюмінаційні пріоритети, можуть спростити її. Існуюча робота або ігнорує сферичний та обертно-еквівалентний характер освітлювальних середовищ, або не забезпечує добре поводженого прихованого простору. Ми пропонуємо обертально-еквівалентний варіаційний автокодер, який моделює природне освітлення на кулі, не покладаючись на 2D-проекції. Щоб зберегти SO (2) -еквівалентність карт середовища, ми використовуємо новий векторний трансформатор зору нейронів (VN-ViT) як кодер та умовне нейронне поле, еквівалентне обертання як декодер. У кодері ми зменшуємо еквівалентність від SO (3) до SO (2), використовуючи новий SO (2) -еквівалентний повністю з'єднаний шар, розширення векторних нейронів. Ми показуємо, що наш SO (2) -еквівалентний повністю з'єднаний шар перевершує стандартні векторні нейрони при використанні в нашій SO (2) -еквівалентної моделі. Порівняно з попередніми методами, наш варіаційний автокодер забезпечує більш плавну інтерполяцію в латентному просторі та пропонує більш якісний прихований простір.
Builder takeaway
arXiv published this update in the Computer Vision lane. Use the original source for details, then compare it with related briefings before changing a roadmap, workflow, or production system.
Зворотне рендеринг є неправильно поставленою проблемою, але попередники, такі як ілюмінаційні пріоритети, можуть спростити її. Існуюча робота або ігнорує сферичний та обертно-еквівалентний характер освітлювальних середовищ, або не забезпечує добре поводженого прихованого простору. Ми пропонуємо обертально-еквівалентний варіаційний автокодер, який моделює природне освітлення на кулі, не покладаючись на 2D-проекції. Щоб зберегти SO (2) -еквівалентність карт середовища, ми використовуємо новий векторний трансформатор зору нейронів (VN-ViT) як кодер та умовне нейронне поле, еквівалентне обертання як декодер. У кодері ми зменшуємо еквівалентність від SO (3) до SO (2), використовуючи новий SO (2) -еквівалентний повністю з'єднаний шар, розширення векторних нейронів. Ми показуємо, що наш SO (2) -еквівалентний повністю з'єднаний шар перевершує стандартні векторні нейрони при використанні в нашій SO (2) -еквівалентної моделі. Порівняно з попередніми методами, наш варіаційний автокодер забезпечує більш плавну інтерполяцію в латентному просторі та пропонує більш якісний прихований простір.
Stay ahead with daily AI briefings
Follow the feed, share the briefing, or jump back into the archive.