Масштабування Sim-to-Real Reinforcement Learning для роботів VLA за допомогою Generative 3D Worlds

• Зосереджено на масштабуванні навчання підкріплення Sim-to-Real для роботів VLA з генеративними 3D-світами.
• Висока продуктивність великих моделей візуальної мови (VLM), навчених за допомогою навчання з підкріпленням (RL), спонукала до подібних підходів для точного налаштування моделей візуальної мови-дій (VLA) у робототехніці.
• Хоча в реальному світі RL обходить проблеми sim-to-real, він за своєю суттю обмежує загальність результуючого VLA, оскільки масштабування сцени та розмаїття об’єктів у фізичному світі є надзвичайно складним.
• Робототехніка все ще заважає збору даних і вартості скидання. Усе, що вилучає людей із циклу, підвищує цінність, оскільки пришвидшує наступні цикли навчання.

Чому це важливо