انویدیا سیاست کاسموز (Cosmos Policy) را معرفی کرده است، یک سیستم کنترل و برنامهریزی ربات که با استفاده از مدلهای بنیادی جهان (WFMs) Cosmos کار میکند. این سیستم با آموزش مدل Cosmos Predict-2 برای وظایف دستکاری، عملکردی در سطح پیشرفته (SOTA) در بنچمارکهای LIBERO و RoboCasa به دست آورده است. سیاست کاسموز به طور مستقیم اقدامات ربات و حالتهای آینده را در مدل رمزگذاری میکند. سیاست کاسموز با استفاده از یک روش آموزش پس از پیشآموزش، مدل Cosmos Predict را بدون نیاز به اجزای معماری جدید یا ماژولهای کنترلی جداگانه، تطبیق میدهد. این رویکرد، دادههای ربات (مانند تصاویر دوربین) را به اقدامات فیزیکی (مانند حرکت بازوی رباتیک) نگاشت میکند و آنها را به عنوان فریمهای نهفته (latent frames) در نظر میگیرد. این فریمها با استفاده از فرآیند انتشار مشابه تولید ویدیو، یاد گرفته میشوند. مدل سیاست کاسموز میتواند به عنوان یک سیاست مستقیم (فقط تولید اقدامات) یا یک سیاست برنامهریزی (ارزیابی اقدامات بالقوه با پیشبینی حالتها و مقادیر آینده) مستقر شود. این مدل قابلیت پیشبینی قطعات اقدام برای هدایت حرکت ربات با هماهنگی چشم و دست، پیشبینی مشاهدات آینده ربات برای مدلسازی جهان و پیشبینی بازده مورد انتظار برای برنامهریزی را به صورت مشترک یاد میگیرد. این رویکرد جدید، به جای ساخت شبکههای عصبی جداگانه برای درک و کنترل ربات، تمام دادهها را به عنوان فریمهای نهفته در نظر میگیرد. این امر به مدل اجازه میدهد تا درک پیشآموزششده خود از فیزیک، گرانش و تکامل صحنهها را به ارث ببرد. سیاست کاسموز یک گام مهم در جهت توسعه سیستمهای هوش مصنوعی فیزیکی است و امکانات جدیدی را برای کنترل و برنامهریزی رباتها فراهم میکند.
مشاهده مطلب اصلی