مجموعهٔ Flora حرکتهای داخل ویدئو را برای آموزش ربات توضیح میدهد
مجموعهٔ Flora شرکت NVIDIA ویدئوی کارِ انسان یا ربات را بررسی میکند و برای حرکتها زمان، توضیح و ارزیابی نتیجه مینویسد. مثلاً پژوهشگر میتواند از فیلم برداشتن یک مکعب برای آمادهکردن نمونههای آموزش ربات کمک بگیرد. خروجی ممکن است اشتباه باشد و برای فرماندادن مستقیم به ربات در نظر گرفته نشده است.

ویدئو به بازههای زمانی حرکت تقسیم میشود و برای هر بخش توضیح و برای نتیجه ارزیابی تهیه میشود.
مشاهدهٔ تصویر در اندازهٔ کاملچرا روی فیلم توضیح میگذارند؟
برنامهٔ یادگیرنده از نمونهها الگو میگیرد. برای آموزش ربات، داشتن فیلم بهتنهایی همیشه کافی نیست؛ پژوهشگر به توضیحی نیاز دارد که بگوید چه کاری در چه زمانی انجام شده است. در Flora، ابزار TempSeg بازهٔ زمانی حرکت را پیدا میکند، Captioner آن را توصیف میکند و Rewarder کیفیت کار یا نتیجه را ارزیابی میکند. این توضیحها دادهٔ آموزشی را آماده میکنند؛ خودشان مهارتِ آموختهشدهٔ یک ربات نیستند.
نسخهٔ در دسترس چه محدودیتی دارد؟
گزارش ۲۵ اکتبر The Decoder انتشار Flora را بررسی کرده است. مخزن NVIDIA نمونهکد اجرای مدلها را ارائه میکند، نه کد آموزش یا سامانهٔ سریعِ مورد استفاده در تولید. مجوز آن فقط پژوهش و ارزیابی غیرتجاری را اجازه میدهد. سازنده میگوید خروجیها باید روی ویدئوهای جداگانه بررسی شوند و تنها ابزار نظارت بر ایمنی دستگاه واقعی نباشند.