دادههای حرکتی دقیق برای آموزش رباتهای انساننما

خلاصه
محققان با استفاده از چارچوب زبانشناختی FrameNet مجموعه داده بزرگی از حرکات انسان و تعامل با اشیا جمعآوری کردهاند. این دادهها برای آموزش رباتهای انساننما به کار میرود و انتقال سیاستهای یادگیری تقویتی از شبیهسازی به ربات واقعی را ممکن میسازد.
مقدمه
رباتهای انساننما برای انجام کارهای روزمره در محیطهای واقعی نیاز به درک عمیقی از حرکات بدن انسان و نحوه تعامل با اشیا دارند. اما یکی از بزرگترین موانع در این مسیر، کمبود دادههای حرکتی دقیق و متنوع است. ویدئوهای اینترنتی و مجموعههای داده موجود، آنقدر دقیق نیستند که بتوانند تمام ظرافتهای حرکت انسان را ثبت کنند. به تازگی پژوهشگران مجموعه دادهای به نام HiPHI را معرفی کردهاند که با هدف پر کردن این شکاف طراحی شده است. این مجموعه داده نه تنها حرکات کامل بدن انسان را ثبت میکند، بلکه مسیر اشیا و تعامل دست با آنها را نیز به صورت همگام شده فراهم میآورد.
چرا دادههای حرکتی دقیق اهمیت دارند؟
یادگیری رباتهای انساننما یک مسئله بنیادی در حوزه هوش فیزیکی (Physical AI) است. ربات باید بیاموزد که چگونه بدنش را در فضا حرکت دهد، تعادل خود را حفظ کند و با اشیای مختلف برخورد کند. برای آموزش این مهارتها، ربات نیاز به دادههای حرکتی دارد که هم دقیق باشند و هم گسترده. دادههای ویدئویی معمولی که از اینترنت جمعآوری میشوند، معمولاً فاقد برچسبهای دقیق سهبعدی هستند و نمیتوانند جزئیات لازم برای کنترل دقیق مفاصل را ارائه دهند. همچنین، تعامل انسان با اشیا در این ویدئوها به صورت دقیق ثبت نمیشود. به همین دلیل، پژوهشگران به سراغ ساخت مجموعه دادههای تخصصی رفتند که با استفاده از سیستمهای ثبت حرکت (Motion Capture) تهیه میشوند.
چارچوب FrameNet و طراحی مجموعه داده
برای اینکه مجموعه داده به صورت سیستماتیک تمام طیف حرکات بدن انسان را پوشش دهد، محققان از چارچوب زبانشناختی FrameNet الهام گرفتند. FrameNet چارچوبی است که افعال و مفاهیم حرکتی را در قالب «قابهای معنایی» دستهبندی میکند. برای مثال، فعل «هل دادن» یک قاب معنایی دارد که شامل عامل، شیء و مسیر حرکت است. با استفاده از این چارچوب، پژوهشگران توانستند فهرستی از حرکات کلیدی مانند حمل کردن، هل دادن، کشیدن، بلند کردن و غیره تهیه کنند و سپس برای هر یک، حرکات واقعی انسان را با استفاده از لباسهای مخصوص ثبت حرکت ضبط کنند. این رویکرد باعث میشود که مجموعه داده به جای اینکه صرفاً مجموعهای تصادفی از حرکات باشد، پوششی نظاممند از دامنه وسیعی از تعاملات فیزیکی ارائه دهد.
ثبت همگام حرکات بدن و اشیا
یکی از ویژگیهای متمایز HiPHI، ثبت همگام مسیر اشیا در کنار حرکات بدن است. در حین ثبت حرکت، اشیای واقعی (مانند جعبه، توپ یا ابزار) نیز با نشانگرهای خاصی مجهز میشوند تا موقعیت و جهت آنها در هر لحظه ثبت شود. همچنین مدل سهبعدی (مش) هر شیء نیز در دادهها گنجانده میشود. این اطلاعات برای ربات حیاتی است، زیرا ربات نه تنها باید بداند دستش کجاست، بلکه باید بداند شیء مورد نظر چه ابعادی دارد و چگونه حرکت میکند. به عنوان مثال، وقتی یک انسان یک جعبه را هل میدهد، ربات میتواند از دادههای ثبت شده یاد بگیرد که چگونه نیرو را اعمال کند و مسیر جعبه را پیشبینی کند.
یادگیری تقویتی و انتقال از شبیهسازی به واقعیت
دادههای HiPHI برای آموزش سیاستهای یادگیری تقویتی (Reinforcement Learning) در محیط شبیهسازی استفاده میشود. در این روش، ربات مجازی در یک محیط شبیهسازی شده قرار میگیرد و با آزمون و خطا یاد میگیرد که حرکات را تقلید کند. اما چالش اصلی، انتقال این سیاستها به ربات واقعی است. پدیده «شکاف واقعیت» (Reality Gap) باعث میشود که رفتار ربات در شبیهسازی با دنیای واقعی متفاوت باشد. پژوهشگران نشان دادند که با افزایش مقیاس دادههای HiPHI، سیاستهای یادگیری تقویتی بهبود مییابند و انتقال به ربات انساننمای فیزیکی با موفقیت انجام میشود. این بدان معناست که ربات میتواند حرکاتی را که از انسانها یاد گرفته، در دنیای واقعی به کار ببرد.
کاربردهای عملی و آینده
این مجموعه داده کاربردهای گستردهای در رباتیک دارد. رباتهای امدادگر میتوانند از این دادهها برای یادگیری نحوه جابهجایی اجسام سنگین در محیطهای ناهموار استفاده کنند. رباتهای خدماتی میتوانند مهارتهای حمل و نقل اشیا را در خانه یا بیمارستان بیاموزند. همچنین، این دادهها میتوانند به توسعه رابطهای انسان-ربات ایمنتر کمک کنند. از منظر علمی، HiPHI نشان میدهد که ترکیب دانش زبانشناسی، بینایی کامپیوتر و یادگیری ماشین میتواند به ساخت سیستمهای فیزیکی هوشمندتر منجر شود. در آینده، انتظار میرود که مجموعه دادههای مشابه با تنوع بیشتر و دقت بالاتر، مسیر را برای رباتهای انساننمای کاملاً خودکار هموار کنند.
نتیجهگیری
مجموعه داده HiPHI گامی مهم در جهت پر کردن شکاف داده برای آموزش رباتهای انساننما است. با استفاده از چارچوب FrameNet، ثبت همگام حرکات بدن و اشیا، و انتقال موفق سیاستهای یادگیری تقویتی به ربات واقعی، این پژوهش نشان میدهد که میتوان با دادههای با کیفیت بالا، تواناییهای حرکتی رباتها را به طور قابل توجهی بهبود بخشید. این تلاش نه تنها به پیشرفت رباتیک کمک میکند، بلکه درک ما از نحوه یادگیری حرکات پیچیده توسط ماشینها را نیز عمیقتر میسازد.
منبع اصلی
https://content.knowledgehub.wiley.com/hiphi-a-large-scale-benchmark-for-high-precision-human-motion-and-object-interaction/IEEE Spectrum
این محتوای علمی در آموزش24 قابل دسترس است
پلتفرم آموزش24 با بهرهگیری از آخرین دستاوردهای علمی و فناوریهای نوین، تجربه آموزشی را ارتقا میبخشد.
مشاهده تعرفهها

