הפיתוח של רובוטים דמויי אדם עבר בקצב איטי במשך יותר משני עשורים, אך לאחרונה ראינו יותר ויותר פריצות דרך בתחום זה. כפי שכתבנו לאחרונה, רובוט AI הוצג ב-MWC 2024 אמקהועוד התפתחות, Unitree H1, שבר את שיא המהירות בקרב רובוטים דמויי אדם. ועכשיו הופיעה באינטרנט תוצאה מרהיבה של שיתוף הפעולה בין החברות Figure AI ו-OpenAI - סרטון מהמם של רובוט דמוי אדם שיכול כעת לנהל שיחות עם אנשים.
Startup Figure AI פרסם סרטון המציג את הרובוט Figure 01 עובד עם מודל השפה החזותית החדש (VLM). בתוכה דמות 01 עומדת ליד שולחן שעליו צלחת, תפוח וספל. יש מייבש בצד שמאל. ולשאלת האדם, מה הרובוט רואה מולו, הוא עונה בתיאור מפורט של כל מה שמונח על השולחן.
ואז האיש שואל אם הוא יכול לאכול משהו, והרובוט עונה: "כמובן", ואז בתנועה חלקה מיומנת הוא לוקח את התפוח ומוסר אותו לאיש. אחרי זה מגיעה עוד הדגמה מהממת - אדם שופך אשפה מקומטת מסל מול איור 01 ומבקש מהרובוט להסביר למה הוא עשה את זה, ובמקביל לאסוף את האשפה לסל. והוא מסביר את ה"מחשבה" שלו בזמן שהחזיר את הנייר לפח. "אז נתתי לך תפוח כי זה הפריט האכיל היחיד שיכולתי לתת לך מהשולחן," אמר הרובוט.
נציגי החברה הסבירו כי איור 01 משתמש במודל מולטי-מודאלי שהוכשר מראש OpenAI, VLM, כדי להבין תמונות וטקסטים, ומסתמכת על הנחיות קוליות כדי ליצור את התגובות שלה. זה שונה, למשל, מה-GPT-4 של OpenAI, המתמקד בהנחיות כתובות.
הוא גם משתמש במה שהחברה מכנה "מניפולציות דו-מנויות שנלמדו ברמה נמוכה". המערכת מתאמת כיול תמונה מדויק (עד לרמת הפיקסלים) עם הרשת העצבית שלה לבקרת תנועה. "רשתות אלו קולטות תמונות ב-10 הרץ ומייצרות פעולות של 24-DOF (תנוחות פרק כף היד וזוויות מפרקי האצבעות) ב-200 הרץ", נאמר בהצהרה של Figure AI.
החברה טוענת שכל התנהגות בסרטון מבוססת על למידת מערכת, כך שאף אחד מאחורי הקלעים לא מושך בחוטים של איור 01. כמובן, יש ניואנס - לא ידוע כמה פעמים הרובוט עבר את ההליך הזה. אולי זו הייתה הפעם המאה, מה שמסביר את תנועותיו המדויקות. אבל בכל מקרה, ההישג הזה נראה מרהיב וקצת פנטסטי.
איור 01 משלים כעת משימות בעולם האמיתי
הכל אוטונומי:
-ניווט אוטונומי ומניפולציה מבוססת כוח
- מודל חזון נלמד לזיהוי פחים ותעדוף
-מניפולציה בפח תגובתי (חזק לשינוי תנוחה)
-ניתן להכללה למשימות בחירה/מקום אחרות תמונה.twitter.com/0wFmYnq0GC— איור (@Figure_robot) פברואר 26, 2024
קרא גם: