NVIDIA ร่วมมือกับ Google DeepMind และ Disney Research เพื่อพัฒนา Newton
NVIDIA ประกาศความร่วมมือกับ Google DeepMind และ Disney Research ในการพัฒนาโอเพ่นซอร์สฮาร์ดแวร์เอนจิน Newton ซึ่งช่วยให้บอทเรียนรู้วิธีการจัดการกับงานที่ซับซ้อนได้อย่างแม่นยำมากขึ้น.
Newton สร้างขึ้นบนกรอบงาน NVIDIA Warp ซึ่งทำให้การเรียนรู้ของบอทมีประสิทธิภาพมากขึ้น และเข้ากันได้กับกรอบงานจำลองเช่น MuJoCo ของ Google DeepMind และ NVIDIA Isaac Lab.
Google DeepMind และ NVIDIA กำลังร่วมมือกันพัฒนา MuJoCo-Warp โดยคาดว่าจะทำให้การทำงานของบอทในการเรียนรู้ของเครื่องเพิ่มความเร็วขึ้นมากกว่า 70 เท่า และจะถูกจัดเตรียมให้กับนักพัฒนาผ่านไลบรารีโอเพ่นซอร์ส MJX ของ Google DeepMind และ Newton.
หุ่นยนต์ BD1 จากภาพยนตร์ซีรีส์ Star Wars เป็นรูปเป็นร่างในโลกแห่งความเป็นจริง
Disney Research กลายเป็นหนึ่งในบริษัทแรกๆ ที่ใช้ Newton โดย Huang Renxun ขึ้นเวทีพร้อมกับบอท BDX Droids ซึ่งได้รับแรงบันดาลใจจากตัวละครหุ่นยนต์ BD1 ในภาพยนตร์ Star Wars ฝ่ายวิจัยและพัฒนาของ Disney Imagineering รองประธานอาวุโส Kyle Laughlin กล่าวว่าการร่วมมือกับ NVIDIA ช่วยให้พวกเขาสามารถสร้างตัวละครหุ่นยนต์ที่มีเสน่ห์มากกว่าที่เคย เป็นการสร้างสรรค์การออกแบบอุตสาหกรรมหุ่นยนต์ที่มีความบันเทิงมากขึ้น โดยการรวมการออกแบบรูปลักษณ์และการเคลื่อนไหวของหุ่นยนต์เข้ากับเทคโนโลยีของ NVIDIA.
NVIDIA Isaac GR00T สร้างแผนผังช่วยบอทการฝึกอบรมระยะหลัง
NVIDIA ประกาศเปิดตัวโมเดลพื้นฐานของหุ่นยนต์มนุษย์ทั่วไปโอเพ่นซอร์ส Isaac GR00T N1
NVIDIA ประกาศเปิดตัวโมเดลพื้นฐานหุ่นยนต์รูปแบบทั่วไป GROOT N1 ที่ GTC นี่คือโมเดลพื้นฐานโอเพ่นซอร์สทั่วไปที่เปิดให้ทีมพัฒนาหุ่นยนต์ทั่วโลก เป็นครั้งแรก ซึ่งสามารถเร่งเทคโนโลยีการพัฒนาหุ่นยนต์รูปแบบมนุษย์ได้ GR00T N1 เป็นโมเดลที่สามารถปรับแต่งได้อย่างสมบูรณ์รุ่นแรกที่ NVIDIA จะฝึกฝนล่วงหน้าและเผยแพร่ให้กับทีมพัฒนาหุ่นยนต์ทั่วโลก.
ผู้ก่อตั้ง NVIDIA คุณเจนเซน หวง กล่าวว่าถึงเวลาของบอททั่วไป (Generalist Robotics) แล้ว ด้วยโมเดลพื้นฐาน NVIDIA Isaac GR00T N1 และกรอบการเรียนรู้ข้อมูลบอทใหม่ ทีมพัฒนาบอททั่วโลกสามารถเร่งเปิดบทใหม่ในอนาคตของบอท AI บอททั่วไปตามชื่อที่บอกไว้ก็คือสามารถฝึกอบรมบอทให้ทำงานใดๆ ก็ได้ เปลี่ยนบอทให้กลายเป็นคนที่ทำได้ทุกอย่าง สามารถเป็นคนงานหรือช่วยทำงานบ้านได้ งานที่คิดได้สามารถให้บอททำได้ทั้งหมด
GR00T N1 โมเดลสถาปัตยกรรมระบบคู่ได้รับแรงบันดาลใจจากรูปแบบการเข้าใจการรับรู้ของมนุษย์
GR00T N1 โมเดลพื้นฐานใช้สถาปัตยกรรมแบบสองระบบ โดยได้รับแรงบันดาลใจจากรูปแบบการเข้าใจของมนุษย์ "ระบบ 1" เป็นโมเดลการกระทำที่คิดอย่างรวดเร็ว สะท้อนถึงการตอบสนองหรือสัญชาตญาณของมนุษย์ "ระบบ 2" เป็นโมเดลการคิดช้า ใช้สำหรับการพิจารณาอย่างลึกซึ้งและการตัดสินใจอย่างเป็นระเบียบ
ในกรอบของโมเดลภาษาทางสายตานี้ ระบบ 2 สามารถคิดวิเคราะห์สภาพแวดล้อมและวางแผนการกระทำตามคำสั่งที่ได้รับ ระบบ 1 ได้รับการฝึกอบรมจากข้อมูลการฝึกที่มนุษย์สร้างขึ้นและข้อมูลจำลองขนาดใหญ่ที่ผลิตจากแพลตฟอร์ม NVIDIA Omniverse เปลี่ยนแผนเหล่านี้ให้เป็นกิจกรรมของบอทที่แม่นยำและต่อเนื่อง.
GR00T N1 สามารถดำเนินการงานทั่วไปได้อย่างง่ายดาย เช่น การจับการเคลื่อนไหว การย้ายวัตถุด้วยแขนข้างเดียวหรือสองข้าง และการถ่ายโอนวัตถุจากแขนข้างหนึ่งไปยังอีกข้างหนึ่ง หรือการดำเนินการงานหลายขั้นตอนในบริบทเดียวกัน สามารถนำไปใช้ในสถานการณ์การจัดการวัสดุ การบรรจุ และการตรวจสอบ นักพัฒนาและนักวิจัยสามารถใช้ข้อมูลสังเคราะห์จริงหรือจำลองเพื่อฝึกอบรมหุ่นยนต์มนุษย์ในภายหลัง.
ในการบรรยายพิเศษ GTC นาย Huang Renxun ได้สาธิตการใช้งานหุ่นยนต์มนุษย์ NEO Gamma ของ 1X AI ที่ใช้การฝึกอบรมหลังการสร้างจาก GR00T N1 ในการทำภารกิจของผู้ช่วย หุ่นยนต์ที่ชื่อว่า NEO Gamma เป็นผลลัพธ์จากความร่วมมือระหว่างบริษัทสตาร์ทอัพหุ่นยนต์ 1x AI และ NVIDIA ในการเรียนรู้ของเครื่องด้วย AI ลองจินตนาการถึงฉากหนึ่งที่ผู้คนขี้เกียจนอนอยู่ที่บ้าน โดยมีมนุษย์ฝึกหุ่นยนต์ผู้ช่วยทำความสะอาดหรือเป็นผู้ช่วยในครัวทำงานบ้านที่ยุ่งยาก ขณะที่ตัวเองนอนอยู่บนโซฟาฟังเพลง หุ่นยนต์ผู้ช่วยสามารถฝึกได้ตามความต้องการส่วนบุคคล โดยเรียนรู้การเคลื่อนไหวในแบบที่มีการรับรู้ความคิดของมนุษย์.
1X Technologies CEO Bernt Børnich กล่าวว่าอนาคตของหุ่นยนต์มนุษย์อยู่ที่ความสามารถในการปรับตัวและการเรียนรู้ ความสามารถของ NVIDIA GR00T N1 ได้เพิ่มพูนความสามารถในการวิเคราะห์และทักษะของหุ่นยนต์อย่างมาก ในขณะที่พัฒนารูปแบบของบริษัท สามารถใช้การฝึกอบรมหลังจากด้วย GR00T N1 โดยใช้ข้อมูลเพียงเล็กน้อย ได้มีการปรับใช้เต็มรูปแบบบน NEO Gamma.
ผู้พัฒนาหุ่นยนต์ที่ได้รับสิทธิพัฒนา GR00T N1 ล่วงหน้าอื่น ๆ ได้แก่ Agility Robotics, Boston Dynamics, Mentee Robotics และ NEURA Robotics.
NVIDIA ร่วมมือกับ Google DeepMind และ Disney Research เพื่อพัฒนา Newton
NVIDIA ประกาศความร่วมมือกับ Google DeepMind และ Disney Research ในการพัฒนาโอเพ่นซอร์สฮาร์ดแวร์เอนจิน Newton ซึ่งช่วยให้บอทเรียนรู้วิธีการจัดการกับงานที่ซับซ้อนได้อย่างแม่นยำมากขึ้น.
Newton สร้างขึ้นบนกรอบงาน NVIDIA Warp ซึ่งทำให้การเรียนรู้ของบอทมีประสิทธิภาพมากขึ้น และเข้ากันได้กับกรอบงานจำลองเช่น MuJoCo ของ Google DeepMind และ NVIDIA Isaac Lab.
Google DeepMind และ NVIDIA กำลังร่วมมือกันพัฒนา MuJoCo-Warp โดยคาดว่าจะทำให้การทำงานของบอทในการเรียนรู้ของเครื่องเพิ่มความเร็วขึ้นมากกว่า 70 เท่า และจะถูกจัดเตรียมให้กับนักพัฒนาผ่านไลบรารีโอเพ่นซอร์ส MJX ของ Google DeepMind และ Newton.
หุ่นยนต์ BD1 จากภาพยนตร์ซีรีส์ Star Wars เป็นรูปเป็นร่างในโลกแห่งความเป็นจริง
Disney Research กลายเป็นหนึ่งในบริษัทแรกๆ ที่ใช้ Newton โดย Huang Renxun ขึ้นเวทีพร้อมกับบอท BDX Droids ซึ่งได้รับแรงบันดาลใจจากตัวละครหุ่นยนต์ BD1 ในภาพยนตร์ Star Wars ฝ่ายวิจัยและพัฒนาของ Disney Imagineering รองประธานอาวุโส Kyle Laughlin กล่าวว่าการร่วมมือกับ NVIDIA ช่วยให้พวกเขาสามารถสร้างตัวละครหุ่นยนต์ที่มีเสน่ห์มากกว่าที่เคย เป็นการสร้างสรรค์การออกแบบอุตสาหกรรมหุ่นยนต์ที่มีความบันเทิงมากขึ้น โดยการรวมการออกแบบรูปลักษณ์และการเคลื่อนไหวของหุ่นยนต์เข้ากับเทคโนโลยีของ NVIDIA.
NVIDIA Isaac GR00T สร้างแผนผังช่วยบอทการฝึกอบรมระยะหลัง
เครื่องมือข้อมูลคุณภาพสูงเป็นสิ่งจําเป็นสําหรับการพัฒนาบอท แต่ค่าใช้จ่ายในการรับข้อมูลนั้นสูง การจัดการจําลอง NVIDIA Isaac GR00T เพื่อสร้างพิมพ์เขียวช่วยแก้ปัญหานี้ พิมพ์เขียวใช้โมเดลฐานโลก Omniverse และ NVIDIA Cosmos Transfer ช่วยให้นักพัฒนาสามารถสร้างข้อมูลสังเคราะห์จําลองสําหรับงานปฏิบัติการจํานวนมากโดยมีคําแนะนําจากมนุษย์จํานวนน้อย NVIDIA ใช้พิมพ์เขียวเพื่อสร้างวิถีสังเคราะห์ 780,000 ครั้งใน 11 ชั่วโมง ซึ่งเทียบเท่ากับข้อมูลการเจาะของมนุษย์เก้าเดือนติดต่อกัน ด้วยการรวมข้อมูลสังเคราะห์เข้ากับข้อมูลจริง NVIDIA ให้ประสิทธิภาพบน GR00T N1 มากกว่า 40% เมื่อเทียบกับการใช้ข้อมูลจริงเพียงอย่างเดียว
NVIDIA ปล่อย GR00T N1 Open Physical AI Dataset เพื่อให้ทีมพัฒนาได้รับข้อมูลการฝึกอบรม นักพัฒนาสามารถรับข้อมูลได้ที่ Hugging Face.
บทความนี้ ไฮพ์ดา (NVIDIA) ประกาศเปิดตัวโมเดลพื้นฐานหุ่นยนต์อเนกประสงค์โอเพ่นซอร์ส Isaac GR00T N1 โดยปรากฏครั้งแรกใน ข่าวสายโซ่ ABMedia.