Một nhóm các nhà nghiên cứu từ Đại học Chiết Giang và Đại học Edinburgh đã phát triển một quy trình dựa trên AI có thể giúp chú chó robot Jueying của họ phục hồi sau những cú ngã cưỡng bức. Cách tiếp cận của họ khác với những gì Boston Dynamics đã làm với chú chó robot Spot của mình, nơi về cơ bản nó đã dạy cho robot di chuyển bằng cách sử dụng hàng thập kỷ kinh nghiệm của con người để viết mã, từng dòng một, cách robot phản ứng với các kích thích như bàn chân của con người.
Trong các phương pháp truyền thống để đào tạo robot, bạn sẽ phải viết mã một cách tỉ mỉ tất cả các hành vi chuyên biệt này. Ví dụ, các cơ cấu truyền động – động cơ di chuyển chân tay của robot – phải phối hợp với nhau như thế nào để làm cho máy chạy.
Zhibin Li, một chuyên gia về robot tại Đại học Edinburgh Zhibin Li, một trong những tác giả của bài báo gần đây được xuất bản trên tạp chí Science Robotics mô tả sistema.
Trong bài báo này, Li và các đồng nghiệp của ông trình bày chi tiết về cách tiếp cận dựa trên học tập củng cố cho AI mà họ đã sử dụng để cho phép chú chó robot Jueying của họ học cách đi lại và tự phục hồi sau khi ngã. Đầu tiên, các nhà nghiên cứu đã đào tạo phần mềm có thể điều khiển phiên bản ảo của robot. Vì vậy, họ đã phát triển một kiến trúc học tập với tám “chuyên gia” thuật toán giúp con chó robot tạo ra các hành vi phức tạp.
Đối với mỗi người trong số họ, một mạng nơ-ron sâu đã được sử dụng để huấn luyện mô hình máy tính của robot một kỹ năng cụ thể. Ví dụ, một người tập trung vào việc dạy bạn đi bộ, người khác tập trung vào việc dạy bạn đứng dậy sau khi ngã, v.v. Nếu chú chó robot ảo thực hiện một hành động nào đó đưa nó đến gần mục tiêu hơn, nó sẽ nhận được phần thưởng ảo. Nếu anh ta làm điều gì đó không được mong đợi, anh ta sẽ nhận được một danh hiệu kỹ thuật số. Quá trình học tập củng cố này tương tự như những gì Google đã sử dụng để đào tạo thuật toán MuZero của mình.
Sinh sản / Yang và cộng sự
Sau khi tám chuyên gia thuật toán được đào tạo thành công, các nhà nghiên cứu đã sử dụng một mạng nơ-ron bổ sung để hoạt động như một “huấn luyện viên trưởng”. Mạng bổ sung này về cơ bản quản lý thông tin được gửi bởi tám thuật toán khác, ưu tiên một hoặc nhiều hơn khi cần thiết trong một tình huống nhất định.
Khi quá trình hoàn tất, họ đã tạo ra một nguyên mẫu của chú chó robot Jueying, tải phần mềm và bắt đầu thử nghiệm. Trong ảnh gif dưới đây, bạn có thể thấy anh ta hồi phục nhanh như thế nào sau cú ngã cưỡng bức và cách anh ta chống lại các kích thích khác:
Sinh sản / Yang và cộng sự
Li cho biết một trong những mục tiêu của nhóm nghiên cứu là tạo ra những cỗ máy thông minh hơn, kết hợp các kỹ năng linh hoạt và thích ứng trong thời gian thực để xử lý nhiều nhiệm vụ khác nhau. Thách thức hiện nay là giảm sức mạnh tính toán cần thiết để mô phỏng quá trình đào tạo robot.
Nguồn: Engadget, Wired
…..
