Drone CDT-ICTU bám người bằng điều khiển trượt thích nghi

Nemories

Tóm tắt

Mô phỏng lại bài báo “Deep Learning-Based Moving Target Detection and Tracking for Quadcopters Using Adaptive Sliding Mode Control” (WoS Q2) trên NVIDIA Isaac Sim 6.2. Drone CDT-ICTU được dựng lại theo ảnh thật, nhận diện người bằng YOLOv8n + ByteTrack trên ảnh của camera RealSense D435 gắn trên drone, rồi bám người bằng bộ lọc Kalman và bộ điều khiển trượt thích nghi (ASMC) đúng như trong bài.

Từ khoá: NVIDIA Isaac Sim 6.2; YOLOv8n + ByteTrack; Kalman; ASMC

Video. Mô phỏng lại bài báo WoS Q2: drone CDT-ICTU dựng theo ảnh thật nhận diện người bằng camera RealSense D435 rồi bám theo bằng bộ điều khiển trượt thích nghi.

Kết quả chính

0,032 msai số độ cao RMS khi có gió (ASMC)
0,730 mcùng kịch bản, bộ điều khiển không thích nghi
99,5 %thời gian khoá đúng người

1. Cách làm

  • Drone dựng theo 5 ảnh chụp drone thật của lab: khung carbon chéo 600 mm, cánh quạt 14 inch, vật lý PhysX.
  • Nhận diện người bằng YOLOv8n + ByteTrack chạy trên ảnh render của camera RealSense D435 gắn ở mũi.
  • Bộ lọc Kalman bù độ trễ 100 ms của khâu nhận diện; bộ điều khiển trượt thích nghi ước lượng nhiễu (d̂1) theo thời gian thực.
  • So sánh ASMC với bộ điều khiển không thích nghi trong hai kịch bản (A, B), với gió thực tế và với nhiễu đúng như bài báo.

Với nhiễu đúng như trong bài báo, sai số độ cao của ASMC ở kịch bản B (0,063 m) và của bộ điều khiển không thích nghi (0,689 m) khớp với số liệu công bố (0,063 m / 0,687 m), cho thấy mô phỏng tái tạo đúng bài báo.

2. Số liệu và hình kết quả

Bảng 1. Isaac Sim, gió thực tế (t = 10–66 s)
Chỉ sốA: ASMCA: không thích nghiB: ASMCB: không thích nghi
RMSE z (m)0,0140,0090,0320,730
RMSE x / y (m)0,183 / 0,1030,187 / 0,1010,140 / 0,0810,190 / 0,103
Nghiêng RMS / max (°)4,1 / 10,94,1 / 10,93,3 / 8,93,5 / 9,0
Sai số khoảng cách bám (m)0,910,910,901,16
Khoá đúng người (%)99,599,599,599,3
Hình 1. Sai số độ cao RMS, kịch bản B. Bộ điều khiển thích nghi giữ độ cao tốt hơn hơn 10 lần khi có nhiễu.
Quỹ đạo nhìn từ trên xuống, kịch bản A
Hình 2. Quỹ đạo nhìn từ trên xuống, kịch bản A.
Vị trí drone và người theo thời gian, kịch bản B
Hình 3. Vị trí drone và người theo thời gian, kịch bản B.
Ước lượng thích nghi của bộ điều khiển
Hình 4. Ước lượng thích nghi của bộ điều khiển.

Dự án liên quan

Mô phỏng chạy trên máy trạm ictu (NVIDIA RTX 5070 Ti), thư mục dự án mo phong/asmc_tracking. Số liệu lấy từ README và kết quả của dự án.

← Tất cả dự án