Thiết kế và triển khai hệ thống thị giác toàn hướng cho nhận thức của robot

( 0 đánh giá )
Miễn phí

OVROP gồm 1 camera stereo và 3 camera đơn, mỗi camera có thể xoay quanh trục pitch từ -20° đến 40°.

  • Toàn bộ hệ thống có thể xoay quanh trục yaw để định hướng camera stereo về phía vật thể.
  • - Camera đơn dùng để phát hiện và theo dõi vật thể trong môi trường xung quanh.
  • - Khi phát hiện vật thể, hệ thống xoay camera stereo để tái tạo ảnh 3D và cung cấp thông tin chi tiết.
  • - Sử dụng thuật toán phân đoạn ảnh và matching stereo (SAD block matching) để tái tạo ảnh 3D.
  • - Thời gian xử lý ảnh stereo dưới 50 ms, thời gian xoay camera stereo tối đa 100 ms.
  • - Tổng thời gian xử lý toàn bộ chuỗi nhận thức là 110–160 ms.
  • - Hệ thống sử dụng board điều khiển PcDuino để xử lý sơ bộ và truyền dữ liệu qua WiFi.
  • - Camera đơn có FOV 120°, camera stereo có FOV 90°, độ phân giải 1280×720, tốc độ 30 fps.
  • - Hiệu chuẩn camera bằng OpenCV để loại bỏ biến dạng xuyên tâm và tiếp tuyến.
  • - Hiệu chuẩn stereo bằng Bouguet’s algorithm để tính ma trận quay R và vector dịch T.
  • - Áp dụng thuật toán phân vùng ảnh để xác định góc xoay cần thiết cho camera stereo.
  • - Hệ thống có thể nhận diện vật thể với độ chính xác >95% và tốc độ nhận diện ≤30 ms.