DEEP-SEE FACE – Hệ thống nhận diện khuôn mặt di động hỗ trợ người khiếm thị

( 0 đánh giá )
Miễn phí

Phần cứng: smartphone thu video, ultrabook GPU xử lý, tai nghe truyền âm qua xương; thiết kế đeo được, rảnh tay, rảnh tai.

  • Pipeline: phát hiện khuôn mặt (Faster R-CNN + RPN), theo dõi (ATLAS), trích xuất đặc trưng (VGG16), tổng hợp trọng số thích ứng, phân loại + lớp “Outlier”.
  • - Weight adaptation: CNN phân loại khung hình “relevant/irrelevant” dựa trên góc, độ nét, độ phân giải, nhiễu; softmax chuẩn hóa trọng số.
  • - Hard negative mining: chọn mẫu âm khó nhất cho lớp “Outlier” để tăng khả năng phân biệt người lạ.
  • - Kết quả: F1-score 93,29% với weight adaptation + hard negative mining; hoạt động ổn định với khuôn mặt chính diện, biến đổi tư thế, ánh sáng, che khuất, mờ.
  • - Đánh giá người dùng: 5 người khiếm thị thử nghiệm, đánh giá cao tính hữu ích, dễ học, phù hợp bổ sung cho gậy trắng.