โปรแกรมควบคุมเมาส์ด้วยมือบนคอมพิวเตอร์

Abstract

โปรแกรมควบคุมตัวชี้เมาส์คอมพิวเตอร์จากสัญลักษณ์ที่แสดงด้วนมือ พัฒนาขึ้นเพื่อเพื่อสร้าง โปรแกรมตรวจจับการเคลื่อนไหวมือของผู้ใช้ มาควบคุมการทำงานของตัวชี้เมาส์ ด้วยหลักการประมวณ ผลภาพจากกล้องเว็บแคม ที่ติดตั้งอยู่กับเครื่องคอมพิวเตอร์ตั้งโต๊ะ หรือแล็ปท็อป แบบเรียลไทม์โดยมี ขั้นตอนดังนี้ (1) การเรียนรู้ภาพมือและท่าทางมือด้วยคอนโวลูชันนิวรอนเน็ตเวิร์ก (2) การค้นหามือด้วย การใช้ภาพ YCbCr และ การลดสัญญานรบกวน (3) การดึงวัตถุที่สนใจไปตรวจสอบว่าเป็นมือหรือ ท่าทางมือด้วย selective search และ (4) การตรวจสอบภาพว่าเป็นภาพมือและท่าทางมือด้วยโมเดลที่ ที่สุดจากขึ้นตอนที่ โดยทดลองกับภาพมือ 10 คนที่มีพื้นหลังแตกต่างกันและมีระยะทางห่างจากกล้อง 50 เซนติเมตรและ 100 เซนติเมตร และทดสอบกับภาพที่มีเฉพาะมือ และภาพที่มีทั้งมือและใบหน้า ผล การทดลองการค้นหามือมีความถูกต้อง 0.9545 และ ผลการทดลองการรู้จำมือมีความถูกต้อง 0.9558