การตรวจหาและติดตามใบหน้าและมือมนุษย์สำหรับวีดิทัศน์ภาษามือ

Abstract

วิทยานิพนธ์นี้เสนอการตรวจหาและติดตามใบหน้าและมือมนุษย์สำหรับภาษามือ ขั้นแรกทำการ คัดเลือกปริภูมิสีที่มีความเหมาะสมจาก 3 ปริภูมิสีย่อย คือ rg, HS และ CbCr โดยใช้วิธีของแบบจำลอง ชนิดไม่มีตัวแปร พบว่าปริภูมิสีย่อย CbCr มีความเหมาะสมมากที่สุดต่อการแยกสีผิวมนุษย์ โครงสร้าง ระบบแบ่งออกเป็น 2 ส่วน คือ ส่วนเริ่มต้นและส่วนการติดตาม ส่วนเริ่มต้นจะใช้คุณลักษณะสีผิวในการหา ตำแหน่งใบหน้าและมือของผู้แปลภาษามือ และเสนอให้ใช้แบบจำลองวงรีบนปริภูมิสีย่อย CbCr ในการ แยกส่วนสีผิวเพื่อลดความซับซ้อนในการคำนวณ เมื่อแยกส่วนสีผิวออกมาแล้วจะใช้คุณลักษณะของขนาด และองค์ประกอบสำคัญบนใบหน้ามาทำการกำหนดว่าบล็อบนั้นเป็นใบหน้าหรือมือ และจากสมมติฐาน ที่ว่าใบหน้ามีการเคลื่อนไหวน้อยกว่ามือมากในส่วนการติดตามการประมาณการเคลื่อนที่จะถูกใช้สำหรับบล็อบบริเวณมือเพียงอย่างเดียวเท่านั้น ซึ่งอนุพันธ์อันดับหนึ่งและสองถูกนำมาคำนวณเพื่อทำนาย ตำแหน่งของมือ สังเกตพบว่าค่าผิดพลาดจะเกิดกรณีที่มือมีการเปลี่ยนตำแหน่งอย่างทันทีทันใดระหว่าง 2 เฟรมที่อยู่ติดกัน เพื่อเพิ่มประสิทธิภาพของการติดตามจึงเสนอวิธีชดเชยความผิดพลาดจากตำแหน่งของ การติดตาม โดยใช้การปรับตัวของขอบเขตการค้นหาและทำการคำนวณซ้ำอีกครั้ง ผลที่ได้แสดงให้เห็นว่า ขั้นตอนวิธีที่นำเสนอสามารถติดตามมือได้อย่างแม่นยำ โดยใช้เวลาในการคำนวณเพิ่มขึ้นอีกเล็กน้อย เท่านั้น