Design and Implementation of a Virtual Smart Board

Abstract

ABSTRACT: The Virtual Smart Board implementation is an issue of artificial intelligence to implement most of the functions of the real Smart Board. In this study the functions implemented are mouse actions (left & right click). These actions depend on the hand’s position compared with the site of view and the gesture of the hand. Hand tracking and gesture recognition are implemented in three different approaches. The first approach depends on a single camera where the hand is tracked in two dimensional space using a neural network and hand gesture recognition by another network. The second approach depends on two cameras which create a three dimensional space in order to store the position of the view surface and compare the position of skin spots with it. The third approach depends on infrared sensor to detect the infrared LED marker fixed on a glove with switches and a transmitter in order to interact with human action. Keywords: Smart Board, Skin Detection, Stereo Vision.

…………………………………………………………………………………………………………………………

ÖZ: Sanal Akıllı Tahta uygulaması gerçek Akıllı Tahta’nın içerdiği fonksiyon ve özelliklerin birçoğunu uygulamayı kapsar. Bu araştırmada uygulanan fonksiyonlar fare hareketleridir (sağ ve sol tuşlar). Bu tür hareketler izlenen sayfa ve el hareketiyle oluşan elin pozisyonuna bağlı olmaktadır. El takibi ve hareketi tanımlanması üç farklı yaklaşımla uygulanmaktadır. Birinci yaklaşım el takibini iki boyutlu olarak sinir ağı kullanarak ve el hareketlerini ise farklı bir ağ kullanarak tanımlayan bir adet kameraya bağlıdır. İkinci yaklaşım ise görünüş pozisyonunu kaydedip bununla deri noktalarını karşılaştıran üç boyutlu alan yaratan iki kamerayla desteklenmektedir. Üçüncü yaklaşım insan hareketleriyle etkileşime geçmek amacıyla bir eldivenin üzerine monte edilmiş fiş ve verici cihazlarla kızılötesi LED işaretleyicisini tanımlayan kızılötesi bir alıcıya bağlı olmaktadır.