富士通開發(fā)出可用手指直觀觸摸操作UI技術(shù)
北京時間2013年04月19日消息,寶威科技網(wǎng)訊,富士通研究所近日宣布,開發(fā)出了可用手指直觀操作的用戶接口(UI)技術(shù)。該技術(shù)利用市售的攝像頭和投影儀來實現(xiàn)。用攝像頭檢測手指,在手指掃過書籍等中自己喜歡的部分時,可將這部分內(nèi)容讀取為電子數(shù)據(jù),還能在投影儀上顯示手指觸摸部分的信息。
目前已實用化的手勢輸入以空間操作為前提,但背景物體與手部相似時,會將手與背景混在一起檢測,難以檢測出手指的觸摸操作。最近出現(xiàn)了利用紅外線測距裝置的事例,但這種裝置不僅分辨率達不到細微檢測手指操作的程度,而且還存在體積大、成本高的課題。
為了解決這些問題,富士通研究所開發(fā)出了使用通用攝像頭和投影儀、以高精度和高速度檢測出手指位置及觸摸動作的技術(shù)。在(1)坐標識別及轉(zhuǎn)換技術(shù)、(2)手指識別的穩(wěn)定化技術(shù)、(3)指尖的高精度及高速識別技術(shù)這三方面頗具特點。
(1)中,開發(fā)出了使用兩個攝像頭形成立體攝像頭、自動測量桌子上的凹凸形狀,自動對攝像頭坐標系、投影儀坐標系及現(xiàn)實世界的坐標系做調(diào)整的技術(shù)。利用這一技術(shù),可將手指的動作和及對物體的觸碰,與投影儀的投射圖像準確重合起來。
(2)中,開發(fā)出了通過提取手指顏色和輪廓的特征來識別手指形狀的技術(shù)。另外,還采用了根據(jù)周圍的環(huán)境光控制攝像頭圖像的顏色及亮度,并對手指顏色的個人差異實施修正的技術(shù),由此實現(xiàn)了受設(shè)置環(huán)境及個人差異影響較小的穩(wěn)定的手指部分提取。
(3)中,即使是通過市售網(wǎng)絡(luò)攝像頭獲得的低分辨率圖像,也能通過指尖圖像插值處理,確保指尖觸摸檢測所需精度。“雖然指尖部分圖像的分辨率只有320×180像素,但完全能檢測出來”(富士通研究所的解說員)。另外,為了也能追蹤手指的動作,實施了濾波處理,從而實現(xiàn)了每秒300mm的指尖追蹤速度。
富士通研究所此次制造了臺式的試制品,并做了演示。試制品除了兩個市售攝像頭和投影儀之外,還配備有攝影用的相機模塊。演示內(nèi)容包括,用手指掃過書籍中自己喜歡的部分讀取數(shù)據(jù);識別旅游宣傳冊上的文字,顯示該地的圖片及視頻,在地圖上顯示該地的位置。
另外,還可將手寫的便條貼在桌子上,通過攝像機將該便條拍成圖像數(shù)據(jù)來讀取,在揭掉便條后也能作為電子便條顯示。這些電子便條可用手指來移動或分組,設(shè)想用于會議等場合。