計(jì)算技術(shù)的進(jìn)步已經(jīng)推動(dòng)了巨大的開(kāi)發(fā)努力以在諸如模擬、游戲和娛樂(lè)應(yīng)用等各種計(jì)算應(yīng)用中部署沉浸式環(huán)境。例如,各種在線(xiàn)游戲平臺(tái)已經(jīng)將虛擬現(xiàn)實(shí)(vr)環(huán)境、增強(qiáng)現(xiàn)實(shí)(ar)環(huán)境和/或混合現(xiàn)實(shí)(mr)環(huán)境集成到游戲玩法中。部署這樣的沉浸式環(huán)境使得用戶(hù)能夠查看和感知計(jì)算機(jī)生成的三維(3d)對(duì)象,就好像這些對(duì)象實(shí)際存在于用戶(hù)感知的環(huán)境內(nèi)一樣。已經(jīng)開(kāi)發(fā)出諸如vr和/或ar頭戴式耳機(jī)等各種頭戴式顯示(hmd)設(shè)備以部署沉浸式環(huán)境。這樣的hmd設(shè)備通常向用戶(hù)提供包括計(jì)算機(jī)生成的3d對(duì)象的視場(chǎng)(fov)的顯示。也就是說(shuō),hmd設(shè)備提供沉浸式環(huán)境的顯示。然而,為了增強(qiáng)用戶(hù)在沉浸式環(huán)境內(nèi)的體驗(yàn),支持與經(jīng)由hmd...
例如,用戶(hù)可以選擇、控制、編輯、旋轉(zhuǎn)、平移、移動(dòng)、重新定位或以其他方式操縱vo。例如,可以基于交互數(shù)據(jù)來(lái)更新vo的旋轉(zhuǎn)取向或位置。在一些實(shí)施例中,可以更新和/或修改fov以改變背景或fov中包括的一個(gè)或多個(gè)vo的顏色、對(duì)比度或亮度。在各種實(shí)施例中,可以在框710更新fov的視點(diǎn)(例如,查看器的視角的位置)。在一些實(shí)施例中,可以將fov更新為包括新vo的生成、和/或fov中已經(jīng)包括的vo的加倍和/或再現(xiàn)。在至少一個(gè)實(shí)施例中,交互數(shù)據(jù)對(duì)3dvo的平面切片或?qū)拥倪x擇進(jìn)行編碼。在框708或框710,可以將vo的平面切片與is設(shè)備的觸敏表面相關(guān)。例如,所選擇的平面切片可以被“釘扎”到觸敏表面。響...
在復(fù)合干擾類(lèi)型環(huán)境下的目標(biāo)**,本發(fā)明除了對(duì)現(xiàn)有方法較易處理的靜雜波有較好的結(jié)果之外,對(duì)于密集的動(dòng)雜波也有很好的處理效果。相對(duì)霍夫變換和粒子濾波方法,本發(fā)明對(duì)于密集動(dòng)雜波干擾下的圖像序列中的目標(biāo)**的快速性方面得到極大的提升。相對(duì)于動(dòng)態(tài)規(guī)劃方法在目標(biāo)擴(kuò)展問(wèn)題和航跡中斷情況下展現(xiàn)的不足之處,本發(fā)明也有很好的解決效果,實(shí)現(xiàn)了在復(fù)合干擾情況下對(duì)目標(biāo)運(yùn)動(dòng)軌跡的快速、準(zhǔn)確、連續(xù)性檢測(cè)。附圖說(shuō)明圖1為子空間投影tbd流程圖,圖2為運(yùn)動(dòng)目標(biāo)軌跡的子空間投影。具體實(shí)施方式下面結(jié)合具體實(shí)施例對(duì)本發(fā)明做進(jìn)一步的分析。本實(shí)驗(yàn)將一組聲納圖像序列作為**檢測(cè)輸入。如圖1所示,在基于子空間投影的復(fù)雜場(chǎng)景運(yùn)動(dòng)小目標(biāo)...
例is設(shè)備210的用戶(hù)可以控制和/或操縱經(jīng)由多個(gè)hmd設(shè)備同時(shí)示出給多個(gè)用戶(hù)的一個(gè)或多個(gè)vo。圖2b是根據(jù)本公開(kāi)的一些實(shí)施例的用戶(hù)選擇虛擬對(duì)象的層(即,平面切片)以與交互感測(cè)設(shè)備的觸敏表面相關(guān)的示例性實(shí)施例的示意圖。更具體地,圖2示出了fov260(經(jīng)由hmd設(shè)備提供)。fov260可以包括分層對(duì)象的多個(gè)層264的“平坦”或3d表示268。例如,表示268可以是分層文檔中包括的各個(gè)層的表示,諸如但不限于演示幻燈片。在圖2b所示的非限制性實(shí)施例中,經(jīng)由在fov260內(nèi)投影和/或顯示的多個(gè)層264的“平坦”呈現(xiàn)來(lái)示出演示幻燈片的層1-5中的每一個(gè)。每個(gè)層包括一個(gè)或多個(gè)2d和/或3dvo。層...
更具體地,觸摸手勢(shì)傳感器120可以感測(cè)和/或檢測(cè)與觸敏設(shè)備相關(guān)聯(lián)的2d觸摸手勢(shì)。也就是說(shuō),觸摸手勢(shì)傳感器120可以感測(cè)和/或檢測(cè)手部、指尖、多指尖和觸筆手勢(shì),諸如但不限于“捏”、“拉”、“按下并保持”、“單指敲擊”、“兩指敲擊”、“單擊”、“雙擊”、“向左滑動(dòng)”、“向右滑動(dòng)”、壓力變化(例如,3d觸摸)手勢(shì)等。在各種實(shí)施例中,觸摸手勢(shì)傳感器120可以是電容性感測(cè)傳感器。因此,觸敏表面112可以是2d電容性感測(cè)表面。在一些實(shí)施例中,is設(shè)備110可以是懸停感測(cè)(hs)設(shè)備。在至少一個(gè)實(shí)施例中,is設(shè)備110可以是觸摸和懸停(tah)設(shè)備。在這樣的實(shí)施例中,觸敏表面112可以附加地是hs設(shè)...
例如,對(duì)于hs設(shè)備的平面活動(dòng)表面,可以采用笛卡爾坐標(biāo)系。笛卡爾坐標(biāo)系的x-y平面可以與hs設(shè)備的平面活動(dòng)表面基本共面(并且笛卡爾坐標(biāo)系的z軸可以基本正交于hs設(shè)備的平面活動(dòng)表面)。更具體地,嵌入hs設(shè)備的平面活動(dòng)表面中和/或與hs設(shè)備的平面活動(dòng)表面集成的電容性接近傳感器檢測(cè)接近活動(dòng)表面而懸停和/或運(yùn)動(dòng)的用戶(hù)指尖。響應(yīng)于該檢測(cè),只要指尖的z坐標(biāo)小于與活動(dòng)表面相關(guān)聯(lián)的接近傳感器的接近距離閾值,hs設(shè)備就生成交互數(shù)據(jù),該交互數(shù)據(jù)對(duì)用戶(hù)的指尖中的一個(gè)或多個(gè)指尖(相對(duì)于活動(dòng)表面)的x坐標(biāo)、y坐標(biāo)和z坐標(biāo)編碼。取決于嵌入在hs設(shè)備中的具體接近傳感器,接近傳感器在每個(gè)維度上的分辨率可以相似或可以不同...
可以基于交互數(shù)據(jù)來(lái)自動(dòng)地(由is設(shè)備和/或hmd設(shè)備)確定物理對(duì)象的形狀,諸如凸起或另一分立的物理對(duì)象的形狀,該交互數(shù)據(jù)響應(yīng)于沿著物理對(duì)象的一個(gè)或多個(gè)表面檢測(cè)到的用戶(hù)肢端的運(yùn)動(dòng)而被生成。hmd設(shè)備可以基于所確定的形狀來(lái)更新fov。例如,可以在fov內(nèi)生成描繪形狀的2d或3d可視化的全息圖或其他vo。在一些實(shí)施例中,hmd設(shè)備可以基于對(duì)用戶(hù)肢端沿著物理對(duì)象的一個(gè)或多個(gè)表面的所檢測(cè)到的運(yùn)動(dòng)進(jìn)行編碼的交互數(shù)據(jù)來(lái)更新fov中包括的vo的旋轉(zhuǎn)取向,該物理對(duì)象諸如但不限于覆蓋物的凸起或另一單獨(dú)的物理對(duì)象。is設(shè)備可以包括被配置為檢測(cè)用戶(hù)交互的至少一部分的多個(gè)相機(jī)設(shè)備。交互數(shù)據(jù)可以對(duì)vo的平面切...
在這樣的實(shí)施例中,手部被支撐,并且用戶(hù)肌肉用于以非常準(zhǔn)確且非視覺(jué)的方式感測(cè)距is的距離。在至少一個(gè)實(shí)施例中,is設(shè)備上的手指與懸停的手指之間的距離可以限定對(duì)象的豎直尺度。第二手指(諸如拇指)的位置可以改變觸摸手勢(shì)的含義(例如,從拖動(dòng)到選擇)。盡管圖2a示出了與hmd設(shè)備配對(duì)的單個(gè)is設(shè)備210,但是應(yīng)當(dāng)理解,多個(gè)is設(shè)備可以與mhd設(shè)備配對(duì)。例如,至少兩個(gè)is設(shè)備可以與hmd設(shè)備配對(duì),用戶(hù)的每只手一個(gè)。因此,用戶(hù)可以將每個(gè)is設(shè)備設(shè)置在諸如桌子的穩(wěn)定表面上,并且可以經(jīng)由多個(gè)手部手勢(shì)來(lái)控制多個(gè)vo,其中每只手懸停在相應(yīng)is設(shè)備之上。另外,一個(gè)或多個(gè)is設(shè)備可以耦合到hmd設(shè)備,其中一個(gè)或...
所生成的交互數(shù)據(jù)可以對(duì)由用戶(hù)執(zhí)行的2d和/或3d手部、指尖或多指尖手勢(shì)編碼。在一些實(shí)施例中,is設(shè)備可以對(duì)由用戶(hù)執(zhí)行的觸筆或觸筆尖的手勢(shì)編碼。在各種實(shí)施例中,is設(shè)備包括一個(gè)或多個(gè)有線(xiàn)和/或無(wú)線(xiàn)數(shù)據(jù)收發(fā)器,以經(jīng)由通信會(huì)話(huà)向另一設(shè)備提供所生成的交互數(shù)據(jù)的至少一部分。這樣的無(wú)線(xiàn)數(shù)據(jù)收發(fā)器包括但不限于一個(gè)或多個(gè)通信無(wú)線(xiàn)電。在一些實(shí)施例中,is設(shè)備可以包括觸覺(jué)(haptic)反饋接口,類(lèi)似于諸如平板計(jì)算機(jī)和智能電話(huà)等移動(dòng)設(shè)備中經(jīng)常包括的觸覺(jué)反饋接口。計(jì)算技術(shù)的開(kāi)發(fā)努力已經(jīng)使“懸?!备袦y(cè)(hs)設(shè)備成為可能。這樣的hs設(shè)備通常檢測(cè)用戶(hù)的手部、手指和指尖(即,肢端(extremity))的“懸停手...
也就是說(shuō),用戶(hù)可以通過(guò)壓敏設(shè)備經(jīng)由壓力變化手勢(shì)(例如,3d觸摸)來(lái)提供3d手勢(shì)。例如,可以經(jīng)由壓力變化手勢(shì)和壓敏設(shè)備來(lái)類(lèi)似地提供經(jīng)由hs而提供的3d信息。在一些實(shí)施例中,is設(shè)備可以包括觸敏、壓敏設(shè)備、懸停敏感設(shè)備的任何組合。也就是說(shuō),is設(shè)備中包括的觸敏設(shè)備也可以是壓敏的和/或懸停敏感的。因此,is設(shè)備可以檢測(cè)3d的類(lèi)似觸摸、壓力和/或懸停的手勢(shì)。在本文中的其他的一些實(shí)施例中,可以通過(guò)采用一個(gè)或多個(gè)光子檢測(cè)器(例如,相機(jī))**懸停在2d觸敏表面之上的指尖的運(yùn)動(dòng),經(jīng)由諸如is設(shè)備的一個(gè)或多個(gè)設(shè)備來(lái)檢測(cè)3d手勢(shì)。例如,可以采用光子檢測(cè)器的矩陣以通過(guò)檢測(cè)從用戶(hù)指尖反射的光子來(lái)檢測(cè)手勢(shì)。類(lèi)似...
在各種實(shí)施例中,操作還包括由tah設(shè)備確定耦合到其的凸起的形狀。形狀的確定是基于對(duì)沿著凸起的一個(gè)或多個(gè)表面檢測(cè)到的用戶(hù)肢端的3d運(yùn)動(dòng)的至少一部分進(jìn)行編碼的所生成的交互數(shù)據(jù)的一部分。hmd設(shè)備可以被配置為基于凸起的所確定的形狀來(lái)更新fov。在本文中描述的又一實(shí)施例中,提供了一種用于使能沉浸式環(huán)境中與vo的用戶(hù)交互的系統(tǒng)。該系統(tǒng)包括物理覆蓋物。該物理覆蓋物呈現(xiàn)三維(3d)凸起。物理覆蓋物可耦合到交互感測(cè)(is)設(shè)備。3d凸起從is設(shè)備的二維(2d)交互感測(cè)表面被移位。例如,2d交互感測(cè)表面可以是通常在諸如但不限于智能電話(huà)和平板計(jì)算機(jī)的移動(dòng)設(shè)備中采用的觸摸或電容性感測(cè)表面。物理覆蓋物耦合...
由于觸敏顯示設(shè)備在移動(dòng)設(shè)備(例如,智能電話(huà)、平板計(jì)算機(jī)、智能手表等)中的集成,用戶(hù)已經(jīng)熟悉了經(jīng)由直觀的指尖手勢(shì)的在移動(dòng)應(yīng)用內(nèi)的用戶(hù)交互。這樣的指尖手勢(shì)可以包括多點(diǎn)觸摸(或多指尖)手勢(shì),諸如但不限于“捏”、“拉”、“按下并保持”、“單指敲擊”、“兩指敲擊”、“單擊”、“雙擊”、“向左滑動(dòng)”、“向右滑動(dòng)”、壓力變化(例如,3d觸摸)手勢(shì)等。多點(diǎn)觸摸手勢(shì)甚至可以支持與計(jì)算應(yīng)用的多個(gè)組件的同時(shí)交互。例如,用戶(hù)可以經(jīng)由多指尖觸摸同時(shí)選擇智能電話(huà)上的多個(gè)圖標(biāo),以分離觸敏顯示設(shè)備的部分。這種高度采用的直觀用戶(hù)交互可能難以經(jīng)由通過(guò)嵌入在hmd設(shè)備中的運(yùn)動(dòng)傳感器而檢測(cè)到的通過(guò)自由空間的手部手勢(shì)來(lái)實(shí)現(xiàn)。例...
至少兩個(gè)is設(shè)備(用戶(hù)的每只手一個(gè))可以耦合到hmd設(shè)備140。在其他的一些實(shí)施例中,一個(gè)或多個(gè)is設(shè)備可以耦合到hmd設(shè)備140,其中所耦合的一個(gè)或多個(gè)is設(shè)備的一個(gè)或多個(gè)用戶(hù)未佩戴hmd設(shè)備140。也就是說(shuō),is設(shè)備110的用戶(hù)可以與佩戴hmd設(shè)備140的用戶(hù)不是同一用戶(hù)。類(lèi)似地,is設(shè)備110可以耦合到多于一個(gè)的hmd設(shè)備。也就是說(shuō),單個(gè)is設(shè)備可以與多個(gè)hmd設(shè)備耦合和/或配對(duì)。 is設(shè)備110可以包括2d觸敏表面112。觸敏表面112可以包括觸敏設(shè)備,諸如但不限于類(lèi)似于在諸如智能電話(huà)和平板計(jì)算機(jī)的計(jì)算設(shè)備中經(jīng)常使用的觸敏顯示設(shè)備。然而,觸敏表面112不必是顯示設(shè)備。如圖1所示,觸敏表...
hmd設(shè)備可以是arhmd設(shè)備、vrhmd設(shè)備、mrhmd設(shè)備等。在框704,is設(shè)備檢測(cè)一個(gè)或多個(gè)用戶(hù)手勢(shì)。例如,is設(shè)備可以檢測(cè)2d和/或3d手勢(shì),諸如懸停手勢(shì)、自由空間手勢(shì)、指尖手勢(shì)、多指尖手勢(shì)、觸摸手勢(shì)等。在框706,并且響應(yīng)于所檢測(cè)到的用戶(hù)手勢(shì),is設(shè)備生成對(duì)用戶(hù)手勢(shì)編碼的交互數(shù)據(jù)。在框708,在hmd設(shè)備處或由hmd設(shè)備接收交互數(shù)據(jù)的至少一部分。在一些實(shí)施例中,交互數(shù)據(jù)經(jīng)由通信會(huì)話(huà)而直接從另一is設(shè)備被接收。也就是說(shuō),is設(shè)備經(jīng)由通信會(huì)話(huà)向hmd設(shè)備提供和/或傳送交互數(shù)據(jù)。在其他的一些實(shí)施例中,交互數(shù)據(jù)是經(jīng)由通信地位于is設(shè)備和hmd設(shè)備中間的另一計(jì)算設(shè)備接收的。在框710...
在這樣的實(shí)施例中,手部被支撐,并且用戶(hù)肌肉用于以非常準(zhǔn)確且非視覺(jué)的方式感測(cè)距is的距離。在至少一個(gè)實(shí)施例中,is設(shè)備上的手指與懸停的手指之間的距離可以限定對(duì)象的豎直尺度。第二手指(諸如拇指)的位置可以改變觸摸手勢(shì)的含義(例如,從拖動(dòng)到選擇)。盡管圖2a示出了與hmd設(shè)備配對(duì)的單個(gè)is設(shè)備210,但是應(yīng)當(dāng)理解,多個(gè)is設(shè)備可以與mhd設(shè)備配對(duì)。例如,至少兩個(gè)is設(shè)備可以與hmd設(shè)備配對(duì),用戶(hù)的每只手一個(gè)。因此,用戶(hù)可以將每個(gè)is設(shè)備設(shè)置在諸如桌子的穩(wěn)定表面上,并且可以經(jīng)由多個(gè)手部手勢(shì)來(lái)控制多個(gè)vo,其中每只手懸停在相應(yīng)is設(shè)備之上。另外,一個(gè)或多個(gè)is設(shè)備可以耦合到hmd設(shè)備,其中一個(gè)或...
此外,將手指懸?;蚺e到is表面上方將在3d表面法線(xiàn)的方向上將對(duì)應(yīng)的3d點(diǎn)遠(yuǎn)離對(duì)象移動(dòng)。is設(shè)備中包括的觸覺(jué)反饋接口可以用于根據(jù)在fov內(nèi)發(fā)生的事件來(lái)向用戶(hù)提供觸覺(jué)反饋。因此,覆蓋物的形狀和/或凸起、以及is設(shè)備的觸覺(jué)反饋接口在與vo交互時(shí)提供用戶(hù)觸感和/或觸覺(jué)反饋。當(dāng)覆蓋物未與is設(shè)備耦合時(shí),用戶(hù)可以另外經(jīng)由is設(shè)備的觸敏設(shè)備上的2d指尖和多指尖手勢(shì)與vo交互。因此,用戶(hù)可以經(jīng)由is設(shè)備的觸敏表面而被提供觸感反饋。此外,如通篇所討論的,鑒于is設(shè)備的懸停感測(cè)和觸摸感測(cè)活動(dòng)表面的空間分辨率的提高,經(jīng)由各種is設(shè)備而檢測(cè)到的懸停手勢(shì)可以支持與vo的更精確和準(zhǔn)確的用戶(hù)交互。另外,is的表面(...
此外,將手指懸停或舉到is表面上方將在3d表面法線(xiàn)的方向上將對(duì)應(yīng)的3d點(diǎn)遠(yuǎn)離對(duì)象移動(dòng)。is設(shè)備中包括的觸覺(jué)反饋接口可以用于根據(jù)在fov內(nèi)發(fā)生的事件來(lái)向用戶(hù)提供觸覺(jué)反饋。因此,覆蓋物的形狀和/或凸起、以及is設(shè)備的觸覺(jué)反饋接口在與vo交互時(shí)提供用戶(hù)觸感和/或觸覺(jué)反饋。當(dāng)覆蓋物未與is設(shè)備耦合時(shí),用戶(hù)可以另外經(jīng)由is設(shè)備的觸敏設(shè)備上的2d指尖和多指尖手勢(shì)與vo交互。因此,用戶(hù)可以經(jīng)由is設(shè)備的觸敏表面而被提供觸感反饋。此外,如通篇所討論的,鑒于is設(shè)備的懸停感測(cè)和觸摸感測(cè)活動(dòng)表面的空間分辨率的提高,經(jīng)由各種is設(shè)備而檢測(cè)到的懸停手勢(shì)可以支持與vo的更精確和準(zhǔn)確的用戶(hù)交互。另外,is的表面(...
如此,hs設(shè)備可以用于檢測(cè)和編碼各種用戶(hù)交互,諸如但不限于與觸敏位移設(shè)備相關(guān)聯(lián)的任何2d手勢(shì)的3d版本,諸如但不限于3d版本的“捏”、“拉”、“按下并保持”、“單指敲擊”、“兩指敲擊”、“單擊”、“雙擊”、“向左滑動(dòng)”、“向右滑動(dòng)”、壓力變化(例如,3d觸摸)手勢(shì)等。此外,hs設(shè)備可以用于檢測(cè)和編碼手寫(xiě)式筆記、草圖、繪圖以及經(jīng)由用戶(hù)指尖和/或由用戶(hù)的手持握并引導(dǎo)的觸筆發(fā)起的其他用戶(hù)交互。hs設(shè)備的懸停感測(cè)能力可以與諸如但不限于觸摸敏感顯示設(shè)備等觸敏設(shè)備集成,以生成觸摸和懸停(tah)設(shè)備。觸敏設(shè)備檢測(cè)和編碼用戶(hù)的肢端的2d觸摸、以及用戶(hù)的肢端的3d懸停手勢(shì)。也就是說(shuō),活動(dòng)表面與觸敏顯示...
例如,覆蓋物可以包括一個(gè)或多個(gè)觸覺(jué)反饋接口。與較軟的表面相關(guān)聯(lián)的觸覺(jué)反饋接口可以與較硬的表面的觸覺(jué)反饋接口單獨(dú)地被***和/或操作。盡管在圖3b中未示出,但是覆蓋物320可以包括機(jī)械(例如,可移動(dòng)部件)和/或凸起。覆蓋物320可以包括一個(gè)或多個(gè)活動(dòng)部件,諸如但不限于開(kāi)關(guān)、撥盤(pán)、杠桿、按鈕、操縱桿、軌跡球、可點(diǎn)擊的設(shè)備等。與這樣的活動(dòng)設(shè)備的用戶(hù)交互可以使得用于控制和/或操縱一個(gè)或多個(gè)vo(諸如圖3b的vo36)的信號(hào)能夠生成。盡管圖3b示出了耦合到is設(shè)備310的單個(gè)覆蓋物320,但是應(yīng)當(dāng)注意,多個(gè)覆蓋物可以耦合到is設(shè)備310。例如,***耦合覆蓋物可以覆蓋is設(shè)備的活動(dòng)表面312的*...
在各種實(shí)施例中,操作還包括由tah設(shè)備確定耦合到其的凸起的形狀。形狀的確定是基于對(duì)沿著凸起的一個(gè)或多個(gè)表面檢測(cè)到的用戶(hù)肢端的3d運(yùn)動(dòng)的至少一部分進(jìn)行編碼的所生成的交互數(shù)據(jù)的一部分。hmd設(shè)備可以被配置為基于凸起的所確定的形狀來(lái)更新fov。在本文中描述的又一實(shí)施例中,提供了一種用于使能沉浸式環(huán)境中與vo的用戶(hù)交互的系統(tǒng)。該系統(tǒng)包括物理覆蓋物。該物理覆蓋物呈現(xiàn)三維(3d)凸起。物理覆蓋物可耦合到交互感測(cè)(is)設(shè)備。3d凸起從is設(shè)備的二維(2d)交互感測(cè)表面被移位。例如,2d交互感測(cè)表面可以是通常在諸如但不限于智能電話(huà)和平板計(jì)算機(jī)的移動(dòng)設(shè)備中采用的觸摸或電容性感測(cè)表面。物理覆蓋物耦合...
也就是說(shuō),多個(gè)覆蓋物中的每一個(gè)可以包括不同形狀的凸起。圖4a是示出根據(jù)本公開(kāi)的一些實(shí)施例的用戶(hù)采用is設(shè)備410和另一機(jī)械耦合的覆蓋物420來(lái)更新vo460的位置的示例性實(shí)施例的示意圖。與圖3a-圖3b的覆蓋物320的半球形凸臺(tái)形狀的凸起322相比,圖4a的覆蓋物420包括平行六面體形狀的凸起422。類(lèi)似于凸起322,凸起422的移位表面在is設(shè)備410的實(shí)際表面的接近距離閾值內(nèi)。因此,當(dāng)指尖接觸包括凸起422的移位表面的覆蓋物420的表面時(shí),is設(shè)備410可以檢測(cè)懸停手勢(shì)。圖4a示出了用戶(hù)經(jīng)由用戶(hù)的手部402的指尖404與凸起422的移位表面物理接觸并且在凸起422的移位表面之上滑動(dòng)...
例如,對(duì)于hs設(shè)備的平面活動(dòng)表面,可以采用笛卡爾坐標(biāo)系。笛卡爾坐標(biāo)系的x-y平面可以與hs設(shè)備的平面活動(dòng)表面基本共面(并且笛卡爾坐標(biāo)系的z軸可以基本正交于hs設(shè)備的平面活動(dòng)表面)。更具體地,嵌入hs設(shè)備的平面活動(dòng)表面中和/或與hs設(shè)備的平面活動(dòng)表面集成的電容性接近傳感器檢測(cè)接近活動(dòng)表面而懸停和/或運(yùn)動(dòng)的用戶(hù)指尖。響應(yīng)于該檢測(cè),只要指尖的z坐標(biāo)小于與活動(dòng)表面相關(guān)聯(lián)的接近傳感器的接近距離閾值,hs設(shè)備就生成交互數(shù)據(jù),該交互數(shù)據(jù)對(duì)用戶(hù)的指尖中的一個(gè)或多個(gè)指尖(相對(duì)于活動(dòng)表面)的x坐標(biāo)、y坐標(biāo)和z坐標(biāo)編碼。取決于嵌入在hs設(shè)備中的具體接近傳感器,接近傳感器在每個(gè)維度上的分辨率可以相似或可以不同...
在這樣的實(shí)施例中,手部被支撐,并且用戶(hù)肌肉用于以非常準(zhǔn)確且非視覺(jué)的方式感測(cè)距is的距離。在至少一個(gè)實(shí)施例中,is設(shè)備上的手指與懸停的手指之間的距離可以限定對(duì)象的豎直尺度。第二手指(諸如拇指)的位置可以改變觸摸手勢(shì)的含義(例如,從拖動(dòng)到選擇)。盡管圖2a示出了與hmd設(shè)備配對(duì)的單個(gè)is設(shè)備210,但是應(yīng)當(dāng)理解,多個(gè)is設(shè)備可以與mhd設(shè)備配對(duì)。例如,至少兩個(gè)is設(shè)備可以與hmd設(shè)備配對(duì),用戶(hù)的每只手一個(gè)。因此,用戶(hù)可以將每個(gè)is設(shè)備設(shè)置在諸如桌子的穩(wěn)定表面上,并且可以經(jīng)由多個(gè)手部手勢(shì)來(lái)控制多個(gè)vo,其中每只手懸停在相應(yīng)is設(shè)備之上。另外,一個(gè)或多個(gè)is設(shè)備可以耦合到hmd設(shè)備,其中一個(gè)或...
更具體地,觸摸手勢(shì)傳感器120可以感測(cè)和/或檢測(cè)與觸敏設(shè)備相關(guān)聯(lián)的2d觸摸手勢(shì)。也就是說(shuō),觸摸手勢(shì)傳感器120可以感測(cè)和/或檢測(cè)手部、指尖、多指尖和觸筆手勢(shì),諸如但不限于“捏”、“拉”、“按下并保持”、“單指敲擊”、“兩指敲擊”、“單擊”、“雙擊”、“向左滑動(dòng)”、“向右滑動(dòng)”、壓力變化(例如,3d觸摸)手勢(shì)等。在各種實(shí)施例中,觸摸手勢(shì)傳感器120可以是電容性感測(cè)傳感器。因此,觸敏表面112可以是2d電容性感測(cè)表面。在一些實(shí)施例中,is設(shè)備110可以是懸停感測(cè)(hs)設(shè)備。在至少一個(gè)實(shí)施例中,is設(shè)備110可以是觸摸和懸停(tah)設(shè)備。在這樣的實(shí)施例中,觸敏表面112可以附加地是hs設(shè)...
圖8是示出根據(jù)本公開(kāi)的一些實(shí)施例的用于使能與虛擬對(duì)象的用戶(hù)交互的方法的另一示例性實(shí)施例的流程圖;圖9是根據(jù)本公開(kāi)的一些實(shí)施例的示例性頭戴式顯示設(shè)備的框圖;以及圖10是適合于在實(shí)現(xiàn)本公開(kāi)的實(shí)施例中使用的示例性計(jì)算環(huán)境的框圖。具體實(shí)施方式如本文中使用的,術(shù)語(yǔ)“虛擬對(duì)象”(vo)可以指代任何計(jì)算機(jī)生成的對(duì)象或(物理或非物理)對(duì)象的任何計(jì)算機(jī)生成的可視化。這樣的計(jì)算機(jī)生成的對(duì)象(或其計(jì)算機(jī)生成的可視化)可以是一維(1d)對(duì)象、二維(2d)或三維(3d)對(duì)象(或其可視化)。如本文中使用的,術(shù)語(yǔ)“沉浸式環(huán)境”(ie)可以是指包括一個(gè)或多個(gè)vo的顯示的任何物理(即,“真實(shí)”)環(huán)境、任何非物理(即...
更具體地,房間600內(nèi)的相機(jī)系統(tǒng)610可以包括**、感測(cè)或檢測(cè)用戶(hù)的手部602的自由空間手勢(shì)的一個(gè)或多個(gè)相機(jī)設(shè)備。例如,相機(jī)系統(tǒng)610可以是視頻游戲控制臺(tái)和/或娛樂(lè)系統(tǒng)的組件。相機(jī)系統(tǒng)610可以生成對(duì)用戶(hù)的手部602和/或指尖的自由空間手勢(shì)編碼的交互數(shù)據(jù)。相機(jī)系統(tǒng)610可以經(jīng)由通信會(huì)話(huà)而通信地耦合到hmd設(shè)備690。hmd設(shè)備690可以是ar和/或mr使能的hmd設(shè)備,諸如結(jié)合圖1的hmd設(shè)備140和/或圖9的hmd設(shè)備902所討論的那些。響應(yīng)于所接收的交互數(shù)據(jù),hmd設(shè)備610更新和/或修改所顯示的fov。例如,hmd設(shè)備610可以生成fov內(nèi)的vo(例如,矩形對(duì)象660)。鑒于圖1...
在其他的又一些實(shí)施例中,用戶(hù)可以將凸起322的半球形表面用作用于與vo360交互的“軌跡球”狀的控制元素。因此,當(dāng)與vo360交互時(shí),用戶(hù)經(jīng)由與凸起322的表面物理接觸的指尖304的物理感覺(jué)來(lái)體驗(yàn)觸感反饋。在各種實(shí)施例中,覆蓋物的表面的至少一部分可以由較軟的材料來(lái)構(gòu)造,較軟的材料諸如柔韌或可延展的材料,用戶(hù)可以經(jīng)由來(lái)自那里的觸摸而至少略微變形。例如,凸起322的上部部分可以由這種較軟的材料構(gòu)造,同時(shí)下部部分由較硬或較不柔韌的材料構(gòu)造,例如,上部部分可以被覆蓋有油灰或軟橡膠型材料。材料硬度的對(duì)比度可以提供附加的觸感反饋、摩擦力變化,或者以其他方式約束手指的移動(dòng)。約束可以經(jīng)由硬和/或軟材料...
以包括與本文檔中描述的步驟不同的步驟或步驟的組合。此外,盡管本文中可以使用術(shù)語(yǔ)“步驟”和/或“框”來(lái)表示所采用的方法的不同元素,但是除非并且當(dāng)明確地描述了各個(gè)步驟時(shí),否則這些術(shù)語(yǔ)不應(yīng)當(dāng)被解釋為暗示本文中公開(kāi)的各個(gè)步驟之中或之間的任何特定順序。為了本公開(kāi)的目的,單詞“包含”具有與單詞“包括”相同的廣義含義,并且單詞“訪(fǎng)問(wèn)”包括“接收”、“引用”或“取回”。除非另外相反指出,否則諸如“一”和“一個(gè)”等單詞包括復(fù)數(shù)形式和單數(shù)形式。因此,例如,在存在一個(gè)或多個(gè)特征的情況下,“特征”的約束被滿(mǎn)足。同樣,術(shù)語(yǔ)“或”包括連詞、連接詞和兩者(因此,a或b包括a或b、以及a和b)。為了上面的詳細(xì)討論...
hmd設(shè)備可以被配置為基于從is設(shè)備所接收的所生成的交互數(shù)據(jù)的至少一部分來(lái)更新顯示虛擬化對(duì)象的視場(chǎng)(fov)。在一些實(shí)施例中,is設(shè)備可以是觸摸和懸停(tah)設(shè)備。tah設(shè)備被配置為還響應(yīng)于在2d交互感測(cè)表面的一部分之上檢測(cè)到的用戶(hù)肢端懸停手勢(shì)而生成交互數(shù)據(jù)。物理覆蓋物包括多個(gè)電容性耦合器,當(dāng)物理覆蓋物被耦合到is設(shè)備時(shí),該多個(gè)電容性耦合器可電容性地耦合到2d交互感測(cè)表面的部分。is設(shè)備和/或hmd設(shè)備中的至少一個(gè)被配置為生成物理覆蓋物的部分與2d交互感測(cè)表面的部分之間的一對(duì)一映射。hmd設(shè)備還被配置為基于所接收的交互數(shù)據(jù)和所生成的一對(duì)一映射來(lái)更新虛擬化對(duì)象的3d方面。本文中具體...
示出根據(jù)本公開(kāi)的一些實(shí)施例的用于使能與虛擬對(duì)象的用戶(hù)交互的方法800的另一示例性實(shí)施例的流程圖。初始地,在框802,將覆蓋物機(jī)械地耦合到is設(shè)備。如至少結(jié)合圖7的方法700所討論的,is設(shè)備可以通信地耦合到hmd設(shè)備。覆蓋物的一個(gè)或多個(gè)表面(例如,3d凸起的表面)可以從is設(shè)備的懸停感測(cè)活動(dòng)表面移位。is設(shè)備可以響應(yīng)于檢測(cè)到用戶(hù)觸摸一個(gè)或多個(gè)移位表面(例如,凸起)而生成交互數(shù)據(jù)。在框804,可以由is設(shè)備或hmd設(shè)備中的至少一個(gè)自動(dòng)確定與覆蓋物相關(guān)聯(lián)的標(biāo)識(shí)符。例如,標(biāo)識(shí)符可以經(jīng)由rfid標(biāo)簽、光學(xué)可掃描碼、對(duì)象識(shí)別特征等被自動(dòng)確定。在至少一個(gè)實(shí)施例中,標(biāo)識(shí)符基于由用戶(hù)在覆蓋物的一個(gè)或多個(gè)凸起之...