圖像顯示裝置、控制圖像顯示裝置的方法、計(jì)算機(jī)程序以及圖像顯示系統(tǒng)的制作方法
【專利摘要】提供能夠?qū)⒅苓叺耐獠垦b置中的顯示綜合的圖像顯示裝置。圖像顯示裝置具備:生成部,其生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像,所述第1顯示區(qū)域一覽顯示用于使連接于圖像顯示裝置的多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺亩鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和圖像顯示部,其使圖像顯示裝置的使用者觀看綜合圖像。
【專利說明】圖像顯示裝置、控制圖像顯示裝置的方法、計(jì)算機(jī)程序以及圖像顯不系統(tǒng)
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及圖像顯示裝置。
【背景技術(shù)】
[0002]作為佩戴于頭部的顯示裝置的頭部佩戴型顯示裝置(頭置式顯示器(HeadMounted Display, HMD))眾所周知。頭部佩戴型顯示裝置例如利用液晶顯示器與光源而生成表示圖像的圖像光、利用投射光學(xué)系和/或?qū)Ч獍宓葘⑺傻膱D像光向使用者的眼睛引導(dǎo),由此使使用者識(shí)別虛像。這樣的頭部佩戴型顯示裝置,能夠通過例如MicroUSB (Universal Serial Bus:通用串行總線)等有線接口與智能手機(jī)等外部裝置連接,依照MHL(Mobile High definit1n Link:移動(dòng)終端高清影音標(biāo)準(zhǔn)接口)等標(biāo)準(zhǔn),接收來自外部裝置的影像信號。同樣,頭部佩戴型顯示裝置,能夠通過例如無線LAN等無線接口與外部裝置連接,依照Miracast等標(biāo)準(zhǔn),接收來自外部裝置的影像信號。頭部佩戴型顯示裝置能夠基于這樣接收的影像信號,使頭部佩戴型顯示裝置的使用者觀看與顯示于外部裝置的顯示畫面的圖像相同的虛像。
[0003]在專利文獻(xiàn)1中,記載有能夠?qū)F(xiàn)在的節(jié)目影像、與現(xiàn)在的節(jié)目影像相關(guān)的信息和其他的頻道的節(jié)目信息綜合而顯示于1個(gè)畫面的AV(Aud1 Visual:音頻視頻)系統(tǒng)。在專利文獻(xiàn)2中,記載有與多個(gè)計(jì)算機(jī)裝置的顯示畫面相鄰地設(shè)置假想畫面、各計(jì)算機(jī)裝置的用戶能夠操作假想畫面上的窗口的圖像顯示裝置。
[0004]專利文獻(xiàn)1:專利第3968467號公報(bào)
[0005]專利文獻(xiàn)2:專利第5082722號公報(bào)
【發(fā)明內(nèi)容】
[0006]在專利文獻(xiàn)1所記載的技術(shù)中,作為連接于AV系統(tǒng)的AV設(shè)備,例示有模擬廣播接收單元與數(shù)字廣播接收單元。即,在專利文獻(xiàn)1所記載的技術(shù)中,具有以特定的設(shè)備之間的影像為對象、通用性較低的課題。另外,在專利文獻(xiàn)2所記載的技術(shù)中,具有只能提供與計(jì)算機(jī)裝置的顯示畫面不同的顯示手段即假想畫面、不能將多個(gè)計(jì)算機(jī)裝置的顯示畫面綜合的課題。
[0007]因此,希望有能夠?qū)⒅苓叺耐獠垦b置(周邊設(shè)備)中的顯示綜合的圖像顯示裝置。此外,對圖像顯示裝置,具有通用性的提高、實(shí)用性的提高、便利性的提高、可信性的提高、制造成本的降低等各種希望。
[0008]本發(fā)明是為了解決上述的課題的至少一部分而完成的,能夠以以下的形態(tài)而實(shí)現(xiàn)。
[0009](1)根據(jù)本發(fā)明的一形態(tài),提供一種圖像顯示裝置。該圖像顯示裝置具備:生成部,其生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像,所述第1顯示區(qū)域一覽顯示用于使連接于所述圖像顯示裝置的多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和圖像顯示部,其使所述圖像顯示裝置的使用者觀看所述綜合圖像。根據(jù)該形態(tài)的圖像顯示裝置,圖像顯示部能夠使使用者觀看綜合圖像,所示綜合圖像包含:連接于圖像顯示裝置的多個(gè)外部裝置的多個(gè)識(shí)別圖像中的至少一部分識(shí)別圖像;和作為從多個(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像。因此,能夠提供能夠?qū)D像顯示裝置周邊的、換而言之連接于圖像顯示裝置的外部裝置中的顯示綜合的圖像顯示裝置。
[0010](2)在上述形態(tài)的圖像顯示裝置中,也可以進(jìn)而具備:獲取部,其從所述一個(gè)外部裝置獲取所述顯示圖像;和更新部,其使用所述所獲取的顯示圖像,對所述綜合圖像的所述第2顯示區(qū)域進(jìn)行更新。根據(jù)該形態(tài)的圖像顯示裝置,圖像顯示部能夠使使用者觀看對從多個(gè)外部裝置中選擇的一個(gè)外部裝置、將其顯示圖像更新了的綜合圖像。
[0011](3)在上述形態(tài)的圖像顯示裝置中,也可以:在所述識(shí)別圖像中,包含所述外部裝置的一個(gè)時(shí)間點(diǎn)的顯示圖像、表示用于識(shí)別所述外部裝置的信息的圖像和表示向所述外部裝置分配的符號的圖像中的至少任意一個(gè)。根據(jù)該形態(tài)的圖像顯示裝置,在綜合圖像的第1顯示區(qū)域,能夠包含外部裝置的一個(gè)時(shí)間點(diǎn)的顯示圖像、表示用于識(shí)別外部裝置的信息的圖像和表示向外部裝置分配的符號的圖像中的至少任意一個(gè)。
[0012](4)在上述形態(tài)的圖像顯示裝置中,也可以:進(jìn)而具備外部裝置特定部,其從所述多個(gè)外部裝置中對所述使用者注意過的外部裝置進(jìn)行特定;所述生成部將所述多個(gè)外部裝置中的至少在過去由所述外部裝置特定部特定的所述外部裝置的所述識(shí)別圖像顯示于所述第1顯示區(qū)域。根據(jù)該形態(tài)的圖像顯示裝置,生成部將連接于圖像顯示裝置的多個(gè)外部裝置中的至少在過去使用者注意過的外部裝置的識(shí)別圖像顯示于第1顯示區(qū)域。這樣,使用者能夠通過“注意”而選擇顯示于第1顯示區(qū)域的外部裝置,所以使用者的便利性提高。另外,能夠抑制在圖像顯示裝置上連接有數(shù)量較多的外部裝置等情況下的、第1顯示區(qū)域的復(fù)雜化。
[0013](5)在上述形態(tài)的圖像顯示裝置中,也可以:進(jìn)而具備外部裝置特定部,其從所述多個(gè)外部裝置中對所述使用者注意過的外部裝置進(jìn)行特定;所述獲取部從由所述外部裝置特定部特定的所述外部裝置獲取所述顯示圖像。根據(jù)該形態(tài)的圖像顯示裝置,獲取部從使用者注意過的外部裝置獲取顯示圖像,更新部使用所獲取的顯示圖像對綜合圖像的第2顯示區(qū)域進(jìn)行更新。這樣,使用者能夠通過“注意”而選擇顯示于第2顯示區(qū)域的外部裝置,所以使用者的便利性提高。
[0014](6)在上述形態(tài)的圖像顯示裝置中,也可以:進(jìn)而具備距離獲取部,其分別獲取所述圖像顯示裝置與所述多個(gè)外部裝置之間的距離;所述生成部與所述所獲取的各距離相應(yīng),確定所述第1顯示區(qū)域中的所述多個(gè)識(shí)別圖像的顯示順序和所述第1顯示區(qū)域中的所述識(shí)別圖像的大小中的至少一方。根據(jù)該形態(tài)的圖像顯示裝置,圖像顯示部能夠使使用者觀看與圖像顯示裝置和多個(gè)外部裝置之間的距離相應(yīng)地使第1顯示區(qū)域中的多個(gè)識(shí)別圖像的顯示順序與大小中的至少一方變化的綜合圖像。結(jié)果,使用者能夠通過第1顯示區(qū)域中的顯示順序或大小得知圖像顯示裝置與多個(gè)外部裝置之間的距離。
[0015](7)在上述形態(tài)的圖像顯示裝置中,所述生成部也可以對所述第1顯示區(qū)域進(jìn)行更新。根據(jù)該形態(tài)的圖像顯示裝置,生成部也能夠?qū)λ龅?顯示區(qū)域進(jìn)行更新。
[0016](8)在上述形態(tài)的圖像顯示裝置中,也可以:所述圖像顯示部進(jìn)而具備生成表示所述綜合圖像的圖像光的顯示驅(qū)動(dòng)部,通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述綜合圖像。根據(jù)該形態(tài)的圖像顯示裝置,能夠?qū)D像顯示裝置構(gòu)成為頭部佩戴型顯示裝置。
[0017](9)在上述形態(tài)的圖像顯示裝置中,也可以:所述生成部將所述第2顯示區(qū)域的縱橫比設(shè)為能夠通過所述顯示驅(qū)動(dòng)部生成所述圖像光的區(qū)域的縱橫比,生成在所述第2顯示區(qū)域的外側(cè)配置了所述第1顯示區(qū)域的所述綜合圖像;所述圖像顯示部,在沒有由所述使用者進(jìn)行的操作的情況下,對所述顯示驅(qū)動(dòng)部,使其生成與所述綜合圖像的所述第2顯示區(qū)域相當(dāng)?shù)牟糠值乃鰣D像光;在具有由所述使用者進(jìn)行的操作的情況下,對所述顯示驅(qū)動(dòng)部,使其生成至少與所述綜合圖像的所述第1顯示區(qū)域相當(dāng)?shù)牟糠值乃鰣D像光。根據(jù)該形態(tài)的圖像顯示裝置,圖像顯示部在沒有由使用者進(jìn)行的操作的情況下,使使用者觀看與綜合圖像的第2顯示區(qū)域相當(dāng)?shù)牟糠?,在具有由使用者進(jìn)行的操作的情況下,使使用者觀看與綜合圖像的第1顯示區(qū)域相當(dāng)?shù)牟糠?。結(jié)果,根據(jù)該形態(tài)的圖像顯示裝置,能夠在通常畫面(第2顯示區(qū)域)的外側(cè)設(shè)置假想畫面(第1顯示區(qū)域),通過由使用者進(jìn)行的操作,對通常畫面與假想畫面的顯示進(jìn)行切換。結(jié)果,能夠提高使用者的便利性。
[0018](10)在上述形態(tài)的圖像顯示裝置中,也可以:所述圖像顯示部,使所述顯示驅(qū)動(dòng)部生成表示用于向所述一個(gè)外部裝置附加的附加提示用的信息即用于向所述使用者提供增強(qiáng)現(xiàn)實(shí)感的附加提示用的信息的圖像光,通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述附加提示用的信息。根據(jù)該形態(tài)的圖像顯示裝置,圖像顯示部在使用者對一個(gè)外部裝置注意的情況下,能夠使其觀看用于向使用者提供增強(qiáng)現(xiàn)實(shí)感的附加提示用的信息。結(jié)果,能夠使使用者的便利性提高。
[0019](11)根據(jù)本發(fā)明的一形態(tài),提供圖像顯示系統(tǒng)。該圖像顯示系統(tǒng)具備:信息處理裝置;連接于所述信息處理裝置的圖像顯示裝置;和連接于所述信息處理裝置的多個(gè)外部裝置;所述信息處理裝置具備:代理生成部,其生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像,所述第1顯示區(qū)域一覽顯示用于使所述多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和發(fā)送部,其將所述綜合圖像向所述信息處理裝置發(fā)送;所述圖像顯示裝置具備圖像顯示部,其使所述圖像顯示裝置的使用者觀看從所述信息處理裝置接收的所述綜合圖像。根據(jù)該形態(tài)的圖像顯示系統(tǒng),能夠提供能夠?qū)D像顯示裝置周邊的、換而言之經(jīng)由信息處理裝置連接于圖像顯示裝置的外部裝置上的顯示綜合的圖像顯示系統(tǒng)。
[0020]上述的本發(fā)明的各形態(tài)所具有的多個(gè)構(gòu)成要素都不是必須的,為了解決上述的課題的一部分或全部、或者為了達(dá)成本說明書中所記載的效果的一部分或全部,能夠適當(dāng)對所述多個(gè)構(gòu)成要素的一部分構(gòu)成要素進(jìn)行其變更、刪除、與新的構(gòu)成要素的替換、限定內(nèi)容的一部分刪除。另外,為了解決上述的課題的一部分或全部、或者為了達(dá)成本說明書中所記載的效果的一部分或全部,也能夠?qū)⑸鲜龅谋景l(fā)明的一形態(tài)中所含的技術(shù)特征的一部分或全部與上述的本發(fā)明的其他的形態(tài)中所含的技術(shù)特征的一部分或全部組合而設(shè)為本發(fā)明的獨(dú)立的一形態(tài)。
[0021]例如,本發(fā)明的一形態(tài)能夠設(shè)為具備生成部、圖像顯示部2個(gè)要素中的一部分或全部要素的裝置而實(shí)現(xiàn)。即,該裝置可以具有也可以沒有生成部。另外,該裝置可以具有也可以沒有圖像顯示部。這樣的裝置能夠設(shè)為例如圖像顯示裝置而實(shí)現(xiàn),但也能夠設(shè)為圖像顯示裝置以外的其他的裝置而實(shí)現(xiàn)。前述的圖像顯示裝置的各形態(tài)的技術(shù)特征的一部分或全部都能夠適用于該裝置。
[0022]另外,本發(fā)明能夠以各種形態(tài)實(shí)現(xiàn),例如,能夠以圖像顯示裝置、圖像顯示裝置的控制方法、使用了圖像顯示裝置的圖像顯示系統(tǒng)、頭部佩戴型顯示裝置、頭部佩戴型顯示裝置的控制方法、使用了頭部佩戴型顯示裝置的圖像顯示系統(tǒng)、用于實(shí)現(xiàn)這些方法、裝置或系統(tǒng)的功能的計(jì)算機(jī)程序、記錄了該計(jì)算機(jī)程序的記錄介質(zhì)等形態(tài)實(shí)現(xiàn)。
【專利附圖】
【附圖說明】
[0023]圖1是表示本發(fā)明的一實(shí)施方式中的圖像顯示系統(tǒng)1000的概略構(gòu)成的說明圖。
[0024]圖2是功能性表示頭置式顯示器100的構(gòu)成的框圖。
[0025]圖3是表示區(qū)域信息122的一例的說明圖。
[0026]圖4是表示使使用者觀看的虛像的一例的說明圖。
[0027]圖5是表不綜合圖像顯不處理的順序的時(shí)序圖。
[0028]圖6是表示在步驟S126中生成的綜合圖像的一例的說明圖。
[0029]圖7是表示綜合圖像更新處理的順序的時(shí)序圖。
[0030]圖8A是表示在頭置式顯示器100上顯示有將第2顯示區(qū)域更新了的綜合圖像的樣子說明圖。
[0031]圖8B是與使用附加的處理1的無線標(biāo)簽的方法有關(guān)的說明圖。
[0032]圖9是功能性表示第2實(shí)施方式的頭置式顯示器100a的構(gòu)成的框圖。
[0033]圖10是表示第2實(shí)施方式的綜合圖像顯示處理的順序的時(shí)序圖。
[0034]圖11是表示在第2實(shí)施方式的綜合圖像顯示處理的步驟S126中生成的綜合圖像的一例的說明圖。
[0035]圖12是表示第2實(shí)施方式中的綜合圖像更新處理的順序的時(shí)序圖。
[0036]圖13是表示在頭置式顯示器100a上顯示有對第1顯示區(qū)域與第2顯示區(qū)域進(jìn)行了更新的綜合圖像的樣子的說明圖。
[0037]圖14是功能性表示第3實(shí)施方式的頭置式顯示器100b的構(gòu)成的框圖。
[0038]圖15是表不第3實(shí)施方式中的區(qū)域信息122b的一例的說明圖。
[0039]圖16是用于說明圖像處理部160b的工作的一例的說明圖。
[0040]圖17是表示第4實(shí)施方式的圖像顯示系統(tǒng)1000c的概略構(gòu)成的說明圖。
[0041]圖18是功能性表示服務(wù)器900的構(gòu)成的框圖。
[0042]圖19是表示變形例中的頭置式顯示器的外觀的構(gòu)成的說明圖。
[0043]圖20是表示變形例中的區(qū)域信息122x的一例的說明圖。
[0044]符號說明
[0045]10…控制部
[0046]20…圖像顯示部
[0047]22…右顯示驅(qū)動(dòng)部
[0048]24…左顯示驅(qū)動(dòng)部
[0049]26…右光學(xué)像顯示部
[0050]28…左光學(xué)像顯示部
[0051]32…右耳機(jī)
[0052]34…左耳機(jī)
[0053]40...連接部
[0054]51...發(fā)送部
[0055]52...發(fā)送部
[0056]53...接收部
[0057]10(l...頭置式顯示器(頭部佩戴型顯示裝置)
[0058]110…輸入信息獲取部(操作獲取部)
[0059]120…存儲(chǔ)部
[0060]122…區(qū)域信息
[0061]124…識(shí)別圖像存儲(chǔ)部
[0062]130…電源
[0063]132…無線通信部(獲取部)
[0064]140 …CPU
[0065]142…生成部(獲取部、生成部)
[0066]144...更新部(更新部)
[0067]160…圖像處理部
[0068]170…音聲處理部
[0069]180 …接口
[0070]190…顯示控制部
[0071]201…右背光控制部
[0072]202…左背光控制部
[0073]221…右背光
[0074]222…左背光
[0075]251…右投射光學(xué)系
[0076]252…左投射光學(xué)系
[0077]261…右導(dǎo)光板
[0078]262…左導(dǎo)光板
[0079]300…計(jì)算機(jī)(外部裝置)
[0080]400…家電(外部裝置)
[0081]500…設(shè)備(外部裝置)
[0082]600…便攜終端(外部裝置)
[0083]700…游戲設(shè)備(外部裝置)
[0084]900…服務(wù)器(信息處理裝置)
[0085]910 …CPU
[0086]912…代理生成部(代理生成部)
[0087]914…代理更新部
[0088]916…發(fā)送接收部(發(fā)送部)
[0089]920 …ROM
[0090]930 …RAM
[0091]940…通信接口
[0092]950…存儲(chǔ)部
[0093]952…區(qū)域信息
[0094]954…識(shí)別圖像存儲(chǔ)部
[0095]1000…圖像顯示系統(tǒng)
[0096]Data…圖像數(shù)據(jù)
[0097]SC…外景
[0098]RE…右眼
[0099]LE…左眼
[0100]VI…虛像
[0101]VR…視野
[0102]J1?J6…識(shí)別圖像
[0103]B1?B6…縮略圖顯示區(qū)域(第1顯示區(qū)域)
[0104]G1?G6…識(shí)別圖像
[0105]BG…活動(dòng)顯示區(qū)域(第2顯示區(qū)域)
[0106]GI…綜合圖像
[0107]INT…互聯(lián)網(wǎng)
【具體實(shí)施方式】
[0108]A.第1實(shí)施方式:
[0109]A - 1.圖像顯示系統(tǒng)的構(gòu)成:
[0110]圖1是表示本發(fā)明的一實(shí)施方式中的圖像顯示系統(tǒng)1000的概略構(gòu)成的說明圖。圖像顯示系統(tǒng)1000具備頭部佩戴型顯示裝置100、計(jì)算機(jī)300(PC300)、家電400、AV(Aud1Visual)設(shè)備500、便攜終端600、游戲設(shè)備700。以后,也將頭部佩戴型顯示裝置100稱為“圖像顯示裝置”。同樣,也將PC300、家電400、AV設(shè)備500、便攜終端600、游戲設(shè)備700總稱為“外部裝置”。圖像顯示系統(tǒng)1000是將“綜合圖像”顯示于頭部佩戴型顯示裝置100的系統(tǒng),所述綜合圖像是使將連接于頭部佩戴型顯示裝置100的外部裝置中的顯示綜合而成的。
[0111]頭部佩戴型顯示裝置100是佩戴于頭部的圖像顯示裝置,也稱為頭置式顯示器(Head Mounted Display,HMD)。本實(shí)施方式的頭置式顯示器100是使用者觀看虛像同時(shí)也能夠直接觀看外景的光學(xué)透射型的頭部佩戴型顯示裝置。PC300為信息通信終端。在本實(shí)施方式中,作為PC300例示筆記本式計(jì)算機(jī),但PC300也可以由臺(tái)式計(jì)算機(jī)等其他的信息通信終端構(gòu)成。家電400為家庭用的電氣產(chǎn)品。在本實(shí)施方式中,作為家電400例示冰箱,但家電400也可以由空調(diào)、微波爐、洗衣機(jī)、電話、傳真機(jī)、打印機(jī)、數(shù)字照相機(jī)等其他的電氣產(chǎn)品構(gòu)成。
[0112]AV設(shè)備500是對影像進(jìn)行記錄、再現(xiàn)、轉(zhuǎn)換等的影像設(shè)備和對音聲進(jìn)行記錄、再現(xiàn)、轉(zhuǎn)換等的音響設(shè)備的總稱。在本實(shí)施方式中,作為AV設(shè)備500例示硬盤播放器,但AV設(shè)備500也可以由電視機(jī)、DVD (Digital Versatile Disk:數(shù)字多功能光盤)播放器、CD音頻、數(shù)字音頻播放器等其他的影像設(shè)備和/或音響設(shè)備構(gòu)成。便攜終端600為能夠便攜的信息通信終端。在本實(shí)施方式中,作為便攜終端600例示智能手機(jī)(smartphone),但便攜終端600也可以由便攜電話、PDA (Personal Digital Assistant:個(gè)人數(shù)字助手)、平板終端等其他的便攜信息通信終端構(gòu)成。游戲設(shè)備700是用于使計(jì)算機(jī)游戲工作的設(shè)備。
[0113]上述的PC300、家電400、AV設(shè)備500、便攜終端600、游戲設(shè)備700的外部裝置分別能夠無線通信或有線通信地與頭置式顯示器100連接。
[0114]A — 2.頭置式顯示器的構(gòu)成:
[0115]圖2是功能性表示頭置式顯示器100的構(gòu)成的框圖。如圖1、2所示,頭置式顯示器100具備:在佩戴于使用者的頭部的狀態(tài)下使使用者觀看虛像的圖像顯示部20,和控制圖像顯示部20的控制部(控制器)10。圖像顯示部20與控制部10通過連接部40連接,經(jīng)由連接部40進(jìn)行各種信號的傳送。在連接部40中,能夠采用金屬線纜和/或光纖。
[0116]A - 2 - 1.控制部的構(gòu)成:
[0117]控制部10是用于控制頭置式顯示器100的裝置??刂撇?0具備輸入信息獲取部110、存儲(chǔ)部120、電源130、無線通信部132、GPS模塊134、CPU140、接口 180、發(fā)送部(Tx)51以及52,各部分通過未圖示的總線相互連接(圖2)。
[0118]輸入信息獲取部110獲取與操作輸入相應(yīng)的信號,所述操作輸入與例如觸摸板、十字鍵、腳踏開關(guān)、手勢檢測、視線檢測、觸摸檢測、話筒等輸入設(shè)備相對。具體地說,腳踏開關(guān)為通過使用者的腳操作的開關(guān)。在手勢檢測中,使用照相機(jī)等檢測使用者的手勢。在該情況下,使手勢與指令預(yù)先對應(yīng)。另外,在手勢檢測時(shí),也可以將使用者的指尖、和/或帶在使用者的手上的指環(huán)、和/或使用者手持的道具等設(shè)為用于運(yùn)動(dòng)檢測的標(biāo)記。在視線檢測中,使用紅外線傳感器等檢測使用者的視線。在該情況下,使視線的運(yùn)動(dòng)與指令預(yù)先對應(yīng)。在觸摸檢測中,檢測使用者對設(shè)置于頭置式顯示器100的殼體的任意的場所(例如,圖像顯示部20的右保持部21以及左保持部23(圖1)的外側(cè))的接觸傳感器的觸摸操作。
[0119]這樣,輸入信息獲取部110獲取與操作輸入相應(yīng)的信號,所述操作輸入與各種輸入設(shè)備相對。特別,如果設(shè)為獲取腳踏開關(guān)、視線檢測、利用話筒的操作輸入,則在使用者難以使用手操作的場面(例如,家務(wù)等作業(yè)場面、醫(yī)療現(xiàn)場的作業(yè)場面、建筑業(yè)和/或制造業(yè)等需要手頭作業(yè)的作業(yè)場面),能夠大大提高使用頭置式顯示器100的情況下的使用者的便利性。
[0120]存儲(chǔ)部120由ROM、RAM、DRAM、硬盤等構(gòu)成。存儲(chǔ)部120包含區(qū)域信息122和識(shí)別圖像存儲(chǔ)部124。區(qū)域信息122是對在綜合圖像顯示處理(圖5)中生成的綜合圖像所含的“區(qū)域”進(jìn)行規(guī)定的信息。識(shí)別圖像存儲(chǔ)部124是用于預(yù)先存儲(chǔ)在綜合圖像顯示處理中收集的外部裝置的識(shí)別圖像的存儲(chǔ)部。在這里,所謂綜合圖像顯示處理,是生成綜合圖像并顯示于頭置式顯示器100的處理。所謂綜合圖像,是包含連接于頭置式顯示器100的多個(gè)外部裝置的識(shí)別圖像和作為從多個(gè)外部裝置中由使用者選擇的一個(gè)外部裝置顯示的圖像的顯示圖像(以后,也簡稱為“顯示圖像”。)雙方的圖像。所謂綜合圖像更新處理,是對綜合圖像中由使用者選擇的一個(gè)外部裝置的顯示圖像進(jìn)行動(dòng)態(tài)更新并顯示于頭置式顯示器100的處理。
[0121]所謂“外部裝置的識(shí)別圖像”,是用于相互識(shí)別連接于頭置式顯示器100的外部裝置的圖像。作為本實(shí)施方式中的外部裝置的識(shí)別圖像,能夠使用例如表示以下的al?a3所例示的信息的圖像。
[0122](al)外部裝置的一個(gè)時(shí)間點(diǎn)下的顯示圖像。
[0123](a2)外部裝置的操作畫面和/或設(shè)定畫面的顯示圖像。
[0124](a3)外部裝置的一個(gè)期間的顯示圖像的縮短動(dòng)態(tài)圖像。
[0125]圖3是表示區(qū)域信息122的一例的說明圖。區(qū)域信息122具有長方形狀的區(qū)域(以后,也稱為“區(qū)域122”。)。區(qū)域122優(yōu)選具有與頭置式顯示器100的顯示元件(圖2:右IXD241、左IXD242)的縱橫比相同的縱橫比。區(qū)域122包含6個(gè)縮略圖顯示區(qū)域B1?B6和活動(dòng)顯示區(qū)域BG??s略圖顯示區(qū)域B1?B6,是用于通過在綜合圖像顯示處理(圖5)中配置有多個(gè)外部裝置的識(shí)別圖像而一覽顯示多個(gè)外部裝置的識(shí)別圖像的區(qū)域。也將縮略圖顯示區(qū)域B1?B6稱為“第1顯示區(qū)域”?;顒?dòng)顯示區(qū)域BG,是用于在綜合圖像顯示處理中配置有從多個(gè)外部裝置中由使用者選擇的一個(gè)外部裝置的顯示圖像的區(qū)域。也將活動(dòng)顯示區(qū)域BG稱為“第2顯示區(qū)域”。
[0126]在圖3的例子中,縮略圖顯示區(qū)域B1?B3分別在鉛直方向上相鄰而配置于區(qū)域122的左端部。縮略圖顯示區(qū)域B4?B6分別在鉛直方向上相鄰而配置于區(qū)域122的右端部。另外,縮略圖顯示區(qū)域B1?B6分別是相同大小的區(qū)域。另外,在圖3的例子中,活動(dòng)顯示區(qū)域BG是占據(jù)從區(qū)域122將縮略圖顯示區(qū)域B1?B6除外的部分的區(qū)域。在圖3中,對縮略圖顯示區(qū)域B1?B6涂以點(diǎn)狀的陰影,對活動(dòng)顯示區(qū)域BG涂以斜線陰影。
[0127]另外,圖3所示的縮略圖顯示區(qū)域B1?B6的配置以及大小為一例,能夠任意地確定。例如,縮略圖顯示區(qū)域B1?B6也可以配置于區(qū)域122的上端部和/或下端部。另外,縮略圖顯示區(qū)域B1?B6也可以配置成包圍區(qū)域122的四邊。另外,縮略圖顯示區(qū)域B1?B6的各區(qū)域也可以為不同的大小。進(jìn)而,縮略圖顯示區(qū)域B1?B6也可以設(shè)為區(qū)域的至少一部分分別重合。但是,為了提高活動(dòng)顯示區(qū)域BG的觀看性,縮略圖顯示區(qū)域B1?B6優(yōu)選配置于不妨礙使用者的視野的區(qū)域122的端部。
[0128]電源130向頭置式顯示器100的各部分供給電力。作為電源130,能夠使用例如二次電池。無線通信部132依照預(yù)定的無線通信標(biāo)準(zhǔn)(例如,紅外線、Bluetooth(注冊商標(biāo))所例示的近距離無線通信、IEEE802.11所例示的無線LAN等),與外部裝置之間進(jìn)行無線通信。GPS模塊134通過接收來自GPS衛(wèi)星的信號,檢測頭置式顯示器100的使用者的現(xiàn)在位置,生成表示使用者的現(xiàn)在位置的現(xiàn)在位置信息。另外,現(xiàn)在位置信息能夠通過例如表示經(jīng)度緯度的坐標(biāo)而實(shí)現(xiàn)。
[0129]CPU140通過讀出并執(zhí)行存儲(chǔ)于存儲(chǔ)部120的計(jì)算機(jī)程序,作為生成部142、更新部144、操作系統(tǒng)(OS) 150、圖像處理部160、音聲處理部170、顯示控制部190而起作用。
[0130]生成部142執(zhí)行綜合圖像顯示處理(圖5),生成綜合圖像。生成部142實(shí)現(xiàn)作為對多個(gè)外部裝置生成綜合圖像的“生成部”的功能,所述綜合圖像包含:第1顯示區(qū)域,其一覽顯示用于使多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像;和第2顯示區(qū)域,其顯示從多個(gè)外部裝置中由使用者選擇的一個(gè)外部裝置的顯示圖像。更新部144執(zhí)行綜合圖像更新處理(圖7),對綜合圖像進(jìn)行更新。更新部144實(shí)現(xiàn)作為獲取從多個(gè)外部裝置中由使用者選擇的一個(gè)外部裝置的顯示圖像的“獲取部”的功能和作為使用所獲取的顯示圖像對綜合圖像的第2顯示區(qū)域進(jìn)行更新的“更新部”的功能。
[0131]圖像處理部160基于從生成部142、和/或接口 180、和/或無線通信部132等經(jīng)由0S150輸入的影像信號而生成信號。圖像處理部160通過將所生成的信號經(jīng)由連接部40向圖像顯示部20供給,控制圖像顯示部20中的顯示。用于向圖像顯示部20供給的信號在模擬形式與數(shù)字形式的情況下不同。
[0132]例如,在數(shù)字形式的情況下,輸入有數(shù)字R信號、數(shù)字G信號、數(shù)字B信號與時(shí)鐘信號PCLK同步的狀態(tài)的影像信號。圖像處理部160根據(jù)需要而對由數(shù)字R信號、數(shù)字G信號、數(shù)字B信號構(gòu)成的圖像數(shù)據(jù)Data執(zhí)行眾所周知的解析度轉(zhuǎn)換處理、亮度彩度的調(diào)整等各種色調(diào)校正處理、梯形失真校正處理等圖像處理。然后,圖像處理部160經(jīng)由發(fā)送部51、52發(fā)送時(shí)鐘信號PCLK、圖像數(shù)據(jù)Data。
[0133]在模擬形式的情況下,輸入有由模擬R信號、模擬G信號、模擬B信號、垂直同步信號VSync、水平同步信號HSync構(gòu)成的影像信號。圖像處理部160從所輸入的信號將垂直同步信號VSync與水平同步信號HSync分離,與它們的周期相應(yīng),使用未圖示的PLL電路等生成時(shí)鐘信號PCLK。另外,圖像處理部160使用A/D轉(zhuǎn)換電路等將模擬R信號、模擬G信號、模擬B信號轉(zhuǎn)換成數(shù)字信號。圖像處理部160根據(jù)需要對由轉(zhuǎn)換后的數(shù)字R信號、數(shù)字G信號、數(shù)字B信號構(gòu)成的圖像數(shù)據(jù)Data執(zhí)行眾所周知的圖像處理,然后經(jīng)由發(fā)送部51、52發(fā)送時(shí)鐘信號PCLK、圖像數(shù)據(jù)Data、垂直同步信號VSync、水平同步信號HSync。另外,以后,也將經(jīng)由發(fā)送部51發(fā)送的圖像數(shù)據(jù)Data稱為“右眼用圖像數(shù)據(jù)Datal”,也將經(jīng)由發(fā)送部52發(fā)送的圖像數(shù)據(jù)Data稱為“左眼用圖像數(shù)據(jù)Data2”。
[0134]顯示控制部190生成對圖像顯示部20具有的右顯示驅(qū)動(dòng)部22與左顯示驅(qū)動(dòng)部24進(jìn)行控制的控制信號。所謂控制信號,為用于單獨(dú)地切換由右LCD控制部211進(jìn)行的右LCD241的驅(qū)動(dòng)0N/0FF、由右背光控制部201進(jìn)行的右背光221的驅(qū)動(dòng)0N/0FF、由左LCD控制部212進(jìn)行的左IXD242的驅(qū)動(dòng)0N/0FF、由左背光控制部202進(jìn)行的左背光222的驅(qū)動(dòng)0N/0FF的信號。顯示控制部190通過這些控制信號,控制右顯示驅(qū)動(dòng)部22與左顯示驅(qū)動(dòng)部24中的圖像光的生成以及射出。顯示控制部190經(jīng)由發(fā)送部51、52發(fā)送所生成的控制信號。
[0135]音聲處理部170獲取內(nèi)容中包含的音聲信號,對所獲取的音聲信號進(jìn)行增幅,對右耳機(jī)32的未圖不的揚(yáng)聲器和左耳機(jī)34的未圖不的揚(yáng)聲器供給。
[0136]接口 180依照預(yù)定的有線通信標(biāo)準(zhǔn)(例如,MicroUSB (Universal Serial Bus)、USB、HDMI (High Definit1n Multimedia Interface:高清晰度多媒體接口)、DVI (DigitalVisual Interface:數(shù)字視頻接口)、VGA(Video Graphics Array:視頻圖形陣列)、組合電纜、RS — 232C (Recommended Standard232:推薦標(biāo)準(zhǔn) 232)、IEEE802.3 所例示的有線 LAN等),與外部裝置之間進(jìn)行無線通信。
[0137]A - 2 - 2.圖像顯示部的構(gòu)成:
[0138]圖像顯示部20是佩戴于使用者的頭部的佩戴體,在本實(shí)施方式中具有眼鏡形狀。圖像顯示部20包含右顯示驅(qū)動(dòng)部22、左顯示驅(qū)動(dòng)部24、右光學(xué)像顯示部26(圖1)、左光學(xué)像顯示部28 (圖1)、9軸傳感器66。
[0139]右顯示驅(qū)動(dòng)部22與左顯示驅(qū)動(dòng)部24被配置于使用者佩戴圖像顯示部20時(shí)的與使用者的鬢角相對的位置。本實(shí)施方式中的右顯示驅(qū)動(dòng)部22與左顯示驅(qū)動(dòng)部24使用液晶顯示器(Liquid Crystal Display,以下稱為“IXD”)和/或投射光學(xué)系,生成并射出表示圖像的圖像光。右顯示驅(qū)動(dòng)部22包含接收部(Rx) 53、作為光源而起作用的右背光(BL)控制部201以及右背光(BL) 221、作為顯示元件而起作用的右IXD控制部211以及右IXD241、右投射光學(xué)系251。
[0140]接收部53接收從發(fā)送部51發(fā)送的數(shù)據(jù)。右背光控制部201基于所輸入的控制信號,驅(qū)動(dòng)右背光221。右背光221為例如LED和/或電致發(fā)光(EL)等發(fā)光體。右LCD控制部211基于所輸入的時(shí)鐘信號PCLK與右眼用圖像數(shù)據(jù)Datal、垂直同步信號VSync、水平同步信號HSync,驅(qū)動(dòng)右IXD241。右IXD241是將多個(gè)像素配置成矩陣狀的透射型液晶面板。右IXD241通過驅(qū)動(dòng)被配置成矩陣狀的各像素位置的液晶,使透射過右IXD241的光的透射率變化,由此將從右背光221照射的照明光向表示圖像的有效的圖像光調(diào)制。右投射光學(xué)系251由將從右LCD241射出的圖像光設(shè)為并行狀態(tài)的光束的準(zhǔn)直透鏡構(gòu)成。
[0141]左顯示驅(qū)動(dòng)部24具有與右顯示驅(qū)動(dòng)部22大致同樣的構(gòu)成,與右顯示驅(qū)動(dòng)部22同樣地工作。即,左顯示驅(qū)動(dòng)部24包含接收部(Rx) 54、作為光源而起作用的左背光(BL)控制部202以及左背光(BL) 222、作為顯示元件而起作用的左IXD控制部212以及左IXD242、左投射光學(xué)系252。詳細(xì)的說明省略。另外,在本實(shí)施方式中采用背光方式,但也可以使用前光方式、和/或反射方式而射出圖像光。
[0142]右光學(xué)像顯示部26與左光學(xué)像顯示部28被配置成在使用者佩戴圖像顯示部20時(shí)分別位于使用者的左右的眼前(參照圖1)。右光學(xué)像顯示部26包含右導(dǎo)光板261和未圖示的調(diào)光板。右導(dǎo)光板261由透光性的樹脂材料等形成。右導(dǎo)光板261 —邊沿著預(yù)定的光路使從右顯示驅(qū)動(dòng)部22輸出的圖像光反射一邊將該圖像光向使用者的右眼RE引導(dǎo)。在右導(dǎo)光板261中,可以使用衍射光柵也可以使用半透射反射膜。調(diào)光板是薄板狀的光學(xué)元件,被配置成覆蓋圖像顯示部20的表面?zhèn)?。調(diào)光板保護(hù)右導(dǎo)光板261,抑制右導(dǎo)光板261的損傷和/或污垢的附著等。另外,通過調(diào)整調(diào)光板的透光率,能夠調(diào)整進(jìn)入到使用者的眼睛的外光量而調(diào)整虛像的觀看的容易度。另外,調(diào)光板能夠省略。
[0143]左光學(xué)像顯示部28具有與右光學(xué)像顯示部26大致同樣的構(gòu)成,與右光學(xué)像顯示部26同樣地工作。即,左光學(xué)像顯示部28包含左導(dǎo)光板262和未圖示的調(diào)光板,將從左顯示驅(qū)動(dòng)部24輸出的圖像光向使用者的左眼LE引導(dǎo)。詳細(xì)的說明省略。
[0144]9軸傳感器66是檢測加速度(3軸)、角速度(3軸)、地磁(3軸)的運(yùn)動(dòng)傳感器。9軸傳感器66被設(shè)置于圖像顯示部20,所以在將圖像顯示部20佩戴于使用者的頭部時(shí),作為檢測頭置式顯示器100的使用者的頭部的運(yùn)動(dòng)的運(yùn)動(dòng)檢測部而起作用。在這里,所謂頭部的運(yùn)動(dòng),包含頭部的速度.加速度?角速度.朝向.朝向的變化。
[0145]圖4是表示使使用者觀看的虛像的一例的說明圖。在圖4中,例示使用者的視野VR。如上所述,向頭置式顯示器100的使用者的雙眼引導(dǎo)的圖像光成像于使用者的視網(wǎng)膜,由此使用者能夠觀看虛像VI。在圖4的例中,虛像VI是頭置式顯示器100的0S的待機(jī)畫面。另外,使用者透過右光學(xué)像顯示部26以及左光學(xué)像顯示部28而觀看外景SC。這樣,本實(shí)施方式的頭置式顯示器100的使用者對于視野VR中顯示有虛像VI的部分,能夠觀察虛像VI和虛像VI的背后的外景SC。另外,使用者對于視野VR中沒有顯示虛像VI的部分,能夠透過右光學(xué)像顯示部26以及左光學(xué)像顯示部28而直接觀察外景SC。另外,在本說明書中,在“頭置式顯示器100顯示圖像”中,也包含使頭置式顯示器100的使用者觀看虛像。
[0146]A - 3.綜合圖像顯示處理:
[0147]圖5是表示綜合圖像顯示處理的順序的時(shí)序圖。本實(shí)施方式的綜合圖像顯示處理是生成綜合圖像并顯示于頭置式顯示器100的處理。所謂綜合圖像,是包含被連接于頭置式顯示器100的多個(gè)外部裝置的識(shí)別圖像、由使用者從多個(gè)外部裝置中選擇的一個(gè)外部裝置的顯示圖像雙方的圖像。綜合圖像顯示處理主要由生成部142執(zhí)行。
[0148]在步驟S100中,使用于執(zhí)行綜合圖像顯示處理的應(yīng)用起動(dòng)。步驟S100的應(yīng)用的起動(dòng)可以將輸入信息獲取部110檢測到由使用者進(jìn)行的起動(dòng)操作這一情況設(shè)為觸發(fā),也可以將來自其他的應(yīng)用的起動(dòng)命令的檢測設(shè)為觸發(fā)。通過步驟S100的應(yīng)用的起動(dòng),對CPU140使生成部142以及更新部144的功能實(shí)現(xiàn)。
[0149]在步驟S102中,無線通信部132或接口 180檢測連接有作為外部裝置的PC300這一情況。另外,以后,例示頭置式顯示器100與PC300使用依照IEEE802.11的無線LAN而通信的情況。然后,生成部142在其與PC300之間確立聯(lián)系。
[0150]在步驟S104中,PC300獲取PC300的顯示畫面的圖像。具體地說,PC300獲取以下的bl?b3所示的某一幀圖像。另外,下述bl與上述al相對應(yīng),下述b2與上述a2相對應(yīng),下述b3與上述a3相對應(yīng)。
[0151](bl)對在PC300中再現(xiàn)中的內(nèi)容和/或應(yīng)用⑶I (Graphical User Interface:圖形用戶接口)等在一個(gè)時(shí)間點(diǎn)在PC300中顯示的畫面進(jìn)行渲染的幀圖像。
[0152](b2)對PC300的操作畫面(即待機(jī)畫面)和/或設(shè)定畫面(即0S和/或B1S的設(shè)定畫面)進(jìn)行渲染的幀圖像。
[0153](b3)對在PC300中再現(xiàn)中的內(nèi)容和/或應(yīng)用⑶I等在一個(gè)期間中在PC300中顯示的畫面進(jìn)行渲染的多個(gè)幀圖像。
[0154]在步驟S106中,PC300將所獲取的幀圖像向頭置式顯示器100發(fā)送。頭置式顯示器100的生成部142經(jīng)由無線通信部132獲取該幀圖像。此時(shí),生成部142與無線通信部132作為“獲取部”而起作用。
[0155]在步驟S108中,生成部142將所獲取的幀圖像設(shè)為“外部裝置的識(shí)別圖像”而存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。另外,生成部142也可以在對幀圖像進(jìn)行縮小處理后將其存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。這樣一來,能夠降低識(shí)別圖像存儲(chǔ)部124消耗的存儲(chǔ)容量。另外,在步驟S108中生成部142也可以將其與PC300之間的聯(lián)系切斷。
[0156]在步驟S110中,生成部142在其與家電400之間,實(shí)施與步驟S102?S108同樣的處理。同樣,生成部142在步驟S112中在其與AV設(shè)備500之間、在步驟S114中在其與便攜終端600之間、在步驟S116中在其與游戲設(shè)備700之間,分別實(shí)施同樣的處理。步驟S110?S116的結(jié)果,在識(shí)別圖像存儲(chǔ)部124中,存儲(chǔ)有連接于頭置式顯示器100的所有的外部裝置的識(shí)別圖像。
[0157]在步驟S118中生成部142獲取頭置式顯示器100的顯示畫面的圖像。具體地說,獲取與頭置式顯示器100有關(guān)的、上述bl?b3所示的某一幀圖像。
[0158]在步驟S120中,生成部142將所獲取的幀圖像作為“圖像顯示裝置的識(shí)別圖像”,存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。另外,生成部142也可以對幀圖像進(jìn)行縮小處理后將其存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。步驟S118、S120的結(jié)果,在識(shí)別圖像存儲(chǔ)部124中,存儲(chǔ)有頭置式顯示器100自己的識(shí)別圖像。
[0159]在步驟S124中,生成部142獲取存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124的多個(gè)識(shí)別圖像,根據(jù)預(yù)定的條件對所獲取的識(shí)別圖像進(jìn)行分類。分類的條件能夠使用例如作為識(shí)別圖像的獲取源的外部裝置的ID(例如產(chǎn)品編號和/或序列編號)、作為識(shí)別圖像的獲取源的外部裝置的名字(例如產(chǎn)品的名稱)、識(shí)別圖像存儲(chǔ)部124中的識(shí)別圖像的獲取順序、作為識(shí)別圖像的獲取源的外部裝置與頭置式顯示器100之間的距離、外部裝置的種類(例如,PC、家電、AV設(shè)備等)等。另外,外部裝置與頭置式顯示器100之間的距離能夠通過例如0S150對由GPS模塊134檢測的頭置式顯示器100的現(xiàn)在位置信息與從外部裝置獲取的外部裝置的現(xiàn)在位置信息進(jìn)行比較而求出。在該情況下,0S150作為“距離獲取部”而起作用。另外,在本實(shí)施方式中的“外部裝置與頭置式顯示器100之間的距離”中,也包含大致的距離。
[0160]在步驟S126中,生成部142使用分類后的識(shí)別圖像而生成綜合圖像。具體地說,生成部142將在步驟S124中被分類的多個(gè)識(shí)別圖像分別配置于區(qū)域信息122的縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)。另外,生成部142將黑圖像配置于區(qū)域信息122的活動(dòng)顯示區(qū)域BG (第2顯示區(qū)域)。在該活動(dòng)顯示區(qū)域BG中,在后述的綜合圖像變更處理中,插入有由使用者選擇的一個(gè)外部裝置的顯示圖像。
[0161]另外,在步驟S126中,生成部142也可以對各識(shí)別圖像實(shí)施識(shí)別圖像的形狀的變更、識(shí)別圖像的透射率的變更、向識(shí)別圖像的色轉(zhuǎn)換處理、識(shí)別圖像的大小的變更、向識(shí)別圖像附加裝飾(文字、圖形、記號等)等。例如,生成部142在變更識(shí)別圖像的大小時(shí),也可以與外部裝置與頭置式顯示器100之間的距離相應(yīng)而確定識(shí)別圖像的大小。例如,如果越是與頭置式顯示器100之間的距離較近的外部裝置的識(shí)別圖像越增大,則能夠使觀察綜合圖像的使用者視覺性地把握頭置式顯示器100與各外部裝置之間的距離。同樣,對于形狀、和/或透射率、色轉(zhuǎn)換處理的處理內(nèi)容、裝飾的內(nèi)容,也可以與頭置式顯示器100與外部裝置之間的距離相應(yīng)而確定。
[0162]圖6是表示在步驟S126中生成的綜合圖像的一例的說明圖。在綜合圖像GI的縮略圖顯示區(qū)域B1,作為頭置式顯示器100的識(shí)別圖像,配置有頭置式顯示器100的一個(gè)時(shí)間點(diǎn)的顯示圖像G1。同樣,在縮略圖顯示區(qū)域B2,作為PC300的識(shí)別圖像,配置有PC300的一個(gè)時(shí)間點(diǎn)的顯示圖像G2 ;在縮略圖顯示區(qū)域B3,作為家電400的識(shí)別圖像,配置有家電400的設(shè)定畫面的顯示圖像G3 ;在縮略圖顯示區(qū)域B4,作為AV設(shè)備500的識(shí)別圖像,配置有AV設(shè)備500的操作畫面的顯示圖像G4 ;在縮略圖顯示區(qū)域B5,作為便攜終端600的識(shí)別圖像,配置有便攜終端600的一個(gè)時(shí)間點(diǎn)的顯示圖像G5;在縮略圖顯示區(qū)域B6,作為游戲設(shè)備700的識(shí)別圖像,配置有游戲設(shè)備700的一個(gè)時(shí)間點(diǎn)的顯示圖像G6。另外,在圖6的例子中,縮略圖顯示區(qū)域B1?B6的縱橫比與各外部裝置的識(shí)別圖像G1?G6的縱橫比不一致。在圖5的步驟S126,生成部142也可以實(shí)施使各外部裝置的識(shí)別圖像G1?G6的縱橫比與縮略圖顯示區(qū)域B1?B6的縱橫比分別一致的處理。
[0163]在圖5的步驟S128中,生成部142在頭置式顯示器100上顯示綜合圖像。具體地說,生成部142將在步驟S126中生成的綜合圖像向圖像處理部160發(fā)送。在接收了綜合圖像的圖像處理部160,進(jìn)行上述的顯示處理。結(jié)果,被向頭置式顯示器100的使用者的雙眼引導(dǎo)的圖像光成像于使用者的視網(wǎng)膜,由此頭置式顯示器100的使用者能夠在視野中觀看綜合圖像的虛像。換而言之,頭置式顯示器100能夠顯示綜合圖像。
[0164]A - 4.綜合圖像更新處理:
[0165]圖7是表示綜合圖像更新處理的順序的時(shí)序圖。所謂本實(shí)施方式的綜合圖像更新處理,是對綜合圖像中由使用者選擇的一個(gè)外部裝置的顯示圖像進(jìn)行動(dòng)態(tài)更新并顯示于頭置式顯示器100的處理。綜合圖像更新處理主要由更新部144執(zhí)行。
[0166]在步驟S200中,更新部144經(jīng)由輸入信息獲取部110,獲取從多個(gè)外部裝置中選擇一個(gè)外部裝置的選擇操作。該選擇操作是由頭置式顯示器100的使用者進(jìn)行的操作。使用者能夠使用頭置式顯示器100所具備的輸入設(shè)備(例如觸摸板、十字鍵、腳踏開關(guān)、手勢檢測、視線檢測、觸摸檢測、話筒等)而實(shí)施選擇操作。
[0167]在步驟S202中,更新部144對由使用者選擇的一個(gè)外部裝置發(fā)送顯示圖像的要求。在圖中,表示由使用者選擇的外部裝置為PC300的例子。
[0168]在步驟S204中,接收了顯示圖像的要求的外部裝置(PC300)獲取對PC300的顯示畫面的圖像、即在PC300中再現(xiàn)中的內(nèi)容、和/或應(yīng)用⑶I等在現(xiàn)在PC300中顯示的畫面進(jìn)行了渲染的幀圖像。
[0169]在步驟S206中,PC300將所獲取的幀圖像向頭置式顯示器100發(fā)送。頭置式顯示器100的更新部144經(jīng)由無線通信部132獲取第1圖像。此時(shí),更新部144與無線通信部132作為“獲取部”而起作用。
[0170]在步驟S208中,更新部144使用所獲取的幀圖像,對在綜合圖像顯示處理(圖5)的步驟S126中生成的綜合圖像中的活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)進(jìn)行更新。
[0171]在步驟S210中,更新部144顯示更新后的綜合圖像。詳細(xì)與綜合圖像顯示處理(圖5)的步驟S128同樣。
[0172]在步驟S212中,更新部144,在直到獲取與在步驟S200中獲取的外部裝置不同的其他的外部裝置的選擇操作為止的期間內(nèi),對所選擇的外部裝置(PC300),反復(fù)進(jìn)行步驟S202?S210的處理。另一方面,在獲取了其他的外部裝置的選擇操作的情況下,更新部144對其他的外部裝置執(zhí)行步驟S202?S212的處理。
[0173]圖8A是表示在頭置式顯示器100上顯示有將第2顯示區(qū)域更新了的綜合圖像的樣子的說明圖。如圖8A所示,頭置式顯示器100的使用者在視野VR中,作為虛像VI能夠觀看綜合圖像GI,所述綜合圖像GI包含連接于頭置式顯示器100的多個(gè)外部裝置的多個(gè)識(shí)別圖像和從多個(gè)外部裝置中選擇的一個(gè)外部裝置的顯示圖像。在圖8A的例子中,所謂多個(gè)外部裝置的多個(gè)識(shí)別圖像,為在圖6中說明的頭置式顯示器100的識(shí)別圖像G1、PC300的識(shí)另IJ圖像G2、家電400的識(shí)別圖像G3、AV設(shè)備500的識(shí)別圖像G4、便攜終端600的識(shí)別圖像G5和游戲設(shè)備700的識(shí)別圖像G6。另外,在圖8A的例子中,所謂所選擇的一個(gè)外部裝置的顯示圖像,即為作為PC300顯示的圖像的顯示圖像IM。另外,本實(shí)施方式的頭置式顯示器100為透射型的頭部佩戴型顯示裝置。因此,如通過圖4進(jìn)行說明,使用者能夠透過虛像VI而觀看背景。對于該背景,為了圖示的方便,將圖8A中的圖示省略。
[0174]如以上所述,根據(jù)第1實(shí)施方式的綜合圖像顯示處理(圖5)以及綜合圖像更新處理(圖7),圖像顯示部20能夠使使用者觀看綜合圖像GI,所述綜合圖像GI包含連接于頭置式顯示器100 (圖像顯示裝置)的多個(gè)外部裝置(PC300?游戲設(shè)備700)的多個(gè)識(shí)別圖像G2?G7和從多個(gè)外部裝置中選擇的一個(gè)外部裝置(在上述例子中為PC300)的顯示圖像頂。因此,能夠提供能夠?qū)㈩^置式顯示器100的周邊的、換而言之連接于頭置式顯示器100的外部裝置上的顯示綜合的頭置式顯示器100。另外,在綜合圖像顯示處理(圖5)中,也可以將連接于頭置式顯示器100的多個(gè)外部裝置的多個(gè)識(shí)別圖像G2?G7中的至少一部分識(shí)別圖像包含于縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)。這樣也能夠提供能夠?qū)⑦B接于頭置式顯示器100的至少一部分外部裝置上的顯示綜合的頭置式顯示器100。
[0175]另外,根據(jù)第1實(shí)施方式的綜合圖像更新處理(圖7),圖像顯示部20能夠使使用者觀看對從多個(gè)外部裝置(PC300?游戲設(shè)備700)選擇的一個(gè)外部裝置(在上述例子中為PC300)、對其顯示畫面進(jìn)行動(dòng)態(tài)更新的綜合圖像GI。根據(jù)上述的綜合圖像更新處理以及綜合圖像顯示處理(圖5),頭置式顯示器100僅對綜合圖像中的活動(dòng)顯示區(qū)域BG (第2顯示區(qū)域)進(jìn)行動(dòng)態(tài)更新,縮略圖顯示區(qū)域B1?B6(第1顯示區(qū)域)不更新。因此,頭置式顯示器1001次1次從各外部裝置獲取識(shí)別圖像即可,能夠降低頭置式顯示器100與各外部裝置之間的通信量。另外,對于由使用者選擇的一個(gè)外部裝置,能夠動(dòng)態(tài)性地對其顯示圖像進(jìn)行更新。
[0176]A — 5.附加的處理:
[0177]另外,在綜合圖像顯示處理(圖5)或綜合圖像更新處理(圖7)中,也可以附加以下那樣的處理。以下所示的處理可以單獨(dú)附加,也可以組合而附加。
[0178]A — 5 — 1.附加的處理1:
[0179]在附加的處理1中,通過“使用者對一個(gè)外部裝置注意”而實(shí)現(xiàn)使用者從多個(gè)外部裝置中選擇一個(gè)外部裝置的選擇操作。在本處理中,頭置式顯示器100的CPU140設(shè)為進(jìn)而具備外部裝置特定部的構(gòu)成。外部裝置特定部使用以下所示的cl?c6的方法的任意一個(gè),對被推定為使用者注意過的外部裝置進(jìn)行特定,將該外部裝置設(shè)為“由使用者選擇的外部裝置”。
[0180](cl)使用指向性的無線電波的方法:
[0181]設(shè)為在與頭置式顯示器100的殼體外部的前面相對應(yīng)的位置、例如與使用者的眉間相對應(yīng)的位置(換而言之,右光學(xué)像顯示部26與左光學(xué)像顯示部28之間)具備指向性的無線天線的構(gòu)成。這樣一來,能夠推定為接收了來自該無線天線的電波的外部裝置為使用者將頭部朝向的外部裝置。外部裝置特定部能夠通過從接收了來自指向性的無線天線的電波的外部裝置接收該情況的消息,對推定為使用者注意過的外部裝置進(jìn)行特定。
[0182](c2)使用紅外線的方法:
[0183]設(shè)為在與頭置式顯示器100的殼體外部的前面相對應(yīng)的位置具備紅外線的發(fā)光部的構(gòu)成。進(jìn)而,設(shè)為在各外部裝置具備紅外線的感光部的構(gòu)成。這樣一來,能夠推定為接收了來自頭置式顯示器100的紅外線的外部裝置為使用者將頭部朝向外部裝置。外部裝置特定部能夠通過從接收了紅外線的外部裝置接收該情況的消息,對推定為使用者注意過的外部裝置進(jìn)行特定。另外,也可以在頭置式顯示器100設(shè)置紅外線的感光部,在各外部裝置設(shè)置紅外線的發(fā)光部。在該情況下,如果在每個(gè)外部裝置改變紅外線的發(fā)光圖案,則在接收了紅外線的頭置式顯示器100,能夠?qū)ν贫槭褂谜咦⒁膺^的外部裝置進(jìn)行特定。
[0184](c3)使用位置信息的方法:
[0185]外部裝置特定部使用通過GPS模塊134(圖2)得到的頭置式顯示器100的現(xiàn)在位置信息和從各外部裝置獲取的各外部裝置的位置信息,求出頭置式顯示器100與各外部裝置的位置關(guān)系。然后,外部裝置特定部能夠基于通過9軸傳感器66 (圖2)得到的頭置式顯示器100的朝向(使用者的頭部的朝向),對推定為使用者注意過的外部裝置進(jìn)行特定。另夕卜,外部裝置特定部能夠使用例如無線通信和/或近距離無線通信獲取各外部裝置的位置信息。
[0186](c4)使用無線標(biāo)簽的方法:
[0187]圖8B是與附加的處理1的使用無線標(biāo)簽的方法有關(guān)的說明圖。在圖8B中,為了圖示的方便,將圖1的頭置式顯示器100簡略化而圖示,并且僅例示3臺(tái)外部裝置。在本方法中,設(shè)為在與頭置式顯示器100的殼體外部的前面相對應(yīng)的位置具備距離計(jì)測傳感器61或可見光照相機(jī)的構(gòu)成。進(jìn)而,設(shè)為在各外部裝置內(nèi)藏能夠進(jìn)行近距離無線通信的無線標(biāo)簽RF1?3的構(gòu)成。在此基礎(chǔ)上,外部裝置特定部對使用者將頭部朝向的一個(gè)外部裝置與使用者(距離計(jì)測傳感器61)之間的距離L進(jìn)行計(jì)測。該計(jì)測能夠使用例如Time - of -Flight法。接下來外部裝置特定部從各外部裝置的無線標(biāo)簽RF1?3分別獲取預(yù)先存儲(chǔ)于無線標(biāo)簽RF1?3的各外部裝置與頭置式顯示器100之間的距離L1?L3。外部裝置特定部能夠通過對所計(jì)測的距離L與所獲取的距離L1?L3進(jìn)行比較,對推定為使用者注意過的外部裝置進(jìn)行特定。另外,各外部裝置與頭置式顯示器100之間的距離L1?L3可以預(yù)先存儲(chǔ)于頭置式顯示器100的存儲(chǔ)部120,也可以頭置式顯示器100動(dòng)態(tài)地求出頭置式顯示器100與外部裝置之間的距離。另外,在距離L1?L3的發(fā)送中,也可以代替近距離無線通信而使用無線通信。進(jìn)而,為了能夠?qū)ν痪嚯x的2個(gè)外部裝置進(jìn)行特定,也可以同時(shí)使用通過9軸傳感器66(圖2)得到的頭置式顯示器100的朝向(使用者的頭部的朝向)。
[0188](c5)使用圖像處理的方法:
[0189]設(shè)為在與頭置式顯示器100的殼體外部的前面相對應(yīng)的位置具備可見光照相機(jī)的構(gòu)成。另外,在頭置式顯示器100的存儲(chǔ)部120中,預(yù)先存儲(chǔ)有各外部裝置的外觀特征。外部裝置特定部由可見光照相機(jī)拍攝使用者的視野方向的圖像(以后也稱為“外景圖像”。)。外部裝置特定部能夠通過對外景圖像進(jìn)行圖像解析、與存儲(chǔ)于存儲(chǔ)部120的外部裝置的外觀特征對照,對推定為使用者注意過的外部裝置進(jìn)行特定。另外,也可以使用以下列舉的方法。
[0190].外部裝置特定部由可見光照相機(jī)獲取頭置式顯示器100的使用者用手指一個(gè)外部裝置的狀態(tài)的外景圖像。外部裝置特定部對外景圖像進(jìn)行圖像解析,對位于使用者的手指的延長線上的外部裝置進(jìn)行特定。
[0191].在圖像顯示部20的殼體內(nèi)側(cè),設(shè)置例如由紅外線收發(fā)部構(gòu)成的瞳孔檢測部。夕卜部裝置特定部基于由可見光照相機(jī)拍攝的外景圖像和由瞳孔檢測部檢測的使用者的眼睛的運(yùn)動(dòng),對使用者將視線朝向的外部裝置進(jìn)行特定。
[0192](c6)使用標(biāo)記的方法:
[0193]設(shè)為在與頭置式顯示器100的殼體外部的前面相對應(yīng)的位置具備可見光照相機(jī)的構(gòu)成。進(jìn)而,設(shè)為在外部裝置的殼體外部附加有在增強(qiáng)現(xiàn)實(shí)感(AR, Augmented Reality)處理中使用的標(biāo)記的構(gòu)成。外部裝置特定部由可見光照相機(jī)拍攝外景圖像。外部裝置特定部能夠通過外景圖像所含的標(biāo)記,對推定為使用者注意過的外部裝置進(jìn)行特定。
[0194]當(dāng)在綜合圖像顯示處理(圖5)中適用附加的處理1的情況下,也可以僅對通過上述的任意的方法特定的外部裝置,實(shí)施步驟S102的聯(lián)系的確立以及以后的處理。另外,也可以僅對通過上述的任意的方法特定的外部裝置,執(zhí)行步驟S104、S106,執(zhí)行步驟S108。使用者能夠多次反復(fù)進(jìn)行使用了上述的任意的方法的外部裝置的特定。這樣一來,生成部142將連接于頭置式顯示器100(圖像顯示裝置)的多個(gè)外部裝置(PC300?游戲設(shè)備700)中被推定為至少在過去使用者注意過的外部裝置的識(shí)別圖像一覽顯示于縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)。這樣,使用者能夠通過“注意”而選擇顯示于縮略圖顯示區(qū)域B1?B6的外部裝置,所以使用者的便利性提高。另外,能夠抑制在頭置式顯示器100連接有數(shù)較多的外部裝置的情況等的、縮略圖顯示區(qū)域B1?B6的復(fù)雜化。
[0195]另外,當(dāng)在綜合圖像顯示處理(圖5)中適用附加的處理1的情況下,也可以對預(yù)先確定的外部裝置和通過上述的任意的方法特定的外部裝置實(shí)施步驟S102以后的處理。另外,也可以對預(yù)先確定的外部裝置和通過上述的任意的方法特定的外部裝置執(zhí)行步驟S104、S106,執(zhí)行步驟S108。在這里,所謂“預(yù)先確定的外部裝置”,可以由頭置式顯示器100的使用者預(yù)先指定,也可以在工廠出廠時(shí)等指定,也可以通過預(yù)定的條件(例如,使用者與外部裝置之間的距離為預(yù)定的閾值以下)而自動(dòng)地指定。另外,使用者與外部裝置之間的距離能夠通過上述的方法cl?c4求出。這樣也能夠提高使用者的便利性并且抑制縮略圖顯示區(qū)域B1?B6的復(fù)雜化。
[0196]當(dāng)在綜合圖像更新處理(圖7)中適用附加的處理1的情況下,也可以代替步驟S200,對通過上述的任意的方法特定的外部裝置,實(shí)施步驟S202以后的處理。這樣一來,更新部144(獲取部)從推定為使用者注意過的外部裝置,獲取該外部裝置的顯示圖像,更新部144使用所獲取的顯示圖像而對綜合圖像的活動(dòng)顯示區(qū)域BG (第2顯示區(qū)域)進(jìn)行更新。這樣,使用者能夠通過“注意”而選擇顯示于活動(dòng)顯示區(qū)域BG的外部裝置,所以使用者的便利性提聞。
[0197]另外,也可以與使用者將頭部朝向外部裝置的時(shí)間(注意的時(shí)間)相應(yīng),確定是在綜合圖像顯示處理(圖5)中適用附加的處理1還是在綜合圖像更新處理(圖7)中適用附加的處理1。例如,也可以在時(shí)間比預(yù)定的閾值短的情況下在綜合圖像顯示處理中適用附加的處理1,在較長的情況下在綜合圖像更新處理中適用附加的處理1。
[0198]另外,上述cl?c6只不過是一例,外部裝置特定部能夠與使用者的頭部的運(yùn)動(dòng)和/或使用者的視線等相應(yīng),對使用者注意過的外部裝置進(jìn)行特定。外部裝置特定部也可以通過將上述cl?c6組合,一次對多個(gè)外部裝置進(jìn)行特定。
[0199]A — 5 — 2.附加的處理2:
[0200]在附加的處理2中,在綜合圖像更新處理(圖7)的步驟S200中,對由使用者選擇的一個(gè)外部裝置,附加用于提供增強(qiáng)現(xiàn)實(shí)感的標(biāo)簽。在該處理中,設(shè)為頭置式顯示器100的CPU 140進(jìn)而具備附加提示用信息生成部的構(gòu)成。
[0201]附加提示用信息生成部在使用者朝向在圖7的步驟S200中選擇的外部裝置的方向的情況下,生成用于識(shí)別該外部裝置的附加提示用的信息。所謂附加提示用的信息,是用于對外部裝置附加、刪除、強(qiáng)調(diào)、衰減任何信息的信息。具體地說,所謂附加提示用的信息,例如,為包含有通知其為使用者所選擇的外部裝置的文字列的氣球、筆記形狀的標(biāo)簽、通知其為使用者所選擇的外部裝置的圖標(biāo)(畫、文字、記號等)、通知其為使用者所選擇的外部裝置的框(為了對外部裝置進(jìn)行裝飾而配置的框)等。另外,附加提示用信息生成部能夠使用與上述的cl?c6同樣的方法判斷使用者是否朝向在步驟S200中選擇的外部裝置的方向。
[0202]附加提示用信息生成部將所生成的附加提示用的信息向圖像處理部160發(fā)送。在接收了綜合圖像的圖像處理部160,進(jìn)行上述的顯示處理。結(jié)果,頭置式顯示器100的使用者在觀察在步驟S200中自己選擇的外部裝置時(shí),能夠與外部裝置一起觀看表示附加提示用的信息(標(biāo)簽)的虛像。
[0203]另外,頭置式顯示器100的CPU140也可以代替上述的附加提示用信息生成部而具備附加提示用信息選擇部。附加提示用信息選擇部,從例如存儲(chǔ)部120和/或外部的服務(wù)器等中預(yù)先準(zhǔn)備的多個(gè)附加提示用的信息,選擇用于通知其為使用者所選擇的外部裝置的附加提示用的信息,將所選擇的附加提示用的信息向圖像處理部160發(fā)送。
[0204]這樣,根據(jù)附加的處理2,圖像顯示部20能夠使使用者觀看用于向通過圖7的步驟S200選擇的一個(gè)外部裝置附加的附加提示用的信息。結(jié)果,使用者能夠區(qū)別自己選擇的外部裝置與其他的外部裝置,所以使用者的便利性提高。
[0205]第2實(shí)施方式:
[0206]在本發(fā)明的第2實(shí)施方式中,對作為外部裝置的識(shí)別圖像使用與第1實(shí)施方式所例示的圖像不同的種類的圖像的構(gòu)成進(jìn)行說明。以下,僅對具有與第1實(shí)施方式不同的構(gòu)成以及工作的部分進(jìn)行說明。另外,在圖中對于與第1實(shí)施方式同樣的構(gòu)成部分附加與在前面說明的第1實(shí)施方式同樣的符號,將其詳細(xì)的說明省略。
[0207]B - 1.圖像顯示系統(tǒng)的構(gòu)成:
[0208]第2實(shí)施方式的圖像顯示系統(tǒng),除了代替頭置式顯示器100而具備頭置式顯示器100a的方面,與圖1所示的第1實(shí)施方式同樣。
[0209]B - 2.頭置式顯示器的構(gòu)成:
[0210]圖9是功能性表示第2實(shí)施方式的頭置式顯示器100a的構(gòu)成的框圖。與圖2所示的第1實(shí)施方式不同的是代替控制部10而具備控制部10a這一方面。控制部10a代替生成部142而具備生成部142a,代替更新部144而具備更新部144a。生成部142a的綜合圖像顯示處理的內(nèi)容與圖5所示的第1實(shí)施方式不同。更新部144a的綜合圖像更新處理的內(nèi)容與圖7所示的第1實(shí)施方式不同。
[0211]在第2實(shí)施方式的綜合圖像顯示處理以及綜合圖像更新處理中,代替在第1實(shí)施方式的al?a3中例示的“外部裝置的識(shí)別圖像”,將以下的a4、a5的任意一個(gè)作為“外部裝置的識(shí)別圖像”而使用。
[0212](a4)表示用于識(shí)別外部裝置的信息的圖像。所謂用于識(shí)別外部裝置的信息,例如,為外部裝置的ID (例如產(chǎn)品編號和/或序列編號)、外部裝置的名字(例如產(chǎn)品的名稱)、外部裝置的狀態(tài)(例如產(chǎn)品的屬性)等。
[0213](a5)表示向外部裝置分配的符號的圖像。在這里,所謂“符號”,例如,為表示外部裝置的存在的圖標(biāo)、將外部裝置抽象化而表示的圖形或記號等。
[0214]B - 3.綜合圖像顯示處理:
[0215]圖10是表示第2實(shí)施方式的綜合圖像顯示處理的順序的時(shí)序圖。所謂第2實(shí)施方式的綜合圖像顯示處理,與第1實(shí)施方式(圖5)同樣,是生成綜合圖像、顯示于頭置式顯示器100a的處理。與第1實(shí)施方式不同的方面是作為外部裝置的識(shí)別圖像使用在上述a4、a5中列舉的圖像的方面。綜合圖像顯示處理主要由生成部142a執(zhí)行。
[0216]首先,與在圖5中說明的第1實(shí)施方式同樣,使應(yīng)用起動(dòng)(步驟S100),使頭置式顯示器100a與PC300之間的聯(lián)系確立(步驟S102)。
[0217]在步驟S300中,PC300獲取PC300的設(shè)備信息。具體地說,PC300獲取以下的b4、b5所示的任意一個(gè)信息(也可以不是圖像)。另外,下述b4與上述a4相對應(yīng),下述b5與上述a5相對應(yīng)。
[0218](b4)用于識(shí)別PC300的信息。例如,表示PC300的產(chǎn)品編號和/或序列編號等ID、PC300的名稱、PC300的屬性等狀態(tài)的信息。
[0219](b5)表示PC300的符號的圖像。例如,PC300的圖標(biāo)圖像。
[0220]在步驟S302中,PC300將所獲取的設(shè)備信息向頭置式顯示器100a發(fā)送。頭置式顯示器100a的生成部142a經(jīng)由無線通信部132獲取該設(shè)備信息。此時(shí),生成部142a與無線通信部132作為“獲取部”而起作用。
[0221]在步驟S303中,生成部142a生成表示所獲取的設(shè)備信息的圖像。生成部142a將所生成的圖像作為“外部裝置的識(shí)別圖像”而存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。另外,如上述b5,在從PC300接收的設(shè)備信息為圖像的形式的情況下,表示設(shè)備信息的圖像的生成能夠省略。
[0222]在步驟S304中,生成部142a將頭置式顯示器100a與PC300之間的聯(lián)系切斷。這樣,通過將不需要的聯(lián)系立即切斷,能夠使通信量以及消耗電力降低。
[0223]在步驟S306中,生成部142a在其與家電400之間實(shí)施與步驟S102以及步驟S300?S304同樣的處理。同樣,生成部142a在步驟S308中在其與AV設(shè)備500之間、在步驟S308中在其與便攜終端600之間、在步驟S310中在其與游戲設(shè)備700之間分別實(shí)施同樣的處理。結(jié)果,在識(shí)別圖像存儲(chǔ)部124中,存儲(chǔ)有連接于頭置式顯示器100a的所有的外部裝置的識(shí)別圖像。
[0224]在步驟S314中,生成部142a獲取頭置式顯示器100a的設(shè)備信息。具體地說,獲取與頭置式顯示器100a有關(guān)的、上述b4、b5所示的任意一個(gè)信息。
[0225]在步驟S316中,生成部142a生成表示所獲取的設(shè)備信息的圖像,作為“圖像顯示裝置的識(shí)別圖像”而存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。步驟S314、S316的結(jié)果,在識(shí)別圖像存儲(chǔ)部124中,存儲(chǔ)有頭置式顯示器100a自己的識(shí)別圖像。
[0226]以后,與在圖5中說明的第1實(shí)施方式同樣,生成部142a對存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124的多個(gè)識(shí)別圖像進(jìn)行分類(步驟S124),生成綜合圖像(步驟S126),并顯示綜合圖像(步驟S128)。詳細(xì)如在圖5中說明那樣。
[0227]圖11是表示在第2實(shí)施方式的綜合圖像顯示處理的步驟S126中生成的綜合圖像的一例的說明圖。在綜合圖像GI的縮略圖顯示區(qū)域B1,作為頭置式顯示器100的識(shí)別圖像,配置有表示頭置式顯示器100的產(chǎn)品編號的圖像J1。同樣,在縮略圖顯示區(qū)域B2,作為PC300的識(shí)別圖像,配置有PC300的圖標(biāo)圖像J2 ;在縮略圖顯示區(qū)域B3,作為家電400的識(shí)別圖像,配置有表示家電400的產(chǎn)品的名稱的圖像J3 ;在縮略圖顯示區(qū)域B4,作為AV設(shè)備500的識(shí)別圖像,配置有AV設(shè)備500的圖標(biāo)圖像J4 ;在縮略圖顯示區(qū)域B5,作為便攜終端600的識(shí)別圖像,配置有表示便攜終端600的產(chǎn)品編號的圖像J5 ;在縮略圖顯示區(qū)域B6,作為游戲設(shè)備700的識(shí)別圖像,配置有表示游戲設(shè)備700的產(chǎn)品編號的圖像J6。
[0228]B - 4.綜合圖像更新處理:
[0229]圖12是表示第2實(shí)施方式中的綜合圖像更新處理的順序的時(shí)序圖。所謂第2實(shí)施方式的綜合圖像更新處理,與第1實(shí)施方式(圖7)同樣,為動(dòng)態(tài)地顯示綜合圖像的第2顯示區(qū)域的處理。與第1實(shí)施方式不同的方面,是作為外部裝置的識(shí)別圖像使用上述a4、a5所列舉的圖像的方面,和利用為了對第2顯示區(qū)域進(jìn)行更新而從外部裝置獲取的顯示圖像、對識(shí)別圖像存儲(chǔ)部124內(nèi)的外部裝置的識(shí)別圖像進(jìn)行更新的方面。綜合圖像更新處理主要由更新部144a執(zhí)行。
[0230]首先,與在圖7中說明的第1實(shí)施方式同樣,獲取從多個(gè)外部裝置中選擇一個(gè)外部裝置的選擇操作(步驟S200),從所選擇的一個(gè)外部裝置獲取顯示畫面的圖像(幀圖像)(步驟 S202 ?S206)。
[0231]在步驟S400中,更新部144a將所獲取的幀圖像設(shè)為“外部裝置的識(shí)別圖像”,存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。此時(shí),更新部144a將在綜合圖像顯示處理(圖10)的步驟S303中已經(jīng)存儲(chǔ)的同一個(gè)外部裝置的識(shí)別圖像覆蓋。另外,在步驟S400中,也可以對所獲取的幀圖像進(jìn)行縮小處理后存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124。
[0232]在步驟S402中,更新部144a獲取存儲(chǔ)于識(shí)別圖像存儲(chǔ)部124的多個(gè)識(shí)別圖像,根據(jù)預(yù)定的條件對所獲取的識(shí)別圖像進(jìn)行分類。詳細(xì)與綜合圖像顯示處理(圖5)的步驟S124同樣。
[0233]在步驟S404中,更新部144a使用分類后的識(shí)別圖像對綜合圖像的縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)進(jìn)行更新。詳細(xì)與綜合圖像顯示處理(圖5)的步驟S126同樣。
[0234]在步驟S408中,更新部144a使用在步驟S206中獲取的幀圖像,對在步驟S404中更新了的綜合圖像中的活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)進(jìn)行更新。
[0235]在步驟S210中,更新部144a使更新后的綜合圖像顯示。詳細(xì)與綜合圖像顯示處理(圖5)的步驟S128同樣。
[0236]在步驟S410中,更新部144a在直到獲取與在步驟S200中獲取的外部裝置不同的其他的外部裝置的選擇操作為止的期間,對所選擇的外部裝置(PC300),反復(fù)進(jìn)行步驟S202、S204、S206、S408、S210的處理。另一方面,在獲取了其他的外部裝置的選擇操作的情況下,更新部144a對其他的外部裝置執(zhí)行步驟S202?S410的一連串的處理。
[0237]圖13是表示在頭置式顯示器100a中顯示有將第1顯示區(qū)域與第2顯示區(qū)域更新了的綜合圖像的樣子的說明圖。如圖13所示,頭置式顯示器100a的使用者在視野VR中,能夠觀看綜合圖像GI作為虛像VI,所述綜合圖像GI包含連接于頭置式顯示器100a的多個(gè)外部裝置的多個(gè)識(shí)別圖像和從多個(gè)外部裝置中選擇的一個(gè)外部裝置的顯示圖像。在圖13的例子中,所謂多個(gè)外部裝置的多個(gè)識(shí)別圖像,為在圖11中說明的頭置式顯示器100a的識(shí)別圖像Jl、PC300的識(shí)別圖像J2、家電400的識(shí)別圖像J3、AV設(shè)備500的識(shí)別圖像J4、便攜終端600的識(shí)別圖像J5和游戲設(shè)備700的識(shí)別圖像J6。在這里,對于PC300的識(shí)別圖像J2,顯示有綜合圖像更新處理(圖12)的步驟S400中的更新后的識(shí)別圖像。另外,在圖13的例子中,所謂所選擇的一個(gè)外部裝置的顯示圖像,即為作為PC300顯示的圖像的顯示圖像頂。另外,與圖8A同樣,在圖14中,對于本來透過虛像VI的背景也將圖示省略。
[0238]如以上所述,根據(jù)第2實(shí)施方式的綜合圖像顯示處理(圖10)以及綜合圖像更新處理(圖12),能夠得到與第1實(shí)施方式同樣的效果。進(jìn)而,在第2實(shí)施方式的綜合圖像顯示處理以及綜合圖像更新處理中,作為外部裝置的識(shí)別圖像,能夠使用與在第1實(shí)施方式中例示的圖像不同的種類的圖像。
[0239]B - 5.附加的處理:
[0240]在第2實(shí)施方式中,也能夠適用上述的附加的處理1、2。
[0241]C.第3實(shí)施方式:
[0242]在本發(fā)明的第3實(shí)施方式中,對于將結(jié)合圖像的縮略圖顯示區(qū)域B1?B6(第1顯示區(qū)域)設(shè)為假想性的顯示區(qū)域的構(gòu)成進(jìn)行說明。以下,僅對具有與第1實(shí)施方式不同的構(gòu)成以及工作的部分進(jìn)行說明。另外,在圖中對于與第1實(shí)施方式同樣的構(gòu)成部分附加與在前面說明的第1實(shí)施方式同樣的符號,將其詳細(xì)的說明省略。
[0243]C - 1.圖像顯示系統(tǒng)的構(gòu)成:
[0244]第3實(shí)施方式的圖像顯示系統(tǒng)除了代替頭置式顯示器100而具備頭置式顯示器100b的方面,與圖1所不的第1實(shí)施方式同樣。
[0245]C - 2.頭置式顯示器的構(gòu)成:
[0246]圖14是功能性表示第3實(shí)施方式的頭置式顯示器100b的構(gòu)成的框圖。與圖2所示的第1實(shí)施方式的不同是代替控制部10而具備控制部10b的方面??刂撇?0b分別代替區(qū)域信息122而具備區(qū)域信息122b,代替圖像處理部160而具備圖像處理部160b。
[0247]圖15是表示第3實(shí)施方式中的區(qū)域信息122b的一例的說明圖。第3實(shí)施方式的區(qū)域信息122b與圖3所示的第1實(shí)施方式同樣,包含6個(gè)縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)和活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)。各區(qū)域的用途如在圖3中說明那樣??s略圖顯示區(qū)域B1?B3與縮略圖顯示區(qū)域B4?B6夾著活動(dòng)顯示區(qū)域BG而配置于水平方向的左右的外側(cè)?;顒?dòng)顯示區(qū)域BG的縱橫比與能夠由顯示驅(qū)動(dòng)部生成圖像光的區(qū)域的縱橫t匕、換而言之頭置式顯示器100b的顯示元件(圖2:右IXD241、左IXD242)的縱橫比相同。
[0248]在圖15的例子中,縮略圖顯示區(qū)域B1?B3分別在鉛直方向上相鄰地配置于區(qū)域122b的左側(cè)的外側(cè)??s略圖顯示區(qū)域B4?B6分別在鉛直方向上相鄰地配置于區(qū)域122的右側(cè)的外側(cè)??s略圖顯示區(qū)域B1?B6分別為相同大小的區(qū)域。在圖15中,對縮略圖顯示區(qū)域B1?B6附加點(diǎn)狀的陰影,對活動(dòng)顯示區(qū)域BG附加斜線陰影。
[0249]另外,圖15所示的縮略圖顯示區(qū)域B1?B6的配置以及大小是一例,能夠任意地確定??s略圖顯示區(qū)域B1?B6只要配置于活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)的外側(cè)便足夠。因此,例如,縮略圖顯示區(qū)域B1?B6也可以配置于活動(dòng)顯示區(qū)域BG的上側(cè)的外側(cè)和/或下側(cè)的外側(cè)。另外,縮略圖顯示區(qū)域B1?B6也可以配置成包圍活動(dòng)顯示區(qū)域BG的外側(cè)的四方。另外,縮略圖顯示區(qū)域B1?B6也可以各區(qū)域?yàn)椴煌拇笮?。進(jìn)而,縮略圖顯示區(qū)域B1?B6也可以各區(qū)域的至少一部分重合。
[0250]C- 3.綜合圖像顯示處理:
[0251]第3實(shí)施方式中的綜合圖像顯示處理的順序除了以下列舉的順序dl、d2,與圖5所不的第1實(shí)施方式同樣。
[0252](dl)在步驟S126中,生成部142使用在圖15中說明的區(qū)域信息122b,生成綜合圖像。
[0253](d2)在步驟S128中,圖像處理部160b僅將從生成部142接收的綜合圖像中的與活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域,在圖15中施加了斜線的陰影的區(qū)域)相當(dāng)?shù)牟糠值膱D像顯示于頭置式顯示器100b。而且,圖像處理部160b將從使用者獲取了預(yù)定的操作設(shè)為觸發(fā),將與縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域、在圖15中施加了點(diǎn)狀的陰影的區(qū)域)相當(dāng)?shù)牟糠值膱D像顯示于頭置式顯示器100b。所謂預(yù)定的操作,能夠使用例如使用者由頭置式顯示器100b所具備的輸入設(shè)備(例如,觸摸板、十字鍵、腳踏開關(guān)、手勢檢測、視線檢測、觸摸檢測、話筒等)進(jìn)行的操作等。
[0254]圖16是用于說明圖像處理部160b的工作的一例的說明圖。例如,圖像處理部160b將使用者觸摸頭置式顯示器100b的左保持部23設(shè)為觸發(fā),如圖所示,使顯示于頭置式顯示器100b的綜合圖像的范圍如圖16那樣向左側(cè)滑動(dòng)。這樣一來,圖像處理部160b能夠使使用者觀看第1顯示區(qū)域(的一部分)與第2顯示區(qū)域(的一部分)。同樣,圖像處理部160b將使用者觸摸頭置式顯示器100b的右保持部21設(shè)為觸發(fā),使顯示于頭置式顯示器100b的綜合圖像的范圍向右側(cè)滑動(dòng)。另外,當(dāng)在區(qū)域信息122b中縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)被設(shè)置于活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)的上下的情況下,能夠?qū)⑹褂谜哂|摸頭置式顯示器100b的殼體的上下設(shè)為觸發(fā),進(jìn)行同樣的處理。
[0255]C - 4.綜合圖像更新處理:
[0256]第3實(shí)施方式中的綜合圖像更新處理的順序除了步驟S210中的圖像處理部160b的順序(與上述d2同樣),與圖7所示的第1實(shí)施方式同樣。
[0257]如以上所述,根據(jù)第3實(shí)施方式的綜合圖像顯示處理(圖5)以及綜合圖像更新處理(圖7),能夠得到與第1實(shí)施方式同樣的效果。進(jìn)而,根據(jù)第3實(shí)施方式的綜合圖像顯示處理以及綜合圖像更新處理,圖像顯示部20,在沒有由使用者進(jìn)行的操作的情況下,能夠使使用者觀看與綜合圖像的活動(dòng)顯示區(qū)域BG(第2顯示區(qū)域)相當(dāng)?shù)牟糠?,在有由使用者進(jìn)行的操作的情況下,能夠使使用者觀看與綜合圖像的縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)相當(dāng)?shù)牟糠帧=Y(jié)果,根據(jù)該形態(tài)的頭置式顯示器100b (圖像顯示裝置),能夠在通常畫面(活動(dòng)顯示區(qū)域BG、第2顯示區(qū)域)的外側(cè)設(shè)置假想畫面(縮略圖顯示區(qū)域B1?B6、第1顯示區(qū)域),通過由使用者進(jìn)行的操作,切換通常畫面與假想畫面的顯示。結(jié)果,能夠提高使用者的便利性。
[0258]C — 5.附加的處理:
[0259]在第3實(shí)施方式中,也能夠適用上述的附加的處理1、2。
[0260]D.第4實(shí)施方式:
[0261]在本發(fā)明的第4實(shí)施方式中,對于通過由其他的信息處理裝置(以后也稱為“月艮務(wù)器”。)實(shí)施頭置式顯示器所實(shí)施的處理而謀求處理負(fù)荷分散的構(gòu)成進(jìn)行說明。以下,僅對具有與第1實(shí)施方式不同的構(gòu)成以及工作的部分進(jìn)行說明。另外,在圖中對于與第1實(shí)施方式同樣的構(gòu)成部分附加與在前面說明的第1實(shí)施方式同樣的符號,將其詳細(xì)的說明省略。
[0262]D - 1.圖像顯示系統(tǒng)的構(gòu)成:
[0263]圖17是表示第4實(shí)施方式的圖像顯示系統(tǒng)1000c的概略構(gòu)成的說明圖。與圖1所示的第1實(shí)施方式的不同,是代替頭置式顯示器100而具備頭置式顯示器100c的方面和具備服務(wù)器900的方面。在第4實(shí)施方式中,服務(wù)器900生成將外部裝置中的顯示綜合的“綜合圖像”,顯示于頭置式顯示器100c。
[0264]頭置式顯示器100c能夠無線通信或有線通信地與連接服務(wù)器900。同樣,各外部裝置(PC300?游戲設(shè)備700)能夠無線通信或有線通信地與服務(wù)器900連接。另外,在頭置式顯示器100c與服務(wù)器900之間或服務(wù)器900與各外部裝置之間,也可以設(shè)有例如路由器和/或接入點(diǎn)等網(wǎng)絡(luò)裝置、各種適配器等。
[0265]D-2.頭置式顯示器以及服務(wù)器的構(gòu)成:
[0266]第4實(shí)施方式中的頭置式顯示器100c,除了具備區(qū)域信息122、識(shí)別圖像存儲(chǔ)部124、生成部142、更新部144的方面,與圖2所示的第1實(shí)施方式同樣。
[0267]圖18是功能性表示服務(wù)器900的構(gòu)成的框圖。服務(wù)器900包括CPU910、R0M920、RAM930、通信接口(I/F)940和存儲(chǔ)部950,各部分通過未圖示的總線相互連接。
[0268]CPU910通過在RAM930中展開并執(zhí)行存儲(chǔ)于R0M920和/或存儲(chǔ)部950的計(jì)算機(jī)程序,控制服務(wù)器900的各部分。此外,CPU910也作為代理生成部912、代理更新部914、發(fā)送接收部916而起作用。代理生成部912執(zhí)行后述的綜合圖像顯示處理,生成綜合圖像。代理生成部實(shí)現(xiàn)作為生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像的“代理生成部”的功能。代理更新部914執(zhí)行后述的綜合圖像更新處理,對綜合圖像進(jìn)行更新。發(fā)送接收部916在綜合圖像顯示處理以及綜合圖像更新處理中,與頭置式顯示器100c之間發(fā)送接收要求和/或綜合圖像。發(fā)送接收部916實(shí)現(xiàn)作為將綜合圖像向頭置式顯示器發(fā)送的“發(fā)送部”的功能。
[0269]通信接口 940包含無線通信接口、有線通信接口。無線通信接口包含未圖示的送接收電路,進(jìn)行經(jīng)由天線接收的電波的解調(diào)與數(shù)據(jù)的生成以及經(jīng)由天線發(fā)送的電波的生成與調(diào)制。有線通信接口經(jīng)由有線線纜而與其他的裝置連接。
[0270]存儲(chǔ)部950由ROM、RAM、DRAM、硬盤等構(gòu)成。存儲(chǔ)部950包含區(qū)域信息952、識(shí)別圖像存儲(chǔ)部954。區(qū)域信息952的詳細(xì)與圖3所示的第1實(shí)施方式同樣。識(shí)別圖像存儲(chǔ)部954是用于預(yù)先存儲(chǔ)在綜合圖像顯示處理中收集的外部裝置的識(shí)別圖像的存儲(chǔ)部。
[0271]D - 3.綜合圖像顯示處理:
[0272]第4實(shí)施方式中的綜合圖像顯示處理的順序與圖5所示的第1實(shí)施方式大致同樣。但是,分別將圖5的說明中的“頭置式顯示器100”更換為“服務(wù)器900”,將“生成部142”更換為“代理生成部912”,將“存儲(chǔ)部120”更換為“存儲(chǔ)部950”,將“區(qū)域信息122”更換為“區(qū)域信息952”,將“識(shí)別圖像存儲(chǔ)部124”更換為“識(shí)別圖像存儲(chǔ)部954”。此外,進(jìn)行以下的更換。
[0273].步驟S118:服務(wù)器900的代理生成部912經(jīng)由發(fā)送接收部916獲取頭置式顯示器100c的顯示畫面的圖像。
[0274]?步驟S128:服務(wù)器900的代理生成部912經(jīng)由發(fā)送接收部916將在步驟S126中生成的綜合圖像向頭置式顯示器100c發(fā)送。在接收了綜合圖像的頭置式顯示器100c,通過圖像處理部160進(jìn)行在圖2中說明的顯示處理。
[0275]D - 4.綜合圖像更新處理:
[0276]第4實(shí)施方式中的綜合圖像更新處理的順序與圖7所示的第1實(shí)施方式大致同樣。但是,但是,分別將圖5的說明中的“頭置式顯示器100”更換為“服務(wù)器900”,將“更新部144”更換為“代理更新部914”,將“存儲(chǔ)部120”更換為“存儲(chǔ)部950”,將“區(qū)域信息122”更換為“區(qū)域信息952”,將“識(shí)別圖像存儲(chǔ)部124”更換為“識(shí)別圖像存儲(chǔ)部954”。此夕卜,進(jìn)行以下的更換。
[0277].步驟S200:服務(wù)器900的代理更新部914經(jīng)由發(fā)送接收部916獲取頭置式顯示器100c的使用者所選擇的一個(gè)外部裝置的信息。在這里,所謂一個(gè)外部裝置的信息,指的是能夠?qū)υ撏獠垦b置進(jìn)行特定的信息(例如裝置名和/或網(wǎng)絡(luò)地址等)。
[0278].步驟S210:服務(wù)器900的代理更新部914經(jīng)由發(fā)送接收部916將步驟S208中的更新后的綜合圖像向頭置式顯示器100c發(fā)送。在接收了綜合圖像的頭置式顯示器100c中,通過圖像處理部160進(jìn)行在圖2中說明的顯示處理。
[0279]如以上所述,根據(jù)第4實(shí)施方式的綜合圖像顯示處理以及綜合圖像更新處理,能夠得到與第1實(shí)施方式同樣的效果。進(jìn)而根據(jù)第4實(shí)施方式,綜合圖像顯示處理與綜合圖像更新處理是服務(wù)器900執(zhí)行的,所以能夠降低頭置式顯示器100c中的處理負(fù)荷。另外,第4實(shí)施方式作為第1實(shí)施方式的變形而進(jìn)行說明,但利用服務(wù)器900的第4實(shí)施方式的形態(tài)也能夠適用于第2、3實(shí)施方式。另外,服務(wù)器900也可以進(jìn)而實(shí)施向頭置式顯示器100c發(fā)送的綜合圖像的壓縮和/或解析度的轉(zhuǎn)換。這樣一來,不但能夠進(jìn)一步減輕頭置式顯示器100c中的處理負(fù)荷,還能夠減輕服務(wù)器900與頭置式顯示器100c之間的無線通信量。
[0280]D - 5.附加的處理:
[0281]在第4實(shí)施方式中,也能夠適用上述的附加的處理1、2。
[0282]E.變形例:
[0283]在上述實(shí)施方式中,也可以將通過硬件實(shí)現(xiàn)的構(gòu)成的一部分置換為軟件,相反也可以將通過軟件實(shí)現(xiàn)的構(gòu)成的一部分置換為硬件。另外,也能夠進(jìn)行以下那樣的變形。
[0284].變形例1:
[0285]在上述實(shí)施方式中,對圖像顯示系統(tǒng)的構(gòu)成進(jìn)行了例示。但是,圖像顯示系統(tǒng)的構(gòu)成在不脫離本發(fā)明的要旨的范圍內(nèi)能夠任意地確定,例如,能夠進(jìn)行構(gòu)成圖像顯示系統(tǒng)的各裝置的追加.刪除.轉(zhuǎn)換等。另外,能夠進(jìn)行構(gòu)成圖像顯示系統(tǒng)的裝置的網(wǎng)絡(luò)構(gòu)成的變更。
[0286]例如,作為圖像顯示裝置,能夠代替頭置式顯示器而采用投影機(jī)、監(jiān)視器、電視機(jī)坐寸。
[0287]例如,作為上述實(shí)施方式中的外部裝置的1個(gè),也可以使用經(jīng)由互聯(lián)網(wǎng)INT的云服務(wù)器。在該情況下也一樣,生成部以及更新部通過進(jìn)行與上述第1?3實(shí)施方式同樣的處理,能夠得到與上述第1?3實(shí)施方式同樣的效果。
[0288].變形例2:
[0289]在上述實(shí)施方式中,對頭置式顯示器的構(gòu)成進(jìn)行了例示。但是,頭置式顯示器的構(gòu)成在不脫離本發(fā)明的要旨的范圍內(nèi)能夠任意地確定,例如,能夠進(jìn)行各構(gòu)成部的追加.刪除.轉(zhuǎn)換等。
[0290]與上述實(shí)施方式中的控制部和圖像顯示部相對的構(gòu)成要素的分配只是一例,能夠采用各種形態(tài)。例如,也可以設(shè)為以下那樣的形態(tài)。(i)在控制部搭載CPU和/或存儲(chǔ)器等處理功能、在圖像顯示部僅搭載顯示功能的形態(tài);(ii)在控制部與圖像顯示部雙方搭載CPU和/或存儲(chǔ)器等處理功能的形態(tài);(iii)將控制部與圖像顯示部一體化的形態(tài)(例如,在圖像顯示部包含控制部、作為眼鏡型的可穿戴計(jì)算機(jī)而起作用的形態(tài));(iv)代替控制部而使用智能手機(jī)和/或便攜型游戲機(jī)的形態(tài);(v)通過將控制部與圖像顯示部設(shè)為能夠無線通信并且無線供電的構(gòu)成而廢棄連接部(線)的形態(tài);(vi)從控制部廢棄觸摸板、在圖像顯示部設(shè)置觸摸板的形態(tài)。
[0291]在上述實(shí)施方式中,為了說明的方便,設(shè)為控制部具備發(fā)送部、圖像顯示部具備接收部。但是,上述實(shí)施方式的發(fā)送部以及接收部能夠都具備能夠雙方向通信的功能、作為發(fā)送接收部而起作用。另外,例如,圖5所示的控制部設(shè)為經(jīng)由有線的信號傳送路而與圖像顯示部連接。但是,控制部與圖像顯示部也可以通過經(jīng)由無線LAN和/或紅外線通信和/或Blu etooth(藍(lán)牙)等無線的信號傳送路的連接而連接。
[0292]例如,圖2所示的控制部、圖像顯示部的構(gòu)成能夠任意地變更。具體地說,例如,控制部除了上述的各種輸入設(shè)備(觸摸板、十字鍵、腳踏開關(guān)、手勢檢測、視線檢測、話筒),還能夠具備各種輸入設(shè)備(例如,操作用桿、鍵盤、鼠標(biāo)等)。另外,在上述實(shí)施方式中,作為電源使用二次電池,但作為電源并不限定于二次電池,能夠使用各種電池。例如,也可以使用一次電池、和/或燃料電池、太陽能電池、熱電池等。
[0293]例如,頭置式顯示器設(shè)為雙眼類型的透射型頭置式顯示器,但也可以設(shè)為單眼類型的頭置式顯示器。另外,也可以構(gòu)成為在使用者佩戴了頭置式顯示器的狀態(tài)下將外景的透射遮擋的非透射型頭置式顯示器。在上述實(shí)施方式中,將圖像顯示部設(shè)為眼鏡那樣佩戴的頭置式顯示器,但也可以設(shè)為例如采用帽子那樣佩戴的類型的圖像顯示部等其他的形狀的圖像顯示部的頭置式顯示器。另外,耳機(jī)可以采用掛耳型和/或頭帶型,也可以省略。進(jìn)而,例如,也可以構(gòu)成為搭載于汽車和/或飛機(jī)等車輛的抬頭顯示器(H UD,Head-UpDisplay)。此外,也可以構(gòu)成為內(nèi)藏于頭盔等身體防護(hù)具的頭置式顯示器。另外,也可以構(gòu)成為手持顯不器(Hand held display)。
[0294]圖19是表示變形例中的頭置式顯示器的外觀的構(gòu)成的說明圖。在圖19(A)的例子中,圖像顯示部20x代替右光學(xué)像顯示部26而具備右光學(xué)像顯示部26x,代替左光學(xué)像顯示部28而具備左光學(xué)像顯示部28x。右光學(xué)像顯示部26x以及左光學(xué)像顯示部28x形成得比第1實(shí)施方式的光學(xué)構(gòu)件小,被配置于頭置式顯示器的佩戴時(shí)的使用者的右眼以及左眼的斜上。在圖19(B)的例子中,圖像顯示部20y代替右光學(xué)像顯示部26而具備右光學(xué)像顯示部26y,代替左光學(xué)像顯示部28而具備左光學(xué)像顯示部28y。右光學(xué)像顯示部26y以及左光學(xué)像顯示部28y形成得比第1實(shí)施方式的光學(xué)構(gòu)件小,被配置于頭置式顯示器的佩戴時(shí)的使用者的右眼以及左眼的斜下。這樣,光學(xué)像顯示部配置于使用者的眼睛的附近便足夠。另外,形成光學(xué)像顯示部的光學(xué)構(gòu)件的大小也是任意的,也能夠設(shè)為光學(xué)像顯示部僅覆蓋使用者的眼睛的一部分的形態(tài)、換而言之光學(xué)像顯示部不完全覆蓋使用者的眼睛的形態(tài)的頭置式顯示器而實(shí)現(xiàn)。
[0295]例如,在上述實(shí)施方式中,顯示驅(qū)動(dòng)部設(shè)為使用背光、背光控制部、LCD、LCD控制部和投射光學(xué)系而構(gòu)成。但是,上述的形態(tài)只不過是例示。顯示驅(qū)動(dòng)部也可以與這些構(gòu)成部一起或代替這些構(gòu)成部,具備用于實(shí)現(xiàn)其他的方式的構(gòu)成部。例如,顯示驅(qū)動(dòng)部也可以設(shè)為具備有機(jī)EL(有機(jī)電致發(fā)光,Organic Electro-Luminescence)的顯示器、有機(jī)EL控制部、投射光學(xué)系的構(gòu)成。另外,例如,顯示驅(qū)動(dòng)部也能夠代替LCD而使用數(shù)字微型反射鏡設(shè)備等。另外,例如,也能夠?qū)す庖暰W(wǎng)膜投影型的頭部佩戴型顯示裝置適用本發(fā)明。
[0296]例如,記載了生成部、通知部、圖像處理部、顯示控制部、音聲處理部等各功能部通過CPU在RAM中展開并執(zhí)行存儲(chǔ)于ROM和/或硬盤的計(jì)算機(jī)程序而實(shí)現(xiàn)。但是,這些功能部也可以使用為了實(shí)現(xiàn)該功能而設(shè)計(jì)的ASIC(Applicat1n Specific Integrated Circuit:面向特定用途的集成電路)而構(gòu)成。
[0297].變形例3:
[0298]在上述實(shí)施方式中,表示了綜合圖像顯示處理的一例。但是,綜合圖像顯示處理的順序只不過是一例,能夠進(jìn)行各種變形。例如,也可以將一部分步驟省略,也可以追加進(jìn)而其他的步驟。另外,也可以變更所執(zhí)行的步驟的順序。
[0299]例如,生成部也可以與作為識(shí)別圖像的獲取源的外部裝置與頭置式顯示器之間的距離相應(yīng),動(dòng)態(tài)地變更縮略圖顯示區(qū)域B1?B6的大小。這樣一來,觀看了綜合圖像的使用者能夠通過縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)中的各圖像的大小,得知頭置式顯示器(圖像顯示裝置)與多個(gè)外部裝置之間的距離。
[0300]在上述實(shí)施方式中,生成部對于縮略圖顯示區(qū)域B1?B6(第1顯示區(qū)域)不進(jìn)行更新。但是,生成部也可以通過預(yù)定的觸發(fā)的產(chǎn)生而對縮略圖顯示區(qū)域B1?B6 (第1顯示區(qū)域)進(jìn)行更新。預(yù)定的觸發(fā)能夠任意地確定,例如,能夠設(shè)為由使用者進(jìn)行的要求操作的產(chǎn)生、和/或使用者的預(yù)定的工作的產(chǎn)生、和/或從上次的綜合圖像生成經(jīng)過預(yù)定時(shí)間、和/或從頭置式顯示器的0S和/或其他的應(yīng)用產(chǎn)生內(nèi)部性的要求等。這樣一來,生成部能夠限定于產(chǎn)生了預(yù)定的觸發(fā)的情況下對所述第1顯示區(qū)域進(jìn)行更新。因此,能夠降低頭置式顯示器(圖像顯示裝置)與外部裝置之間的通信量。
[0301]例如,在上述實(shí)施方式中說明的識(shí)別圖像以及綜合圖像假設(shè)為2維地表達(dá)的圖像。但是,圖像處理部也可以通過將右眼用圖像數(shù)據(jù)與左眼用圖像數(shù)據(jù)設(shè)為不同的數(shù)據(jù),而3維地表達(dá)識(shí)別圖像以及綜合圖像。在該情況下,例如,也可以與使用者與外部裝置之間的距離相應(yīng),對每個(gè)識(shí)別圖像附加視差。具體地說,也可以對使用者與外部裝置之間的距離較大的外部裝置的識(shí)別圖像,附加觀看為較遠(yuǎn)那樣的視差,對使用者與外部裝置之間的距離較小的外部裝置的識(shí)別圖像,附加觀看為較近那樣的視差。
[0302]在上述實(shí)施方式中,設(shè)為在控制部生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像并在圖像顯示部上顯示的構(gòu)成。但是,綜合圖像只要通過圖像顯示部顯示便足夠,不必一定在控制部“生成”綜合圖像。具體地說,例如,也可以在控制部單獨(dú)地生成表示第1顯示區(qū)域的圖像和表示第2顯示區(qū)域的圖像。然后,將所生成的表示第1顯示區(qū)域的圖像作為例如右眼用圖像數(shù)據(jù)而向圖像處理部發(fā)送。同樣,將所生成的表示第2顯示區(qū)域的圖像作為例如左眼用圖像數(shù)據(jù)而向圖像處理部發(fā)送。然后,通過在圖像顯示部合并顯示這些單獨(dú)的圖像,而顯示綜合圖像。
[0303]例如,生成部在存在超過縮略圖顯示區(qū)域B1?B6的個(gè)數(shù)的外部裝置的情況下、和/或指定有超過縮略圖顯示區(qū)域的個(gè)數(shù)的外部裝置的情況下,也可以以預(yù)定的基準(zhǔn),對顯示于縮略圖顯示區(qū)域的外部裝置(識(shí)別圖像)進(jìn)行選擇。所謂預(yù)定的基準(zhǔn),例如,能夠使用由使用者進(jìn)行選擇的頻度、和/或在縮略圖顯示區(qū)域追加有識(shí)別圖像的時(shí)間日期等。
[0304]當(dāng)在綜合圖像顯示處理中適用附加的處理1的情況下,生成部也可以在存儲(chǔ)部存儲(chǔ)有至少在過去使用者注意過的外部裝置的歷史記錄。在該情況下,生成部也可以使用所存儲(chǔ)的歷史記錄,對由使用者進(jìn)行的外部裝置的選擇進(jìn)行輔助。另外,生成部也可以將存儲(chǔ)于歷史記錄的外部裝置的識(shí)別圖像自動(dòng)地配置于縮略圖顯示區(qū)域B1?B6。
[0305]在第4實(shí)施方式的綜合圖像顯示處理中,服務(wù)器也可以預(yù)先獲取頭置式顯示器的顯示畫面的圖像、和/或外部裝置的顯示畫面的圖像。這樣一來,能夠削減服務(wù)器逐次獲取這些圖像的時(shí)間,所以能夠迅速地顯示綜合圖像。
[0306].變形例4:
[0307]在上述實(shí)施方式中,表示綜合圖像更新處理的一例。但是,綜合圖像更新處理的順序只不過是一例,能夠進(jìn)行各種變形。例如,也可以將一部分步驟省略,也可以追加進(jìn)而其他的步驟。另外,也可以變更所執(zhí)行的步驟的順序。
[0308]例如,在步驟S200中,也可以代替一個(gè)外部裝置的選擇操作的獲取,而獲取由頭置式顯示器的使用者選擇的一個(gè)縮略圖顯示區(qū)域(第1顯示區(qū)域)的起始坐標(biāo)、或由使用者選擇的一個(gè)縮略圖顯示區(qū)域(第1顯示區(qū)域)的識(shí)別符的任意一個(gè)。這樣也能夠得到與上述實(shí)施方式同樣的效果。
[0309]例如,在步驟S200中,也可以將使用者能夠選擇的外部裝置限定于連接于頭置式顯示器的多個(gè)外部裝置中滿足預(yù)定的條件的一部分外部裝置。在預(yù)定的條件中,例如,能夠使用外部裝置的識(shí)別圖像的信息量。根據(jù)該條件,識(shí)別圖像的信息量較多的PC和/或AV設(shè)備能夠成為步驟S200的選擇對象,但識(shí)別圖像的信息量較少的家電不成為步驟S200的選擇對象。
[0310]例如,綜合圖像更新處理也可以省略。另外,在該情況下,也可以經(jīng)由使用者對顯示于縮略圖顯示區(qū)域(第1顯示區(qū)域)的識(shí)別圖像進(jìn)行的操作(使用了視線和/或指尖的操作),操作外部裝置。
[0311]?變形例5:
[0312]在上述實(shí)施方式中,表示了區(qū)域信息的一例。上述區(qū)域信息只不過是一例,能夠進(jìn)行各種變更。例如,能夠進(jìn)行構(gòu)成要素的追加、刪除、變更。
[0313]圖20是表示變形例中的區(qū)域信息122x的一例的說明圖。區(qū)域信息122x與圖3的區(qū)域信息122同樣,具有長方形狀的區(qū)域(以后,也稱為“區(qū)域122”。),該區(qū)域具有與頭置式顯示器的顯示元件的縱橫比相同的縱橫比。區(qū)域122包含8個(gè)縮略圖顯示區(qū)域B1?B8和活動(dòng)顯示區(qū)域BG。活動(dòng)顯示區(qū)域BG,將區(qū)域122在鉛直方向以及水平方向上等分,配置于它們的左上端部。8個(gè)縮略圖顯示區(qū)域B1?B8被順序配置于將區(qū)域122在鉛直方向以及水平方向上等分的剩余的部分。使用這樣的區(qū)域信息122x也能夠得到與上述的各實(shí)施方式同樣的效果。
[0314]例如,區(qū)域信息設(shè)為包含1個(gè)活動(dòng)顯示區(qū)域,但也可以包含多個(gè)(2個(gè)以上)活動(dòng)顯示區(qū)域。例如,在圖3所示的區(qū)域信息122,也可以將區(qū)域122在水平方向上2等分,將上側(cè)設(shè)為第1活動(dòng)顯示區(qū)域,將下側(cè)設(shè)為第2活動(dòng)顯示區(qū)域。同樣,也可以將區(qū)域122在垂直方向上2等分,將左側(cè)設(shè)為第1活動(dòng)顯示區(qū)域,將右側(cè)設(shè)為第2活動(dòng)顯示區(qū)域。在該情況下,例如,在綜合圖像顯示處理中,也可以將使用者最初選擇的一個(gè)外部裝置的顯示圖像配置于第1活動(dòng)顯示區(qū)域、將接下來選擇的一個(gè)外部裝置的顯示圖像配置于第2活動(dòng)顯示區(qū)域。
[0315]例如,在存儲(chǔ)部,也可以存儲(chǔ)有多個(gè)不同的區(qū)域信息。在該情況下,也可以通過頭置式顯示器的使用者的喜好(設(shè)定)、使用者的視線的運(yùn)動(dòng)、使用者的頭部的運(yùn)動(dòng)、周圍的亮度等任意的條件,從多個(gè)不同的區(qū)域信息選擇在綜合圖像的生成中使用的一個(gè)區(qū)域信肩、Ο
[0316]?變形例6:
[0317]本發(fā)明并不限定于上述的實(shí)施方式和/或?qū)嵤├?、變形例,在不脫離其宗旨的范圍內(nèi)能夠以各種構(gòu)成實(shí)現(xiàn)。例如,與
【發(fā)明內(nèi)容】
的欄所記載的各形態(tài)中的技術(shù)特征相對應(yīng)的實(shí)施方式、實(shí)施例、變形例中的技術(shù)特征,為了解決上述的課題的一部分或全部、或者為了達(dá)成上述的效果的一部分或全部,能夠適當(dāng)進(jìn)行替換和/或組合。另外,其技術(shù)特征只要不是作為本說明書中所必須的而說明,能夠適當(dāng)刪除。
【權(quán)利要求】
1.一種圖像顯示裝置,其特征在于,具備: 生成部,其生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像,所述第1顯示區(qū)域一覽顯示用于使連接于所述圖像顯示裝置的多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和 圖像顯示部,其使所述圖像顯示裝置的使用者觀看所述綜合圖像。
2.如權(quán)利要求1所記載的圖像顯示裝置,其特征在于,進(jìn)而具備: 獲取部,其從所述一個(gè)外部裝置獲取所述顯示圖像;和 更新部,其使用所述所獲取的顯示圖像,對所述綜合圖像的所述第2顯示區(qū)域進(jìn)行更新。
3.如權(quán)利要求1或權(quán)利要求2所記載的圖像顯示裝置,其特征在于: 在所述識(shí)別圖像中,包含所述外部裝置的一個(gè)時(shí)間點(diǎn)的顯示圖像、表示用于識(shí)別所述外部裝置的信息的圖像和表示向所述外部裝置分配的符號的圖像中的至少任意一個(gè)。
4.如權(quán)利要求1至權(quán)利要求3中的任意一項(xiàng)所記載的圖像顯示裝置,其特征在于: 進(jìn)而具備外部裝置特定部,其從所述多個(gè)外部裝置中對所述使用者注意過的外部裝置進(jìn)行特定; 所述生成部將所述多個(gè)外部裝置中的至少在過去由所述外部裝置特定部特定的所述外部裝置的所述識(shí)別圖像顯示于所述第1顯示區(qū)域。
5.如權(quán)利要求2或從屬于權(quán)利要求2的權(quán)利要求3至權(quán)利要求4中的任意一項(xiàng)所記載的圖像顯示裝置,其特征在于: 進(jìn)而具備外部裝置特定部,其從所述多個(gè)外部裝置中對所述使用者注意過的外部裝置進(jìn)行特定; 所述獲取部從由所述外部裝置特定部特定的所述外部裝置獲取所述顯示圖像。
6.如權(quán)利要求1至權(quán)利要求5中的任意一項(xiàng)所記載的圖像顯示裝置,其特征在于: 進(jìn)而具備距離獲取部,其分別獲取所述圖像顯示裝置與所述多個(gè)外部裝置之間的距離; 所述生成部與所述所獲取的各距離相應(yīng),確定所述第1顯示區(qū)域中的所述多個(gè)識(shí)別圖像的顯示順序和所述第1顯示區(qū)域中的所述識(shí)別圖像的大小中的至少一方。
7.如權(quán)利要求1至權(quán)利要求6中的任意一項(xiàng)所記載的圖像顯示裝置,其特征在于: 所述生成部對所述第1顯示區(qū)域進(jìn)行更新。
8.如權(quán)利要求1至權(quán)利要求7中的任意一項(xiàng)所記載的圖像顯示裝置,其特征在于: 所述圖像顯示部進(jìn)而具備生成表示所述綜合圖像的圖像光的顯示驅(qū)動(dòng)部,通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述綜合圖像。
9.如權(quán)利要求8所記載的圖像顯示裝置,其特征在于: 所述生成部將所述第2顯示區(qū)域的縱橫比設(shè)為能夠通過所述顯示驅(qū)動(dòng)部生成所述圖像光的區(qū)域的縱橫比,生成在所述第2顯示區(qū)域的外側(cè)配置了所述第1顯示區(qū)域的所述綜合圖像; 所述圖像顯示部, 在沒有由所述使用者進(jìn)行的操作的情況下,對所述顯示驅(qū)動(dòng)部,使其生成與所述綜合圖像的所述第2顯示區(qū)域相當(dāng)?shù)牟糠值乃鰣D像光; 在具有由所述使用者進(jìn)行的操作的情況下,對所述顯示驅(qū)動(dòng)部,使其生成至少與所述綜合圖像的所述第1顯示區(qū)域相當(dāng)?shù)牟糠值乃鰣D像光。
10.如權(quán)利要求8或權(quán)利要求9所記載的圖像顯示裝置,其特征在于: 所述圖像顯示部,使所述顯示驅(qū)動(dòng)部生成表示用于向所述一個(gè)外部裝置附加的附加提示用的信息即用于向所述使用者提供增強(qiáng)現(xiàn)實(shí)感的附加提示用的信息的圖像光,通過將所述所生成的圖像光向所述使用者的眼睛射出而使所述使用者觀看所述附加提示用的信息。
11.一種控制圖像顯示裝置的方法,其特征在于,具備: (a)生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像的工序,所述第1顯示區(qū)域一覽顯示用于使連接于所述圖像顯示裝置的多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示; (b)使所述圖像顯示裝置的使用者觀看所述綜合圖像的工序。
12.—種計(jì)算機(jī)程序,其特征在于,用于在計(jì)算機(jī)中實(shí)現(xiàn)下述的功能: 生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像的功能,所述第1顯示區(qū)域一覽顯示用于使連接于所述圖像顯示裝置的多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和 使所述圖像顯示裝置的使用者觀看所述綜合圖像的功能。
13.一種圖像顯示系統(tǒng),其特征在于: 具備: 信息處理裝置; 連接于所述信息處理裝置的圖像顯示裝置;和 連接于所述信息處理裝置的多個(gè)外部裝置; 所述信息處理裝置具備: 代理生成部,其生成包含第1顯示區(qū)域與第2顯示區(qū)域的綜合圖像,所述第1顯示區(qū)域一覽顯示用于所述多個(gè)外部裝置相互識(shí)別的多個(gè)識(shí)別圖像中的至少一部分所述識(shí)別圖像,所述第2顯示區(qū)域?qū)ψ鳛閺乃龆鄠€(gè)外部裝置中選擇的一個(gè)外部裝置所顯示的圖像的顯示圖像進(jìn)行顯示;和 發(fā)送部,其將所述綜合圖像向所述信息處理裝置發(fā)送; 所述圖像顯示裝置具備圖像顯示部,其使所述圖像顯示裝置的使用者觀看從所述信息處理裝置接收的所述綜合圖像。
【文檔編號】H04N21/472GK104469464SQ201410498313
【公開日】2015年3月25日 申請日期:2014年9月25日 優(yōu)先權(quán)日:2013年9月25日
【發(fā)明者】木村總志 申請人:精工愛普生株式會(huì)社