移動終端及其控制方法
【專利摘要】本發明涉及一種移動終端及其控制方法。移動終端包括:終端主體;顯示單元;無線通信單元,該無線通信單元被配置成被無線地連接到車載視頻顯示設備;以及控制器,該控制器被配置成檢測駕駛員的眼睛從被包括在車載視頻顯示設備中的第一顯示器到第二顯示器的方向變化,并且響應于檢測到的駕駛員的眼睛從第一顯示器到第二顯示器的方向變化,控制第二顯示器顯示在第一顯示器上顯示的第一屏幕的至少一部分。
【專利說明】移動終端及其控制方法
【技術領域】
[0001] 本發明涉及一種移動終端及其控制方法,并且更加具體地,涉及一種可以被連接 到被放置在車輛中的視頻顯示設備的移動終端,及其控制方法。
【背景技術】
[0002] 通常,終端可以被劃分成移動終端和固定終端。另外,移動終端可以被劃分成手持 式終端和車載終端。
[0003] 隨著這樣的功能變成更加多樣化,移動終端能夠支持諸如捕獲圖像或者視頻、再 現音樂或者視頻文件、玩游戲、接收廣播信號等等的更加復雜的功能。通過全面地和共同地 實現這樣的功能,移動終端可以以多媒體播放器或者裝置的形式體現。同時,終端可以被連 接到被布置在車輛中的視頻顯示設備(在下文中,被稱為"車載視頻顯示設備")以顯示內 容。在此,車載視頻顯示設備可以包括被安裝在固定型設備或者可拆卸設備并且具有為了 駕駛員的方便通過相機成像車輛的外部、引導車輛到目的地、并且輸出允許用戶觀看和傾 聽的圖像和聲音的功能的任何設備中。
[0004] 車載視頻顯示設備通常被附接到被定位在駕駛員的座位的前面的儀表盤,并且其 可以被指定為例如頭部單元(H/υ)。以這樣的方式,隨著車載視頻顯示設備已經被數字化 并且移動終端的功能已經被多樣化,在頭部單元和移動終端之間的服務交互已經越來越發 達。例如,可以在車輛內的頭部單元的顯示器中以相同的方式顯示移動終端的導航應用或 者服務屏幕,或者通過頭部單元可以操縱移動終端。
[0005] 然而,為了安全駕駛,當車輛在駕駛時通過頭部單元和移動終端對控制如在上面 所提及的應用或者服務屏幕的操縱被限制。
【發明內容】
[0006] 本發明的方面是為了提供一種能夠在沒有干擾駕駛的情況下根據駕駛員的眼睛 的方向控制被放置在車輛中的視頻顯示設備上顯示的屏幕的輸出的移動終端,及其控制方 法。
[0007] 本發明的方面也是為了提供一種能夠將在駕駛員的眼睛被固定到的顯示器上顯 示的視頻輸出到車輛內的不同的視頻顯示設備以允許同伴乘客共享駕駛員正在觀看的視 頻的移動終端,及其控制方法。
[0008] 根據本發明的一個實施例,提供一種移動終端,包括:終端主體;無線通信單元, 該無線通信單元被連接到車載視頻顯示設備;用戶跟蹤單元,該用戶跟蹤單元被配置成基 于基于被連接的車載視頻顯示設備的第一顯示器捕獲到的駕駛員的圖像和基于被連接的 車載視頻顯示設備的第二顯示器捕獲的駕駛員的圖像檢測駕駛員的眼睛的方向;和控制 器,該控制器被配置成響應于檢測到的駕駛員的視線從第一顯示器到第二顯示器的移動, 控制無線通信單元在第二顯示器的區域中顯示在第一顯示器上顯示的第一屏幕上的至少 一部分。
[0009] 在本發明的實施例中,第一和第二顯示器可以連接可拆卸地布置在車輛中的多個 相機,并且多個相機可以同時獲得基于顯示器中的每一個在預定范圍內存在的駕駛員的圖 像以及車輛的外部圖像。
[0010] 在本發明的實施例中,控制器可以提供控制以提取在第一屏幕中駕駛員的眼睛被 固定到的部分屏幕,并且在第二顯示器的區域中顯示被提取的部分屏幕。
[0011] 在本發明的實施例中,響應于檢測到的駕駛員的眼睛從第一顯示器到第二顯示器 的移動,控制器可以從車載視頻顯示設備請求在第一顯示器上顯示的第一屏幕的實時傳 輸,并且控制無線通信單元在第二顯示器的區域中實時顯示根據請求接收到的第一屏幕。
[0012] 在本發明的實施例中,響應于檢測到的駕駛員的眼睛從第二顯示器到第一顯示器 的移動,控制器可以提供控制使得被輸出到第二顯示器的區域的第一屏幕消失并且在第二 顯示器上顯示的第二屏幕的至少一部分被輸出到第一顯示器的區域。
[0013] 在本發明的實施例中,響應于檢測到的駕駛員的眼睛從第一顯示器到終端主體的 顯示單元的移動,控制器可以提供控制以將被輸出到第一顯示器的第一屏幕的至少一部分 輸出到駕駛員的眼睛被固定到的顯示單元的區域。
[0014] 在本發明的實施例中,當車輛運行停止信號被輸入并且駕駛員的眼睛被移動到顯 示單元時,控制器可以提供控制使得第一屏幕的至少一部分被輸出到顯示單元的區域。
[0015] 在本發明的實施例中,當被包括在通過車輛內的前相機獲得的圖像中的信號燈的 操作狀態被視為指示"停止"時,控制器可以確定車輛運行停止信號已經被輸入。
[0016] 在本發明的實施例中,當在通過車輛內的前相機獲得的圖像中包括的信號燈的操 作狀態從"停止"變成"操作"時,控制器可以確定車輛運行恢復信號已經被輸入,并且將報 警通知輸出到顯示單元。
[0017] 在本發明的實施例中,當感測到在預設方向上被施加到被輸出到顯示單元的第一 屏幕的第一輸入時,控制器可以控制第一屏幕的輸出范圍被改變以對應于第一輸入。
[0018] 在本發明的實施例中,當感測到在預設方向上被施加到被輸出到顯示單元的第一 屏幕的第二輸入時,控制器可以提供控制使得在被連接的車載視頻顯示設備的不同顯示器 上顯示的屏幕和第一屏幕被一起輸出到顯示單元。
[0019] 在本發明的實施例中,當在預設的時間段內沒有感測到駕駛員的眼睛到顯示單元 時,控制器可以提供控制使得第一屏幕從顯示單元消失,并且將用于再次輸出第一屏幕的 指示符圖標輸出到顯示單元的區域。
[0020] 根據本發明的另一實施例,提供一種移動終端,包括:終端主體;無線通信單元, 該無線通信單元被連接到第一和第二視頻顯示設備;用戶跟蹤單元,該用戶跟蹤單元被配 置成基于被連接的第一視頻顯示設備和終端主體的顯示單元感測在預定范圍內的駕駛員 的眼睛的方向;以及控制器;該控制器被配置成當視頻共享模式被執行時,控制無線通信 單元將在第一視頻顯示設備的顯示器上顯示的第一圖像和在顯示單元上顯示的第二圖像 當中的與檢測到的駕駛員的眼睛的方向相對應的圖像傳送到被連接的第二視頻顯示設備。
[0021] 在本發明的實施例中,當檢測到的駕駛員的眼睛被固定到第二圖像時,控制器可 以傳送詢問是否顯示第二圖像到第二視頻顯示設備的消息,并且當接收到相對于被傳送的 消息的響應信號時,控制器可以提供控制以將第二圖像實時傳送到第二視頻顯示設備。
[0022] 在本發明的實施例中,控制器可以從第二視頻顯示設備接收通過在被傳送的圖像 中包括預定輸入獲得的被更新的圖像,并且當接收到視頻共享接受信號時,控制器可以控 制無線通信單元將接收到的更新圖像傳送到第一視頻顯示設備。
[0023] 在本發明的實施例中,當視頻共享模式被執行時,控制器可以接收從第二視頻顯 示設備傳送的內容圖像,并且當從第一視頻顯示設備接收到視頻共享接受信號時,控制器 可以控制無線通信單元在第一視頻顯示設備的顯示器上顯示與內容圖像相對應的圖像對 象。
[0024] 在本發明的實施例中,與內容圖像相對應的圖像對象可以包括內容圖像的代表性 圖像和第二視頻顯示設備的用戶圖像中的至少一個。
[0025] 在本發明的實施例中,在其中與內容圖像相對應的圖像對象被顯示在第一視頻顯 示設備的顯示器上的狀態下,當在預設的時間段內駕駛員的眼睛被固定到圖像對象時,控 制器可以控制無線通信單元將圖像對象變成內容圖像并且顯示該內容圖像。
[0026] 在本發明的實施例中,在其中與內容圖像相對應的圖像對象被顯示在第一視頻顯 示設備的顯示器上的狀態下,當鎖定功能被激活時,控制器可以控制無線通信單元在第一 視頻顯示設備的顯示器上連續地顯示內容圖像。
[0027] 在本發明的實施例中,在其中與內容圖像相對應的圖像對象被顯示在第一視頻顯 示設備的顯示器上的狀態下,當從第二視頻顯示設備接收到用于共享新圖像的請求時,控 制器可以控制無線通信單元將與用于共享新圖像的請求相對應的通知消息輸出到區分于 其中顯示內容圖像的區域的區域。
[0028] 根據在下文中給出的詳細描述,本發明的應用性的范圍將變得更加顯然。然而,應 理解的是,僅通過說明給出指示本發明的優選實施例的特定示例和詳細描述,因為根據詳 細描述,對本領域的技術人員來說本發明的精神和范圍內的各種變化和修改將變得更加顯 然。
【專利附圖】
【附圖說明】
[0029] 根據在下文中給出的詳細描述和僅通過圖示給出的附圖將會更加全面地理解本 發明,并且因此不是對本發明的限制,并且其中:
[0030] 圖1是圖示根據本發明的實施例的移動終端和被連接到移動終端的車載視頻顯 示設備的視圖。
[0031] 圖2A和圖2B是在概念上圖示根據本發明的實施例的移動終端和被連接到移動終 端的車載視頻顯示設備如何交互的視圖。
[0032] 圖3是圖示根據本發明的實施例的移動終端的配置的視圖。
[0033] 圖4是圖示根據本發明的實施例的被連接到移動終端的車載視頻顯示設備的配 置的框圖。
[0034] 圖5和圖6是圖示根據本發明的實施例的移動終端的控制方法的流程圖。
[0035] 圖7A至圖7C是圖示根據本發明的實施例的移動終端根據駕駛員的眼睛的方向在 第二顯示器上顯示在車載視頻顯示設備的第一顯示器上顯示的屏幕的控制方法的概念視 圖。
[0036] 圖8A和圖8B是圖示根據本發明的實施例的移動終端在第二顯示器上僅顯示在駕 駛員的眼睛被固定到的范圍內的車載視頻顯示設備的第一顯示器上顯示的屏幕的一部分 的控制方法的概念視圖。
[0037] 圖9是圖示根據本發明的實施例的其中根據駕駛員的眼睛的方向改變在車載視 頻顯示設備的顯示器上顯示的前一個屏幕的位置和大小的示例的視圖。
[0038] 圖10A至圖10D是圖示根據本發明的實施例的在其中車輛被停止運行的狀態下根 據駕駛員的眼睛的方向在車載視頻顯示設備上顯示的屏幕被顯示在車載視頻顯示設備被 連接到的移動終端的屏幕上的示例的視圖。
[0039] 圖11是圖示根據本發明的實施例的在其中車輛被停止運行的狀態下移動終端允 許車輛內的駕駛員或者同伴乘客檢查移動終端中的與先前的駕駛視角相對應的屏幕的控 制方法的概念視圖。
[0040] 圖12是圖示根據本發明的另一實施例的移動終端的控制方法的流程圖。
[0041] 圖13A和圖13B是圖示圖12的流程圖的概念視圖。
[0042] 圖14是圖示根據本發明的實施例的移動終端的控制方法的流程圖。
[0043] 圖15A至圖15E是圖示圖14的流程圖的概念視圖。
[0044] 圖16是圖示根據本發明的實施例的移動終端允許同伴乘客共享被提供的視頻的 控制方法的流程圖。
[0045] 圖17A至圖17C是圖示圖16的流程圖的概念視圖。
[0046] 圖18A和圖18B是圖示根據本發明的實施例的用于當存在共享來自多個視頻顯示 設備的視頻的請求時在車載視頻顯示設備中顯示視頻的方法的概念視圖。
[0047] 圖19A至圖19C是圖示根據本發明的實施例的當存在共享來自相同的視頻顯示設 備的新視頻的請求時在車載視頻顯示設備中顯示視頻的方法的概念視圖。
【具體實施方式】
[0048] 在此使用的術語僅用于描述特定實施例,并且不是旨在限制本發明。除非另有特 定地定義,在此使用的所有術語具有與本發明所屬的本領域普通技術人員通常理解的相同 的意義,并且不應被解釋為具有太寬的意義或者具有太窄的意義。如果在此使用的技術術 語是不能夠正確地表達本發明的精神的錯誤術語,則它們應被本領域技術人員正確理解的 技術術語替換。在此使用的普通術語應根據字典中的定義、或者上下文來解釋,并且不應被 解釋為太窄的意義。
[0049] 如在此所使用的,單數形式"一個"、"一個"以及"這個"旨在也包括復數形式,除非 另有上下文清楚地規定。將會理解的是,當在此使用的術語"包含"、"包含"、"包括"以及/ 或者"包括",指定存在被陳述的特征、整數、步驟、操作、元件、以及/或者組件,但是沒有排 除一個或者多個其它的特征、步驟、操作、元件、組件以及/或者其組合的存在或者添加。
[0050] 將會理解的是,盡管術語第一、第二等等可以在此被使用以描述各種元件,但是通 過這些術語不應限制這些元件。這些元件僅被用于區分一個元件與另一個元件。例如,第 一元件可以被命名為第二元件。另外,同樣地,在沒有脫離本發明的范圍的情況下,第二元 件可以被命名為第一元件。
[0051] 現在將會參考附圖描述本發明的實施例,其中貫穿整個附圖相同的附圖標記指代 相同的元件。
[0052] 圖1是圖示根據本發明的實施例的移動終端和被連接到移動終端的車載視頻顯 示設備的視圖。在本發明中,在本發明中描述的移動終端100可以包括便攜式電話、智能電 話、膝上型計算機、數字廣播終端、個人數字助理(PDA)、便攜式多媒體播放器(PMP)、平板 PC、平板電腦、超極本等等。
[0053] 而且,如在圖1中所圖示,根據車輛的操作基于各種駕駛視角,通過使用抬頭顯示 器(HUD)或者投影儀,在反光鏡(例如,側鏡201b和201c)或者后視鏡201d上,在導航裝 置的顯不器201e上,在車輛的儀表板上、或者在車輛的前窗口 201a上,在本發明中描述的 車載視頻顯示設備200可以顯示從車載視頻顯示設備200被連接到的移動終端100傳送的 屏幕。即,車載視頻顯示設備200的顯示單元可以被設置在與車載視頻顯示設備200的主 體分開的位置中或者可以根據如在下文中描述的駕駛視角被設置多個。
[0054] 而且,如在圖1中所圖示,除了車載視頻顯示設備200之外,被放置在車輛內的頭 戴式顯示器(HMD)300a或者諸如筆記本計算機的不同的移動終端300b等等也可以被提供 作為其它的車載視頻顯示設備。
[0055] 而且,可以經由移動終端100連接車載視頻顯示設備200和車載視頻顯示設備 300a和300b以交換車輛的外部情形(例如,盲點(blind spot)中的對象的出現等等)、 車輛的內部狀態信息(例如,剎車操作信號)、以及用于提供信息或者提供娛樂效果的內容 (例如,地圖信息、從網絡服務器接收到的信息等等),從而像單個車輛系統一樣操作。
[0056] 車載視頻顯示設備200、300a、以及300b可以通過移動終端100被連接到被定位在 后座中的顯示器以執行通信。而且,車載視頻顯示設備200、300a、以及300b可以被連接到 單個移動終端或者多個移動終端。
[0057] 同時,車載視頻顯示設備200、300a、以及300b可以通過諸如局域網(LAN)、廣域網 (WAN)等等的有線/無線通信網絡被連接到提供交通信息和各種數據(例如,程序、執行文 件等)的信息提供中心等等。而且,車輛指的是為了諸如普通車、公共汽車、火車、輪船、飛 機等等的人或事物或者對象的運輸的目的通過使用機械或者電子設備實現的各種運輸工 具或者載體。
[0058] 在下文中,為了描述目的,將會描述作為示例的移動終端100和被連接到移動終 端100的車載視頻顯示設備200。因此,本發明也可以以相同的方式應用于其它的車載視頻 顯示設備300a和300b。
[0059] 參考圖1,移動終端100可以以有線方式或者無線地連接到車載視頻顯示設備200 以接收被顯示在車載視頻顯示設備200上的屏幕,處理接收到的屏幕,并且將被處理的屏 幕傳送到不同的視頻顯示設備或者不同的顯示器。而且,移動終端100可以通過接口將在 移動終端100中執行的應用的執行結果(例如,屏幕圖像或者聲音)或者關于車輛的目的 地或其駕駛路徑的信息傳送到車載視頻顯示設備200。
[0060] 在此,移動終端100可以被定位在車輛內或者可以被定位在其中無線連接是可用 的范圍內的車輛的外部。
[0061] 而且,車載視頻顯示設備200可以以有線方式或者無線地連接到至少一個移動終 端100以接收從移動終端100傳送的關于車輛的目的地或者駕駛路徑的屏幕或者聲音或者 信息并且將其輸出。以這樣的方式,其中移動終端100被連接到被定位在車輛中的車載視 頻顯示設備200的互連狀態可以被稱為"連接車"。
[0062] 在連接車的狀態下,移動終端100可以通過接口將被顯示在移動終端100上的屏 幕或者聲音或者被顯示在不同的視頻顯示設備300a和300b上的屏幕傳送到車載視頻顯示 設備200。在此,例如,用于屏幕傳輸的接口的機制可以是支持諸如無線保真(Wi-Fi)收發 器、藍牙收發器等等的無線通信的機制,或者支持諸如通用串行總線(USB)終端的有線通 /[目的裝置等等。
[0063] 而且,車載視頻顯示設備200可以通過被設置在車輛內的相機,例如,在黑匣子內 的前相機或者前相機獲得車輛的外部圖像,并且將獲得的外部圖像傳送到被連接的移動終 端100。然后,移動終端可以分析捕獲到的圖像以識別駕駛員的面部的方向和/或駕駛員的 瞳孔的方向。
[0064] 因此,當車輛在運行時移動終端100可以檢測駕駛員的視線中的變化。移動終端 100可以根據檢測到的駕駛員的視線中的變化執行至少一個相對應的功能。例如,當朝著前 側的駕駛員的視線被轉向左側視鏡時,移動終端100可以提供控制以實時地接收如在下文 中詳細地描述的前側中捕獲的車輛的外部圖像,并且將其顯示在左側視鏡的一側上。
[0065] 而且,車載視頻顯示設備200可以通過接口從車輛的駕駛員或者同伴乘客中接收 特定的命令,并且將接收到的特定命令傳送到被連接的移動終端100。例如,當駕駛員通過 觸摸或者按壓被設置在車載視頻顯示設備200的屏幕中的觸摸板或者鍵盤輸入特定的命 令時,車載視頻顯示設備200可以感測輸入已經被施加到的點的位置,并且將關于感測到 的位置的信息傳送到被連接的移動終端100。
[0066] 然后,移動終端100可以確定在觸摸輸入被施加到的點中觸摸甚至已經出現,并 且執行與被產生的事件相對應的操作。即,車輛的駕駛員或者同伴乘客可以通過使用被設 置在車載視頻顯示設備200中的觸摸板、鍵盤等等控制移動終端100的操作。
[0067] 而且,在連接車的狀態中,車輛的同伴乘客可以執行被安裝在移動終端100中的 道路引導應用(或者撥號盤、電話本、電子郵件、視頻回放應用等等),并且允許移動終端 1〇〇將被執行的道路引導應用的圖像傳送到車載視頻顯示設備200,使得被執行的道路引 導應用的圖像可以被顯示在車載視頻顯示設備200中。
[0068] 因此,駕駛員可以在車載視頻顯示設備200的大屏幕中,替代移動終端100的小屏 幕觀看道路引導應用的執行圖像。而且,駕駛員可以通過被設置在車輛中的揚聲器,替代移 動終端100的揚聲器傾聽道路引導信息。
[0069] 同時,駕駛員可以戴上圖1中圖示的頭戴式顯示器(HMD)300a并且當HMD被連接 到移動終端100時,要被顯示在車載視頻顯示設備200的顯示器201a、201b、201c、201d以 及201e上的屏幕可以被顯示在佩戴HMD300a的駕駛員的雙眼的前面。
[0070] 而且,當通過使用在圖1中圖示的不同的移動終端300b車輛的同伴乘客被連接到 移動終端100時,要被顯示在車載視頻顯示設備200的顯示器201a、201b、201c、201d以及 201e上的屏幕和/或車輛的附加信息可以被顯示在不同的移動終端300b的顯示器上。
[0071] 而且,車載視頻顯示設備200和被連接到其的移動終端100可以基于單獨的協議 交換另外要求的信息。例如,車載視頻顯示設備200可以將諸如車輛運行信息、速度信息、 燃料信息等等的車輛狀態信息提供給移動終端1〇〇。而且,被安裝在移動終端1〇〇中的一些 應用可以通過使用單獨的協議使用從車載視頻顯示設備200接收到的車輛狀態信息。這樣 的應用可以向車載視頻顯示設備200提供關于應用類型(例如,道路引導、多媒體、游戲等 等)、圖形用戶界面(GUI)類型(例如,地圖、視頻、菜單等等)、應用狀態(例如,當在前景 中或者在背景中執行應用時)等等的信息。
[0072] 圖2A和圖2B是根據本發明的實施例的在概念上圖示移動終端和被連接到移動終 端的車載視頻顯示設備如何交互的視圖。如在圖2A中所圖示,根據本發明的實施例在車輛 中被相互連接的移動終端100和車載視頻顯示設備200被提供。
[0073] 移動終端100可以無線地連接到車載視頻顯示設備200并且將圖像和聲音中的至 少一個傳送到車載視頻顯示設備200。車載視頻顯示設備200可以以固定的方式被安裝在 車輛中,并且被無線地連接到移動終端100以從移動終端100接收屏幕圖像和聲音中的至 少一個。而且,車載視頻顯示設備200可以輸出從移動終端100接收到的圖像和聲音中的 至少一個。
[0074] 車載視頻顯示設備200可以從用戶接收輸入,并且將接收到的輸入傳送到移動終 端100。例如,當用戶通過被設置在車載視頻顯示設備200中的觸摸屏施加觸摸輸入時,車 載視頻顯示設備200可以識別在屏幕圖像中觸摸輸入被施加到的點的位置,并且將關于被 識別的位置的信息傳送到移動終端100。移動終端100確定在觸摸輸入被施加到的點中觸 摸事件已經發生,并且執行與被產生的觸摸事件相對應的操作。即,用戶可以通過使用被設 置在車載視頻顯示設備200中的觸摸屏、硬鍵等等控制移動終端100的操作。
[0075] 在其中應用視頻傳輸系統的示例中,當用戶執行被安裝在移動終端100中的道路 引導應用(或者撥號盤、電話本、電子郵件、視頻回放應用等等)時,移動終端100將被執行 的道路引導應用的圖像傳送到車載視頻顯示設備200使得車載視頻顯示設備200可以顯示 執行的道路引導應用的圖像。
[0076] 用戶可以在車載視頻顯示設備200的大屏幕中,替代移動終端100的小屏幕觀看 被執行的道路引導應用的圖像。而且,用戶可以通過被設置在車輛中的揚聲器,替代移動終 端100的揚聲器,傾聽道路引導聲音。而且,當用戶通過使用被設置在車載視頻顯示設備 200中的觸摸屏或者硬鍵選擇與道路引導有關的菜單時,移動終端100可以將執行關于相 對應的菜單的操作。而且,移動終端100可以將執行關于相對應的菜單的操作的結果傳送 到車載視頻顯示設備200以便被輸出。
[0077] 可以通過使用諸如藍牙?等等的近場通信標準、諸如Wi-Fi等等的無線互聯網標 準、諸如USB的外部設備接口標準等等,可以連接移動終端100和車載視頻顯示設備200。
[0078] 而且,根據客戶的請求提供服務的服務器應用可以被安裝在移動終端100中,并 且可以被連接到由服務器提供的服務的客戶端應用可以被安裝在車載視頻顯示設備200 中。
[0079] 移動終端的服務器應用可以捕獲移動終端100的屏幕,不論移動終端的應用類型 如何,并且將捕獲到的應用傳送到車載視頻顯示設備200的客戶端應用。而且,基于來自客 戶端應用的關于在車載視頻顯示設備200中發生的事件的信息服務器應用可以控制移動 終端100的操作。
[0080] 例如,車載視頻顯示設備200可以使用提供相對于圖形用戶界面(⑶I)的遠程訪 問的遠程幀緩沖器(RFB)協議根據虛擬網絡計算(VNC)方案遠程地控制移動終端100。根 據VNC方案,當移動終端100通過網絡將被更新的屏幕遞送到車載視頻顯示設備200時,在 車載視頻顯示設備200中產生的輸入事件可以被傳送到移動終端100。
[0081] 而且,例如,根據定義可以通過藍牙連接從第一裝置流式傳送到第二裝置的音頻 信號(立體聲或者單聲道信號)的聲音質量的高級音頻分布配置文件(A2DP),特別地,關于 藍牙耳機,特別地,被應用于車輛免提工具包的免提等等的耳機配置文件(HSP),移動終端 100可以將聲音傳送到車載視頻顯示設備200、耳機、免提等等。
[0082] 同時,基于單獨的協議移動終端100和車載視頻顯示設備200可以交換附加的信 息。例如,車載視頻顯示設備200可以將諸如車輛運行信息、速度信息、燃料信息等等的車 輛狀態信息提供給移動終端100。
[0083] 被安裝在移動終端100中的一些應用可以通過使用單獨的協議使用從車載視頻 顯示設備200接收到的車輛狀態信息。這樣的應用可以將關于應用類型(例如,道路引導、 多媒體、游戲等等)、圖形用戶界面(GUI)類型(例如,地圖、視頻、菜單等等)、應用狀態(例 如,當在前景中或者在背景中執行應用時)等等的信息提供給車載視頻顯示設備200。
[0084] 隨后,參考圖2B,根據本發明的實施例被連接到移動終端100的車載視頻顯示設 備200可以是例如,被定位在車輛的前座中的抬頭顯示器(HUDUOOoHUD 200可以顯示在被 設置在其主體中的顯示器中的圖像或者通過儀表板上的投影儀、前窗口等等投射的圖像。 而且,車載視頻顯示設備200可以是,例如,被定位在車輛的后座中的顯示器300c或者可以 是車輛的其它同伴乘客的筆記本計算機等等的終端300b。而且,車載視頻顯示設備200可 以被連接到單個外部電子設備或者多個外部電子設備。
[0085] 同時,車載視頻顯示設備200可以通過諸如局域網(LAN)、廣域網(WAN)的有線/ 無線通信網絡被連接到提供交通信息和各種數據(例如,程序、執行文件、交通信息等等) 的系統提供中心等等。
[0086] 圖3是圖示根據本發明的實施例的移動終端的配置的視圖。如在圖3中所圖示, 移動終端100可以包括無線通信單元110、用戶跟蹤單元120、用戶輸入單元130、感測單元 140、輸出單元150、存儲器160、接口單元170、控制器180、以及電源單元190等等。圖3示 出具有各種組件的移動終端1〇〇,但是不要求實現被圖示的所有組件。可以替選地實現更多 或者更少的組件。
[0087] 無線通信單元110通常包括允許移動終端100和無線通信系統或者移動終端所位 于的網絡之間進行無線電通信的一個或者多個模塊。例如,無線通信單元110可以包括廣 播接收模塊111、移動通信模塊112、無線互聯網模塊113、短程通信模塊114、位置信息模塊 115等等。
[0088] 廣播接收模塊111經由廣播信道從外部廣播管理服務器(或其它網絡實體)接收 廣播信號和/或廣播相關信息。廣播信道可以包括衛星信道和/或陸地信道。廣播管理服 務器可以是生成和發送廣播信號和/或廣播相關信息的服務器,或者是接收先前生成的廣 播信號和/或廣播相關信息并且將其發送到終端的服務器。廣播信號可以包括TV廣播信 號、無線電廣播信號、數據廣播信號等。而且,廣播信號還可以進一步包括與TV廣播信號或 無線電廣播信號組合的廣播信號。
[0089] 同時,還可以經由移動通信網絡來提供廣播相關信息。另外,可以通過移動通信模 塊112來接收廣播相關信息。廣播相關聯的信息以以各種形式存在。例如,可以以數字多 媒體廣播(DMB)的電子節目指南(EPG)、手持式數字視頻廣播(DVB-Η)系統的電子服務指南 (ESG)等的形式存在。
[0090] 廣播接收模塊111可以被配置成通過使用各種類型的廣播系統來接收廣播 信號。特別地,廣播接收模塊111可以通過使用諸如地面多媒體廣播(DMB-T)系統、 衛星數字多媒體廣播(DMB-S)、手持式數字視頻廣播(DVB-Η)、被稱為僅媒體前向 鏈路? (MediaFLO,的數據廣播系統、地面綜合業務數字廣播(ISDB-T)等的數字廣播 系統接收數字廣播。廣播接收模塊111可以被配置成適于提供廣播信號的每一個廣播系統 以及上述數字廣播系統。經由廣播接收模塊111接收到的廣播信號和/或廣播相關信號可 以被存儲在存儲器160中。
[0091] 移動通信模塊112將無線電信號發送到基站、外部終端以及服務器中的至少一個 和/或從基站、外部終端以及服務器中的至少一個接收無線電信號。這樣的無線電信號可 以包括語音呼叫信號、視頻呼叫信號或根據文本和/或多媒體消息傳輸和/或接收的各種 類型的數據。
[0092] 無線互聯網模塊113支持用于移動終端的無線互聯網訪問。此模塊可以內部地 或外部地耦合到終端。被實現的無線互聯網接入技術可以包括WLAN(無線LAN) (Wi-Fi)、 Wibro (無線寬帶)、Wimax (全球微波互聯接入)、HSDPA (高速下行鏈路分組接入)等。
[0093] 短程通信模塊114是用于支持短程通信的模塊。短程通信技術的一些示例包括藍 牙?、射頻識別(RFID)、紅外數據協會(IrDA)、超寬帶(UWB)、紫蜂?、無線LAN(藍牙的協議、 802. lln等等)等等。
[0094] 位置信息模塊115是用于檢查或獲取移動通信終端的位置(或定位)(當移動通 信終端位于車輛中時,能夠檢查車輛的位置)的模塊。例如,位置信息模塊115可以通過使 用GPS (全球定位系統)模塊來實施,該GPS模塊從多個衛星接收位置信息。在此,位置信 息可以包括由緯度值和經度值表示的坐標信息。例如,GPS模塊可以從三個或者更多個衛 星測量精確的時間和距離,并且基于測量的時間和距離根據三角法精確地測量移動通信終 端的當前位置。可以使用從三個衛星獲取距離和時間信息并且利用單個衛星執行錯誤校正 的方法。特別地,GPS模塊可以從衛星接收到的位置信息獲取精確的時間與三維速度信息, 以及緯度、經度的位置以及高度值。Wi-Fi定位系統和/或混合定位系統可以被用作位置信 息模塊115。
[0095] 用戶跟蹤單元120被配置為接收音頻或視頻信號,并且通過使用接收到的信號跟 蹤用戶。用戶跟蹤單元120可以包括相機121、麥克風122、視頻分析模塊123等等。相機 121處理由圖像捕獲設備在視頻捕獲模式或圖像捕獲模式下獲得的靜止圖片或視頻的圖像 數據。通過相機121處理的圖像幀可以被顯示在顯示單元151上。圖像幀可以被存儲在存 儲器160中或者可以通過無線通信單元110被傳送到外部。可以根據使用環境來提供兩個 或更多個相機121。
[0096] 麥克風122可以將在電話呼叫模式、記錄模式、語音選擇模式等中將從另一側輸 入的音頻信號處理成電音頻數據。當電話呼叫模式時處理的音頻數據可以被變換為可經由 移動通信模塊112發送到移動通信基站的格式以用于輸出。麥克風122可以實現各種類型 的噪聲消除(或抑制)算法,以消除(或抑制)在接收和發送音頻信號的過程中所生成的 噪聲或干擾。
[0097] 視頻分析模塊123分析經由接口傳送的圖像以確定用戶的眼睛的方向。更加詳細 地,視頻分析模塊123可以在識別用戶的雙眼的位置之后檢測在用戶的面部的方向和/或 用戶的瞳孔的方向上的變化。分析結果被遞送給控制器180并且控制器180能夠控制以執 行與用戶的眼睛的方向相對應的功能。
[0098] 用戶輸入單元130可以生成來自駕駛員的用于控制移動終端的操作的輸入數據。 用戶輸入單元130可以包括鍵盤、薄膜開關(dome switch)、
[0099] 觸摸板(例如,檢測由于被接觸而引起電阻、壓力、電容等等的變化的觸摸靈敏構 件)、滾動輪(jog wheel)、滾動開關(jog switch)等。特別地,當觸摸板以分層的方式重 疊在顯示單元151上時,其可以形成觸摸屏。
[0100] 感測單元140檢測移動終端100的當前狀況(或者狀態),諸如移動終端100的 打開或關閉狀態、移動終端100的位置、用戶與移動終端100的觸摸(接觸)(例如,觸摸輸 入)的存在或不存在、移動終端100的定向、移動終端100的加速或減速運動以及方向等, 并且生成用于控制移動終端100的操作的命令或信號。例如,當移動終端100被實現為滑 蓋型移動電話時,感測單元140可以感測滑蓋電話是否打開或關閉。另外,感測單元140能 夠檢測電源單元190是否提供電力、或者接口單元170是否與外部設備耦合。
[0101] 感測單元140可以包括接近傳感器141、壓力傳感器143、運動傳感器145等等。接 近傳感器141可以在沒有任何機械接觸的情況下檢測接近移動終端100的對象、在移動終 端100的附近存在的對象等等。接近傳感器141可以使用AC磁場或者靜電磁場的變化、電 容的變化等等檢測接近移動終端100的對象。根據使用的環境接近傳感器141可以被設置 有兩個或者更多個接近傳感器。
[0102] 壓力傳感器143可以檢測是否壓力被施加到移動終端100、壓力的強度等等。根據 使用環境壓力傳感器143可以被安裝在對于檢測移動終端100中的壓力所要求的部分處。 如果壓力傳感器143被安裝在顯示單元151中,則根據從壓力傳感器143輸出的信號,壓力 傳感器143可以識別通過顯示單元151的觸摸輸入和其壓力大于觸摸輸入的壓力的壓力觸 摸輸入。根據從壓力傳感器143輸出的信號,當壓力觸摸被輸入時壓力傳感器143可以檢 測被施加到顯示單元151的壓力的強度。
[0103] 運動傳感器145使用加速傳感器、陀螺儀傳感器等等感測移動終端100的位置或 者運動。可以在運動傳感器145中使用的加速傳感器作為用于將任何一個方向上的加速的 變化轉換成電氣信號的元件,其隨著MEMS(微機電系統)技術的發展而普遍使用。
[0104] 加速度傳感器包括各種類型的加速度傳感器,從用于測量具有很大值的加速度 (用于感測碰撞)的被安裝在車輛的安全氣囊系統中的加速度傳感器,到通過識別用戶的 手的精細操作,測量具有精細的值的加速度并且用作游戲的輸入單元等等的加速度傳感 器。通過將用于測量與2-軸或3-軸相對應的加速度的傳感器安裝在單個封裝中,來配 置加速度傳感器142,并且根據使用環境,可以僅要求Z軸。因此,當由于一些原因要求使 用X軸方向或者Y軸方向替代Z軸方向上的加速度傳感器時,通過使用單獨的板片(piece board),加速度傳感器可以被安裝為堅立在主板上。陀螺儀傳感器是測量角速度的傳感器, 并且可以感測相對于參考方向轉動的方向。
[0105] 輸出單元150被用于生成音頻信號、視頻信號、或者報警信號。輸出單元150可以 包括顯示單元151、音頻輸出模塊152、報警單元153、觸覺模塊154等等。
[0106] 顯示單元151可以顯示在移動終端100中處理的信息。例如,當移動終端100處 于電話呼叫模式中時,顯示單元151可以顯示與呼叫相關聯的用戶界面(UI)或圖形用戶界 面(GUI)。當移動終端100處于視頻呼叫模式或圖像捕獲模式中時,顯示單元151可以顯示 捕獲的圖像和/或接收到的圖像、Π 或GUI。
[0107] 顯示單元151可以包括液晶顯示器(IXD)、薄膜晶體管IXD(TFT-IXD)、有機發光二 極管(0LED)顯示器、柔性顯示器、三維(3D)顯示器等等中的至少一個。根據其特定的想要 的實施例移動終端100可以包括兩個或者更多個顯示單元(或者其它的顯示裝置)。例如, 移動終端可以包括外部顯示單元和內部顯示單元兩者。
[0108] 當以分層的方式重疊顯示單元151和感測觸摸操作的傳感器(在下文中,被稱為 "觸摸傳感器")以形成觸摸屏時,顯示單元151可以用作輸入設備和輸出設備。觸摸傳感 器可以具有例如觸摸膜、觸摸片、觸摸板等的形式。
[0109] 觸摸傳感器可以被配置為將施加到顯示單元151的特定部分的壓力或者在顯示 單元151的特定部分產生的電容等的變化轉換為電輸入信號。觸摸傳感器可以被配置為檢 測觸摸輸入壓力以及觸摸輸入位置和觸摸輸入區域。當存在相對于觸摸傳感器的觸摸輸入 時,對應的信號被發送到觸摸控制器。觸摸控制器處理該信號,并且將對應的數據發送到控 制器180。因此,控制器180可以識別顯示單元151的被觸摸的區域。
[0110] 接近傳感器141可以被布置在由觸摸屏覆蓋的移動終端內或在觸摸屏附近。接近 傳感器141指的是在沒有機械接觸的情況下通過使用電磁力或紅外線來檢測訪問一定檢 測表面的對象或者在周圍存在的對象的存在或不存在的傳感器。因此,與接觸型傳感器相 t匕,接近傳感器141具有較長的壽命,并且其能夠用于各種用途。
[0111] 接近傳感器141的示例可以是透射式光電傳感器、直接反射式光電傳感器、鏡反 射式光電傳感器、RF振蕩式接近傳感器、電容式接近傳感器、磁接近傳感器、紅外接近傳感 器。當觸摸屏是靜電式觸摸屏時,基于根據指示器的接近的電場變化來檢測指示器的接近。 在本實例中,觸摸屏(觸摸傳感器)可以被分類為接近傳感器。
[0112] 在下面的描述中,為了簡潔,被定位為靠近觸摸屏而沒有接觸的指示器的識別將 被稱為"接近觸摸",而對在觸摸屏上的指示器的實際接觸的識別將被稱為"接觸觸摸"。在 本實例中,當指示器處于接近觸摸的狀態時,這意味著指示器被定位成垂直對應于觸摸屏。
[0113] 接近傳感器141檢測接近觸摸和接近觸摸模式(例如,接近觸摸距離、接近觸摸速 度、接近觸摸時間、接近觸摸位置、接近觸摸移動狀態等),并且能夠向觸摸屏輸出與檢測到 的接近觸摸操作和接近觸摸模式相對應的信息。
[0114] 音頻輸出模塊152可以在呼叫信號接收模式、呼叫模式、記錄模式、語音識別模 式、廣播接收模式等中輸出從無線通信單元110接收到的或者被存儲在存儲器160中的音 頻數據。而且,音頻輸出模塊152可以提供與在移動終端100中執行的特定功能有關的音 頻輸出(例如,呼叫信號接收聲音、消息接收聲音、其它通信接收聲音等)。音頻輸出模塊 152可以包括接收器、揚聲器、蜂鳴器等等。
[0115] 報警單元153輸出用于通知移動終端100的事件的發生的信號。在移動終端中產 生的事件可以包括呼叫信號接收、消息接收、鍵信號輸入等。除了視頻或音頻信號之外,報 警單元153可以以不同的方式輸出信號,例如,以通知關于事件的發生。例如,報警單元153 可以以振動的形式輸出信號。當接收到呼叫信號或者接收到消息時,報警單元153可以通 過振動裝置振動移動終端。或者,當輸入鍵信號時,報警單元153可以通過振動裝置振動移 動終端100作為相對于鍵信號輸入的反饋。通過振動,用戶可以識別事件的發生。用于通 知關于事件的發生的信號可以被輸出到顯示單元151或者音頻輸出模塊152。
[0116] 觸覺模塊154產生用戶可以感覺到的各種觸覺效果。通過觸覺模塊154產生的觸 覺效果的典型示例是振動。能夠控制觸覺模塊154的強度和模式。例如,不同的振動可以 被組合以輸出或者被順序地輸出。
[0117] 除了振動之外,觸覺模塊154可以產生各種其它觸覺效果,諸如通過諸如相對于 接觸皮膚垂直移動的針排列的刺激、通過噴射孔或者吸入口的空氣噴射力或者空氣吸入 力、皮膚上的接觸、電極的接觸、靜電力等等等產生的效果,或者通過使用能夠吸收或者產 生熱的元件再現寒冷和溫暖的感覺所產生的效果。
[0118] 觸覺模塊154可以被實現為允許用戶通過諸如用戶的手指或者手臂的肌肉感覺 來感受觸覺效果,以及通過直接接觸來傳送觸覺效果。根據移
[0119] 動終端100的配置,可以提供兩個或者更多個觸覺模塊154。觸覺模塊154可以被 設置到頻繁地接觸用戶的地方。例如,觸覺模塊154可以被設置到方向盤、變速桿、控制桿、 座椅等等。
[0120] 存儲器160可以存儲用于處理和控制由控制器180執行的操作的軟件程序,或者 可以暫時地存儲被輸入或者輸出的數據(例如,地圖數據、電話簿、消息、靜止圖像、視頻 等)。
[0121] 存儲器160可以包括至少一種類型的存儲介質,包含閃存、硬盤、多媒體卡微型存 儲器、卡型存儲器(例如,SD或者DX存儲器等)、隨機存取存儲器(RAM)、靜態隨機存取存 儲器(SRAM)、只讀存儲器(ROM)、電可擦可編程只讀存儲器(EEPR0M)、可編程只讀存儲器 (PR0M)、磁存儲器、磁盤、以及光盤。而且,可以與在互聯網上執行存儲器160的存儲功能的 網絡存儲設備相關地操作移動終端100。
[0122] 接口單元170用作與連接到移動終端100的各個外部設備的接口。例如,外部設備 可以將數據發送到外部設備,接收并且傳送電力到移動終端100的各個元件,或者將移動 終端100的內部數據傳送到外部設備。例如,接口單元170可以包括有線或者無線頭戴式 耳機端口、外部電源端口、有線或者無線數據端口、存儲卡端口、用于連接具有識別模塊的 設備的端口、音頻輸入/輸出(I/O)端口、視頻I/O端口、耳機端口等。在此,識別模塊可以 是存儲用于認證使用移動終端100的各種信息的芯片,并且可以包括用戶識別模塊(ΠΜ)、 訂戶識別模塊(SIM)、通用訂戶識別模塊(USIM)等。另外,具有識別模塊的設備(在下文 中,被稱為"識別設備")可以采用智能卡的形式。因此,識別設備可以經由端口與移動終 端100相連接。接口單元170可以被用于從外部設備接收輸入(例如,數據、信息、電力等 等),并且將接收到的輸入傳輸到移動終端100內的一個或者多個元件,或者可以被用于在 移動終端和外部設備之間傳輸數據。
[0123] 當移動終端100與外部托架相連接時,接口單元170可以用作允許通過其將來自 托架的電力供應給移動終端100的通道,或者可以用作允許通過其將用戶從托架輸入的各 種命令信號傳送到移動終端100的通道。從托架輸入的各種命令信號或電力可以操作為用 于識別移動通信終端被正確地安裝在托架上的信號。
[0124] 控制器180通常控制移動終端的一般操作。例如,控制器180執行與語音呼叫、數 據通信、視頻呼叫等相關聯的控制和處理。控制器180能夠包括用于再現多媒體數據的多 媒體模塊181。多媒體模塊181可以被配置在控制器180內或者可以被配置為與控制器180 分離。
[0125] 控制器180能夠執行模式識別處理,以將在觸摸屏上執行的手寫輸入或者繪圖輸 入分別識別為字符或者圖像。
[0126] 電源單元190接收外部電力或者內部電力,并且在控制器180的控制下供應用于 操作各個元件和組件所要求的適當的電力。
[0127] 使用例如軟件、硬件、或者其任何組合在計算機可讀或者其類似的介質中可以實 現被應用于此處描述的各種實施例。對于硬件實現,通過使用專用集成電路(ASIC)、數字 信號處理器(DSP)、數字信號處理器件(DSPD)、可編程邏輯器件(PLD)、現場可編程門陣列 (FPGA)、處理器、控制器、微控制器、微處理器、被設計為執行在此描述的功能的電子單元中 的至少一個可以實現在此描述的實施例。在一些情況下,可以通過控制器180自身實現這 樣的實施例。對于軟件實現,通過單獨的軟件模塊可以實現諸如在此描述的程序或者功能 的實施例。各個軟件模塊可以執行在此描述的一個或者多個功能或者操作。通過以任何適 合的編程語言所編寫的軟件應用能夠實現軟件代碼。軟件代碼可以被存儲在存儲器160中 并且由控制器180執行。
[0128] 語音識別模塊182識別用戶講出的語音,并且根據識別的語音信號執行相對應的 功能。
[0129] 被應用于移動終端100的導航會話(navigation session)顯示關于地圖數據的 駕駛路線。同時,根據本發明的實施例的移動終端1〇〇可以通過使用多媒體模塊181搜索目 的地或者車站,并且通過無線通信單元110通過與在下文中描述的車載視頻顯示設備200 通信傳送搜索到的目的地或者車站。
[0130] 而且,移動終端100可以通過無線通信單元110接收從如在下文中描述的車載視 頻顯示設備200提供的與車輛有關的信息。例如,車載視頻顯示設備200可以接收關于諸 如車輛的駕駛路線、車輛的速度和變速箱狀態的關于車輛的信息、或者可以接收關于車輛 的應急燈的開/關狀態、頭燈的開/關狀態、通過被安裝在車輛內的座位中的傳感器同伴乘 客是否就座、汽笛的開/關等等的信息。
[0131] 而且,移動終端100可以將駕駛路線與搜索到的目的地或者車站一起傳送給車載 視頻顯示設備200。然后,車載視頻顯示設備200可以通過使用投影儀在車輛的儀表板中, 在抬頭顯示器(HUD)中、或者在車輛的前窗口中顯示駕駛路線。在此,HUD可以被安裝在車 輛的儀表板中,并且HUD和投影儀可以使用公知的方案,因此其詳細描述將會被省略。
[0132] 圖4是圖示根據本發明的實施例的被連接到移動終端的車載視頻顯示設備的配 置的框圖。
[0133] 根據本發明的實施例的車載視頻顯示設備200可以包括多個顯示器。多個顯示 器可以被定位以與車載視頻顯示設備200,例如,HUD主體分開。例如,車載視頻顯示設備 200的主體可以是HUD,并且被包括在其中的多個顯示器可以包括車輛的前窗口、車輛的儀 表板、車輛的側視鏡和后視鏡等等。而且,為了在多個顯示器上顯示預定的圖像,HUD可以 具有投影儀。即,HUD可以通過使用投影儀在多個顯示器中的一個上顯示被先前存儲在存 儲器中的圖像,或者從移動終端100接收到的圖像。
[0134] 如在圖4中所示,車載視頻顯示設備200可以包括主板210,該主板210包括用于 控制車載視頻顯示設備200的一般操作的控制器(例如,中央處理單元(CPU) 212);存儲器 213,該存儲器213用于存儲各種類型的信息;鍵控制器211,該鍵控制器211用于控制各種 鍵信號;以及液晶顯示器(IXD)控制器214,該液晶顯示器(IXD)控制器214用于控制IXD。
[0135] 存儲器213存儲用于在數字地圖上顯示道路引導信息的地圖數據。存儲器213存 儲交通信息收集控制算法和用于控制該算法的信息,該交通信息收集控制算法用于根據其 中車輛正在運行的道路的情況輸入交通信息。
[0136] 主板210包括無線通信模塊(或者CDMA模塊)206,該無線通信模塊206執行在車 載視頻顯示設備200和外部移動終端100之間的無線通信或者在車載視頻顯示設備200和 其中車載視頻顯示設備200被定位的網絡之間的無線通信;位置信息模塊207,該位置信息 模塊207用于接收GPS信號以引導車輛的位置或者接收用于跟蹤從起點到目的地的駕駛路 線的全球定位系統(GPS)信號,或者傳送作為GPS信號的由駕駛員收集的交通信息;⑶機 (⑶deck) 208,該⑶機208用于再現被記錄在⑶(光盤)中的信號;陀螺儀傳感器209等 等。無線通信模塊206和位置信息模塊207經由用于每個模塊的天線204和205傳送或者 接收信號。
[0137] 無線通信模塊206可以包括移動通信模塊206a,該移動通信模塊206a用于將無 線信號傳送到移動通信網絡中的基站、外部終端、以及服務器中的至少一個并且從移動通 信網絡中的基站、外部終端、以及服務器中的至少一個接收無線信號,作為被指配有唯一的 設備編號的移動終端;無線互聯網模塊206b,該無線互聯網模塊206b用于根據諸如無線 LAN(WLAN)、Wi-Fi、無線寬帶(Wibro)、全球微波接入互操作性(Wimax)、高速下行鏈路分組 接入(HSDPA)等等的方案訪問無線互聯網;短程通信模塊206c,該短程通信模塊206c根 據藍牙TM、射頻識別(RFID)、紅外數據協議(IrDA)、超帶寬(UWB)、紫蜂、無線LAN(藍牙、 802. 1 In等協議)等等執行通/[目。
[0138] 而且,廣播接收模塊222被連接到主板210并且通過天線223接收廣播信號。經由 接口板203,在IXD控制器214的控制下的顯示單元(即,IXD) 201、在鍵控制器211的控制 下的前板202、以及用于捕獲車輛的內部和/或外部的圖像的相機227被連接到主板210。 顯示單元201顯示各種視頻信號和字符信號,并且前板202包括用于各種鍵信號輸入的按 鈕并且將與駕駛員選擇的按鈕相對應的鍵信號提供給主板210。而且,顯示單元201可以包 括圖1的接近傳感器和觸摸傳感器(觸摸屏)。
[0139] 前板202包括用于直接地輸入交通信息的菜單鍵。菜單鍵可以被配置成通過鍵控 制器211控制。
[0140] 音頻板217被連接到主板210并且處理各種音頻信號。音頻板217包括用于控制 音頻板217的微計算機219、用于接收無線電信號的調諧器218、用于將電力供應到微計算 機219的電源單元216以及用于處理各種音頻信號的信號處理單元215。
[0141] 音頻板217包括用于接收無線電信號的無線電天線220和用于播放音頻磁帶的磁 帶機(tape deck) 221。音頻板217可以進一步包括用于輸出由音頻板217處理的語音信號 的音頻輸出單兀(例如,放大器)226。
[0142] 音頻輸出單元(放大器)226可以被連接到車輛接口 224。即,音頻板217和主板 210被連接到車輛接口 224。用于輸入音頻信號的免提225a、為乘客的安全而配置的安全氣 囊225b、用于檢測車輛的速度的速度傳感器225c等等可以被連接到車輛接口 224。速度傳 感器225c計算車輛速度并且將計算的車輛速度信息提供給CPU 212。
[0143] 被應用于車載視頻顯示設備200的導航會話(或者搜索單元)300基于地圖數據 和車輛的當前位置信息生成道路引導信息,并且將被生成的道路引導信息提供給駕駛員。
[0144] 顯示單元201經由接近傳感器檢測在顯示窗口內的接近觸摸。例如,當指示器(例 如,用戶的手指或者觸摸筆)被接近觸摸時,顯示單元201檢測接近觸摸的位置,并且將與 檢測到的位置相對應的位置信息輸出到控制器212。
[0145] 而且,如在下文中所描述的,顯示單元201可以包括多個顯示器,并且顯示器的每 一個可以顯示與車輛的駕駛視角相對應的不同圖像。而且,顯示單元201可以被連接到至 少一個相機227,并且相機227可以基于顯示單元201捕獲在預定范圍內的用戶的圖像并且 將捕獲到的用戶的圖像遞送給連接的外部設備或者主板210。
[0146] 相機227通常可以被安裝在車輛的前側中或者可拆卸地附接以根據車輛的駕駛 捕獲外部圖像。而且,相機227可以被安裝在車輛內的黑匣子中的相機替代。而且,多個相 機227可以被安裝(在其中側視鏡或者后視鏡被布置的位置處)以捕獲車輛的相對應的外 部圖像或者當車輛運行時單個相機可以捕獲與各種駕駛視角相對應的車輛的外部圖像。
[0147] 同時,用于搜索駕駛路線的地圖數據可以被存儲在存儲器213中或者可以通過無 線通信單元110從外部網絡接收。語音識別模塊301識別由駕駛員講出的聲音并且根據被 識別的音頻信號執行相對應的功能。
[0148] 被應用于車載視頻顯示設備200的導航會話300可以在地圖數據上顯示駕駛路 線,并且當移動終端100位于離在駕駛路線中包括的盲點預設距離內時,導航會話300經由 無線通信(例如,短程無線通信網絡)與被安裝在附近車輛中的終端(例如,車輛導航設 備)或者附近的行人隨身攜帶的移動通信終端一起自動地形成無線網絡,以從被安裝在附 近車輛中的終端接收附近車輛的位置信息,以及從附近行人隨身攜帶的移動通信終端接收 附近行人的位置信息。
[0149] 同時,主板210可以被連接到接口單元。接口單元包括外部設備接口單元和網絡 接口單元。外部設備接口單元可以將外部設備連接到車載視
[0150] 頻顯示設備200。因此,外部設備接口單元可以包括A/V輸入/輸出單元或者無 線通信單元。外部設備接口單元231可以以有線方式或者無線地被連接到外部設備,例如, DVD (多功能盤)、藍光光碟、游戲機、相機、便攜式攝像機、計算機(或者筆記本計算機)等 等。而且,通過被鏈接到連接的網絡的不同網絡或者連接的網絡,網絡接口單元可以被連接 到預定的網頁。即,網絡接口單元通過網絡可以被連接到預定的網頁以與相對應的服務器 交換數據。
[0151] 在本發明的實施例中,車載視頻顯示設備200可以是抬頭顯示器(HUD)或投影儀, 或者可以是被定位在車輛的后座中的顯示設備。在此,在其中視頻顯示設備200是被定位 在車輛的后座中的顯示設備的情況下,其可以通過無線通信模塊206與被定位在車輛的前 座中的投影儀或者HUD進行通信。
[0152] 包括如上所述的一個或者多個組件的根據本發明的實施例的移動終端100可以 通過無線通信單元110被連接到如上所述的車載視頻顯示設備200。
[0153] 當車載視頻顯示設備200與移動終端100相連接時,移動終端100的用戶跟蹤單 元120可以基于基于被連接到移動終端的車載視頻顯示設備200的顯示器201a至201e中 的每一個捕獲到的駕駛員的圖像檢測駕駛員的視線。從而車載視頻顯示設備200的顯示 器201a至201e中的每一個可以被連接到至少一個相機(其優選地被定位在駕駛員的座位 中)以便捕獲駕駛員的圖像。
[0154] 當已經改變駕駛員的視線時,S卩,當與駕駛員的視線相對應的方向已經從車載視 頻顯示設備200的第一顯示器轉向第二顯示器時,在駕駛員的視線已經移動到的第二顯示 器上,例如,在一起顯示車輛的后視野的顯示器上,控制器180可以顯示在第一顯示器上顯 示的屏幕的至少一部分,例如,與車輛的前視野相對應的屏幕的至少一部分。
[0155] 例如,控制器180能夠在車輛的側視鏡顯示器的區域中顯示屏幕的至少一部分。 艮P,當駕駛員的視線已經從前視野移動到在側視鏡上顯示的后視野時,控制器180在駕駛 員的視線已經一起移動到的顯示器上顯示與先前運行的視野相對應的前圖像。
[0156] 在此,控制器180能夠在駕駛員的視線被移動之前從屏幕僅提取駕駛員的視線被 固定到的預定區域的部分屏幕,根據適合駕駛員的視線已經移動到的顯示器的比率調節被 提取的部分屏幕并且將被提取的部分屏幕實時傳送到駕駛員的視線已經移動到的顯示器。
[0157] 在此,第一顯示器可以是其中在車輛的前側車輛的駕駛路線被成像并且被顯示的 顯示器。例如,第一顯示器可以是抬頭顯示器(HUD)或者前窗口(或者擋風玻璃)(在下文 中,其將會被統稱為"車輛頭部單元")。與車輛的前視野相對應的屏幕可以被顯示在第一 顯示器上,并且車輛的狀態信息可以進一步被一起顯示。
[0158] 第二顯示器可以被定位在駕駛員的座位和/或乘客的座位的門中或者在駕駛員 的座位上方以對車輛的后側進行成像并且/或者將其進行顯示。例如,第二顯示器可以是 被連接到至少一個相機的側視鏡或者后視鏡(在下文中,其可以被稱為"車輛反光鏡")。與 車輛的后視野相對應的屏幕可以被顯示在第二顯示器上。
[0159] 例如,保持眼睛向前同時在移動中,當根據駕駛路線駕駛員觀看左/右側視鏡或 者將他的眼睛轉向后側鏡時,處于"連接車"狀態中的移動終端100的控制器控制駕駛員先 前已經保持他的眼睛的前視野的屏幕,以在駕駛員的眼睛已經移動到的側視鏡的區域中被 一起顯示。因此,即使當駕駛員觀看后視角時,雖然保持他的眼睛在前側上同時駕駛車輛, 但是他或者她可以實時獲知前側的情形。因此,當在前視野中突然出現對象時,駕駛員能夠 識別對象,從而防止事故的發生。
[0160] 如上所述,因為當駕駛車輛時根據駕駛路線不同地改變駕駛員的視線,所以與先 前的駕駛視角相對應的屏幕和與當前駕駛視角相對應的顯示器一起顯示,從而幫助駕駛員 的安全駕駛并且增強駕駛員便利。
[0161] 在下文中,將會參考圖5詳細地描述當駕駛員正在駕駛車輛時使移動終端在與駕 駛員的視線中的變化相對應的位置處在顯示器上一起顯示先前的駕駛視角的圖像的控制 方法。圖5是圖示根據本發明的實施例的移動終端的控制方法的流程圖。
[0162] 首先,參考圖5,根據本發明的實施例的移動終端100可以被連接到車載視頻顯示 設備200 (S401)。例如,通過使用諸如藍牙?等等的近場通信標準、諸如Wi-Fi等等的無線 互聯網標準、諸如USB的外部設備接口標準等等移動終端100和車載視頻顯示設備200可 以被連接,以便其處于如圖1中所示的"連接車"的狀態下。
[0163] 從而,移動終端100能夠輸出在連接車狀態下移動終端100和車載視頻顯示設備 200可以是可操作的消息或者聲音引導。而且,可以提供多個被連接到移動終端100的車載 視頻顯示設備200 (例如,圖1中的300a和300b)。
[0164] 當移動終端100和車載視頻顯示設備200是處于連接車狀態時,移動終端100的 控制器180能夠基于基于被連接的車載視頻顯示設備200的第一顯示器捕獲的駕駛員的圖 像和基于第二顯示器捕獲的駕駛員的圖像檢測駕駛員的眼睛的方向(S402)。
[0165] 因此,車載視頻顯示設備200的顯示器中的每一個可以被連接到至少一個相機 227并且被連接的相機227可以基于顯示器中的每一個捕獲在預定范圍內的駕駛員的圖 像。在另一示例中,可以僅基于單個顯示器(例如,僅基于車輛的前窗口顯示器)捕獲駕駛 員的圖像。在本實例中,在捕獲到的駕駛員的單個圖像中可以獲得與根據駕駛員的頭部的 移動和駕駛員的瞳孔的移動基于顯示器中的每一個通過捕獲駕駛員的圖像獲得的效果相 似的效果。
[0166] 當基于顯示器捕獲駕駛員的圖像時,移動終端的用戶跟蹤單元120能夠接收基于 車載視頻顯示設備200的第一顯示器的在預定范圍內存在的駕駛員的圖像和基于第二顯 示器在預定范圍內存在的駕駛員的圖像。當接收到駕駛員的圖像時,用戶跟蹤單元120的 圖像分析模塊123能夠從接收到的圖像識別駕駛員的面部的方向和/或駕駛員的眼睛的方 向的變化。通過控制器180也可以執行這樣的圖像分析。
[0167] 為了識別駕駛員的面部的方向的變化和/或駕駛員的眼睛的方向的變化,顯示器 中的每一個可以被連接到至少一個相機227。即,車載視頻顯示設備200可以通過相機,例 如,前相機227連續地獲得駕駛員的圖像,并且將其遞送給移動終端100。
[0168] 在此,當通過多個相機基于顯示器中的每一個捕獲在預定范圍內存在的駕駛員的 圖像時,車載視頻顯示設備200能夠按照時間順序將捕獲到的駕駛員的圖像傳送到移動終 端100或者包括捕獲每個圖像所在的時間點,作為每個圖像中的附加信息。
[0169] S卩,車載視頻顯示設備200的第一和第二顯示器可以被連接到被可拆卸地布置在 車輛中的至少一個相機,并且基于顯示器中的每一個獲得在預定范圍內存在的駕駛員的圖 像。而且,車載視頻顯示設備200的第一和第二顯示器可以分別被連接到前相機和后相機, 以獲得車輛的外部圖像。
[0170] 將會描述作為示例的通過車載視頻顯示設備200的顯示器中的每一個獲得車輛 的外部圖像的方法。首先,車載視頻顯示設備200的第一顯示器可以是頭部單元顯示器 (HUD),其被布置在車輛的前側或者車輛的前窗口。而且,車載視頻顯示設備200的第二顯 示器可以是側視鏡或者后視鏡。
[0171] 當第一顯示器是車輛的前窗口時,被反射到由透明材料形成的玻璃的車輛的前視 野可以被顯示為是在車輛上,同時通過使用前相機可以捕獲相同的圖像以獲得車輛的外部 圖像。而且,當第一顯示器是車載頭部單元(HUD)時,先前存儲的地圖信息、車輛的當前位 置以及駕駛路線被映射以在HUD上顯示相對應的圖像。另外,同時,通過使用黑匣子內的前 相機或者前相機可以捕獲車輛的前視野的圖像。
[0172] 同時,第二顯示器可以如原樣顯示從被定位在車輛的后側的對象,S卩,車輛的后視 野反射的圖像。而且,第二顯示器可以被連接到后相機以捕獲車輛的后視野并且存儲以從 而獲得車輛的后圖像。
[0173] 而且,可以單獨地設置被配置成捕獲駕駛員的圖像以檢測駕駛員的視線的變化的 相機和被配置成捕獲與車輛的駕駛視野相對應的圖像以獲得車輛的外部圖像的相機。艮P, 可以設置用于捕獲駕駛員的圖像的第一相機和用于捕獲與車輛的駕駛視野相對應的外部 圖像的第二相機(在此,第二相機可以包括前相機和后相機)。
[0174] 根據檢測駕駛員的眼睛的方向的結果,移動終端100的控制器180確定是否駕駛 員的眼睛已經從車載視頻顯示設備200的第一顯示器移動到其第二顯示器(S403)。當確定 駕駛員的眼睛已經移動時,控制器180提供在駕駛員的眼睛已經移動到的第二顯示器的區 域中實時顯示在第一顯示器上顯示的第一屏幕的至少一部分(S404)。
[0175] 在此,是在第一顯示器上顯示的第一屏幕可以是包括例如,在車輛的前視野的前 面存在的每個對象、運動對象等等的圖像。而且,除了在車輛的前視野中看到的圖像之外車 輛的當前狀態信息也可以進一步被顯示在第一屏幕中。
[0176] 參考圖7A,當駕駛員900保持他或者她的眼睛(A)在前顯示器201a上,例如,HUD 或者車輛的前窗口上時,并且當駕駛員900將他的或者她的眼睛轉向左側視鏡顯示器201b 以改變車道(B)時,處于"連接車"狀態中的移動終端100在駕駛員的眼睛已經被轉向到的 左側視鏡顯示器201b的區域中顯示在前顯示器201a上顯示的屏幕610,如在圖7B中所圖 /_J、1 〇
[0177] S卩,如在圖7B中所圖示,與用戶已經先前觀看的車輛的前視野相對應的屏幕610" 與對應于在左側視鏡顯示器201b上已經顯示的車輛的后視野的屏幕620 -起被顯示。從 而,駕駛員能夠在車輛的前側出現的情形下同時識別變化,同時他或者她保持他的或者她 的眼睛在左側視鏡顯示器201b上。
[0178] 在本實例中,可以通過用戶輸入移動在駕駛員的眼睛已經轉向到的第二顯示器的 區域中顯示的第一屏幕。即,接收基于第二顯示器的在預定范圍內存在的駕駛員的圖像之 后,控制器180能夠確定是否已經輸入預設的手勢,并且當確定已經輸入預設的手勢時,控 制器180能夠在與手勢輸入相對應的方向上移動第一屏幕以對其進行顯示。
[0179] 例如,參考圖7C的(a),當與車輛的前視野相對應的屏幕610"被實時顯示在車載 視頻顯示設備200的左側視鏡顯示器201b的一個區域中,例如,在右下端部分中時,當施加 輕敲觸摸輸入時,控制器180能夠在與輕敲觸摸輸入相對應的方向上移動屏幕610",即,移 動到第二顯示器201b的右上端區域以對其進行顯示。
[0180] 而且,當在第二顯示器中同時顯示第一和第二屏幕時,當駕駛員的視線沒有被改 變或者駕駛員沒有有意地凝視第一屏幕時(例如,當駕駛員僅凝視第二屏幕時),控制器 180能夠停止實時顯示對應于在第二顯示器201b上已經顯示的車輛的前視野的屏幕610", 如在圖7C的(b)中所圖不。
[0181] 在下文中,將會參考圖8A、圖8B以及圖9詳細地描述根據本發明的實施例的在與 如上所述的操作S404相對應的駕駛員的視線已經移動到的顯示器中一起顯示先前的顯示 器的屏幕的方法。
[0182] 圖8A和圖8B是圖示根據本發明的實施例的使移動終端在第二顯示器上僅顯示在 駕駛員的眼睛被固定到的范圍內的車載視頻顯示設備200的第一顯示器上顯示的屏幕的 一部分的控制方法的概念視圖。而且,圖9是圖示根據本發明的實施例的其中根據駕駛員 的眼睛的方向改變在顯示器上顯示的先前的屏幕的大小和位置的示例的視圖。
[0183] 參考圖5,處于與車載視頻顯示設備200 "連接車"狀態下的移動終端100的用戶 跟蹤單元120相對于車主視頻顯示設備200的多個顯示器檢測駕駛員的眼睛的方向,并且 結果,控制器180能夠確定是否駕駛員的視線已經從車載視頻顯示設備200的第一顯示器 移動到其第二顯示器。
[0184] 當確定駕駛員的眼睛已經移動到車載視頻顯示設備200的不同顯示器時,控制器 180能夠將在第一顯示器上顯示的第一屏幕的至少一部分顯示到駕駛員的眼睛已經移動到 的第二顯示器的區域。
[0185] 在此,第一顯示器可以是被布置在車輛的前側中的頭部單元顯示器(HUD)并且第 二顯示器可以是側視鏡或者后視鏡。而且,被顯示在第一顯示器上的第一屏幕可以與通過 前相機獲得的車輛的外部圖像,即,車輛的前視野的圖像相同,并且被顯示在第二顯示器上 的第二屏幕可以與通過后相機獲得的車輛的外部圖像,即,車輛的后視野的圖像相同。
[0186] 移動終端100的控制器180能夠請求第一顯示器以通過無線通信單元110將第一 屏幕實時傳送到車載視頻顯示設備200以便在第二顯示器上顯示在第一顯示器上顯示的 第一屏幕。響應于請求,第一顯示器將通過被連接的相機獲得的車輛的前視野的圖像傳送 到移動終端100。然而,控制器180處理接收的前視野的圖像并且將其傳送到駕駛員的眼睛 已經移動到的第二顯示器。然后,第二顯示器在屏幕的區域中實時顯示從移動終端100傳 送的車輛的前視野的圖像。
[0187] 在此,被顯示在第二顯示器上的車輛的前視野的圖像可以被限于被顯示在其中其 沒有覆蓋被顯示在第二顯示器上的圖像的范圍內。即,因為與車輛的后視野相對應的屏幕 被顯示在第二顯示器的第二屏幕上,所以駕駛員已經先前觀看的前視野的圖像可以被一起 顯示在其中其沒有覆蓋已經被顯示在第二顯示器上的圖像的范圍內。
[0188] 更加詳細地,控制器180能夠控制第一屏幕被顯示在第二顯示器上使得其被重疊 在第二顯示器的第二屏幕上。在此,第一屏幕可以被以重疊的方式顯示以具有小于第二屏 幕的尺寸。例如,控制器180能夠限制以重疊的方式被顯示在第二屏幕上的第一屏幕的尺 寸沒有超過整個屏幕的尺寸的四分之一。
[0189] 而且,控制器180能夠按比例放大或者縮小被顯示在第二顯示器上的第一屏幕。 例如,當在第二顯示器中預設的時段內駕駛員的眼睛僅被固定到第一屏幕時,控制器180 能夠按比例放大第一屏幕到預定范圍。在此,第一屏幕的最大尺寸可以被限制在如上所述 的預定范圍內。而且,例如,當在預設的時間段內駕駛員的眼睛僅被固定到第二顯示器中 的第二屏幕時,控制器180能夠按比例縮小第一屏幕或者使第一屏幕消失(S卩,去除第一屏 辱)。
[0190] 例如,參考圖9的(a),駕駛員已經保持他的或者她的眼睛所在的顯示器上顯示的 屏幕(A)可以以浮動或者重疊的方式被顯示在屏幕(B)上,該屏幕(B)被顯示在駕駛員當 前注視的顯示器上。在此,以用戶的眼睛被固定到的點作為中心,屏幕(A)的尺寸可以被增 加或者縮小。而且,根據當前顯示器內的駕駛員的視線的變化或者根據外部情形的變化根 據事件的發生在不同的區域中可以顯示屏幕(A)。
[0191] 在此,根據外部情形中的變化的事件的發生可以包括,例如,當在由以浮動或者重 疊方式顯示的屏幕(A)覆蓋的顯示區域中突然出現對象時或者當在盲點中存在的對象被 感測到并且警告報警要被顯示在顯示器上時。
[0192] 在前述的情況下,控制器180能夠控制屏幕(A)被移動到顯示器的不同區域,例 如,其中對象不存在的區域,以便被顯示。在后述情況下,控制器180能夠控制屏幕(A)從顯 示器消失并且顯示警告報警。從而,移動終端100能夠從被連接到其的車載視頻顯示設備 200接收車輛的外部圖像和車輛的狀態信息,例如,與當在盲點中感測到對象時相對應的信 號。
[0193] 而且,在區分于第二顯示器的第二屏幕的區域中,控制器180能夠顯示要在第二 顯示器上顯示的第一屏幕。因此,已經被顯示在第二顯示器上的第二屏幕,例如,與車輛的 后視野相對應的屏幕可以被替換成通過相機捕獲到的圖像。在本實例中,捕獲到的圖像可 以被縮小以對應于在其中要顯示第二屏幕的區域的寬度和長度之間的比率,以便被實時顯 /_J、1 〇
[0194] 例如,參考圖9的(b),已經被顯示在整個顯示器中的第二屏幕,被縮小以被顯示 在第一區域中,例如,在左區域中。而且,已經被顯示在駕駛員注視的顯示器上的第一屏幕 被顯示在第二區域中,例如,在右區域中。在此,第二區域的尺寸可以被限于在沒有干擾駕 駛員的駕駛的預定范圍內的尺寸,即,沒有覆蓋車輛的后視野的圖像,如上所述。
[0195] 而且,為了在被同時顯示在車輛視頻顯示設備200的第二顯示器上的第一和第二 屏幕之間區分,控制器180能夠在被顯示在第二顯示器中的第一屏幕的邊界區域中顯示預 定的框架或者提供到其的高亮效果。
[0196] 例如,參考圖8B,當車輛的前視野的圖像720被顯示在車輛的前窗口 201a上和后 視野的圖像711"以重疊的方式被顯示在前窗口 201a的區域中時,框架719可以被顯示在 圖像711"的邊界區域中以允許駕駛員在不同的圖像之間可視地區分。在此,移動終端100 的控制器180能夠控制框架715在預定的時間間隔被高亮。
[0197] 而且,當確定駕駛員的眼睛已經移動到不同的顯示器時,控制器180能夠實時提 取第一屏幕中的駕駛員的眼睛被固定到的預定范圍的部分屏幕,并且在第二顯示器上顯示 被提取的部分屏幕。因此,控制器180能夠從第一顯示器實時接收第一屏幕,確定駕駛員的 眼睛被固定到的接收到的第一屏幕,從第一屏幕提取被確定的范圍,并且將被提取的部分 圖像傳送到第二顯示器。
[0198] 例如,如在圖8A中所圖示,當保持他的或者她的眼睛在左側視鏡201b同時駕駛的 駕駛員900將他的或者她的眼睛轉向前顯示器201a以改變路線時,處于"連接車"狀態下 的移動終端100的控制器180可以從被顯示在左側視鏡201b上的圖像720中實時提取預 定范圍內,特別地,基于駕駛員已經凝視的點(A)的部分屏幕711。被提取的部分屏幕711" 可以被顯示在如在圖8B中所圖示的駕駛員的眼睛已經移動到的車輛的前窗口 201a上。
[0199] 當多個駕駛視角的圖像(例如,前視野的圖像和后視野的圖像)被同時顯示在駕 駛員當前注視的顯示器中時,當通過用戶跟蹤單元120感測到的駕駛員的眼睛轉向不同的 顯示器時,控制器180能夠在駕駛員的眼睛已經移動到的不同顯示器上再次顯示與先前的 駕駛視角相對應的圖像。
[0200] 更加詳細地,當檢測到駕駛員的眼睛已經從第二顯示器移動到第一顯示器時,控 制器180能夠提供控制使得被輸出到第二顯示器的區域的第一屏幕消失并且被顯示在第 二顯示器上的第二屏幕的至少一部分被輸出到駕駛員的眼睛直對的第一顯示器的區域。
[0201] 同時,當駕駛員的眼睛已經移動到第三顯示器(例如,后視鏡)時,已經被顯示在 第二顯示器中的第一和第二屏幕兩者可以一起被顯示在第三顯示器的區域中。
[0202] 在此,如果在預定的時間段內駕駛員的眼睛沒有被固定到第三顯示器,則控制器 180能夠提供控制使得第一和第二屏幕同時消失,或者以被顯示的順序消失,S卩,使得第一 屏幕消失和第二屏幕隨后消失。而且,在另一示例中,第一和第二屏幕可以根據駕駛員的語 音命令(例如,"請刪除"的語音命令)或者手勢輸入消失。
[0203] 在下文中,將會參考圖6描述當車輛在運行時或者當車輛被停止時使移動終端在 與駕駛員的視線的變化相對應的位置處在顯示器上一起顯示先前的駕駛視角的圖像的控 制方法。
[0204] 參考圖6,首先,移動終端100被連接到車載視頻顯示設備200 (S501)。當提供多 個車載視頻顯示設備200時,每個車載視頻顯示設備200可以被連接到終端100。
[0205] 例如,當通過諸如藍牙?等等的近場通信標準、諸如Wi-Fi等等的無線互聯網標 準、諸如USB的外部設備接口標準等等連接移動終端100和車載視頻顯示設備200時,它們 處于如在圖1中所圖示的"連接車"狀態下。因此,移動終端可以輸出指示在連接車狀態下 可以操作的消息或者聲音。
[0206] 在連接車狀態下,移動終端100和/或車載視頻顯示設備200可以輸出指示它們 被連接的預定的通知(S502)。例如,通知可以被輸出作為諸如"嗶嗶(Be印)聲"的信號聲 音、諸如"被連接的"音頻信號,或者以預定的消息形式被輸出到顯示器。
[0207] 當移動終端100和車載視頻顯示設備200是處于"連接車"狀態時,移動終端100 的控制器180能夠基于基于第一顯示器(其被連接到至少一個相機)捕獲到的駕駛員的圖 像和基于第二顯示器捕獲到的駕駛員的圖像檢測駕駛員的眼睛的方向(S503)。
[0208] 因此,移動終端的用戶跟蹤單元120可以通過無線通信單元110接收基于車載視 頻顯示設備200的第一顯示器在預定范圍內的駕駛員的圖像和基于第二顯示器在預定范 圍內的駕駛員的圖像,并且識別在駕駛員的面部的方向的變化和/或在駕駛員的眼睛的方 向的變化。例如,當在第一接收到的圖像中駕駛員的瞳孔面向第一顯示器并且在第二接收 到的圖像中駕駛員的瞳孔面向第二顯示器時,用戶跟蹤單元120可以檢測駕駛員的眼睛中 的變化。
[0209] 當檢測到駕駛員的視線中的變化時,移動終端100的控制器180能夠確定是否駕 駛員的眼睛已經從車載視頻顯示設備200的第一顯示器移動到第二顯示器(例如,車輛的 前窗口或者車輛頭部單元),同時車輛實時運行(S504)。
[0210] 當控制器180確定駕駛員的眼睛已經從車載視頻顯示設備100的第一顯示器移動 到第二顯示器時,控制器180請求車載視頻顯示設備200以實時傳送被顯示在第一顯示器 中的第一屏幕(在側視鏡中反映的車輛的后視野的圖像),并且從根據請求實時接收到的 第一屏幕提取駕駛員的眼睛已經被固定到的預定范圍內的部分屏幕(S505)。而且,將接收 到的圖像按比例縮小以適合其中要顯示接收到的圖像的顯示器的過程可以被執行。
[0211] 當執行前述的圖像處理過程時,控制器180提供控制使得被提取的部分圖像被實 時顯示在駕駛員的眼睛已經移動到的第二顯示器的區域中(S506)。同時,當車輛運行停止 信號被輸入時,控制器180能夠確定是否駕駛員的眼睛已經從車載視頻顯示設備200移動 到移動終端100的顯示單元151 (S507)。
[0212] 當被包括在通過車輛內的前相機(或者黑匣子的前相機)捕獲到的圖像中的信號 燈是指示"停止"的信號燈(例如,紅燈)時,控制器180能夠確定車輛運行停止信號已經 被輸入。而且,為了確定是否停止信號已經被輸入,則控制器180能夠確定諸如車輛的剎車 操作信號的車輛的操作狀態信息是否已經被接收,作為輔助確定條件。
[0213] 因此,移動終端100能夠從車載視頻顯示設備200接收與車輛的前視野相對應的 圖像。而且,移動終端100能夠從車載視頻顯示設備200或者車輛系統接收車輛的操作狀 態息。
[0214] 當車輛運行停止信號被輸入并且駕駛員的眼睛被移動到移動終端100的顯示單 元151時,控制器180提供控制使得在其上駕駛員保持他的或者她的眼睛的顯示器的屏幕 被輸出到在顯示單元151中的駕駛員的眼睛被固定到預定范圍的區域外部(S508)。
[0215] 參考圖10A,當已經駕駛車輛同時將他的或者她的眼睛保持在顯示與前視野相對 應的圖像901的顯示器201a上的駕駛員900停止駕駛車輛時,處于"連接車"狀態下的移動 終端100可以基于從車輛系統接收到的車輛的狀態信息,例如,在車輛的前視野的圖像901 中包括的信號燈90中顯示的"停止"信號和剎車操作信號,識別車輛的運行已經停止。
[0216] 在車輛運行停止狀態下,當駕駛員900將他的眼睛移動到連接的移動終端100的 顯示單元151時,與在其上駕駛員保持他的或者她的眼睛的顯示器201a中已經顯示的車輛 的前視野相對應的屏幕901",與預定的內容一起同時被顯示在如在圖10B中所圖示的移動 終端100的顯示單元151上。在此,與車輛的前視野相對應的屏幕901"可以被布置以在駕 駛員900"的眼睛被固定到的點的預定范圍的外部的區域中被顯示。例如,屏幕901"被顯 示在圖10B中的顯示單元151的下部區域中。
[0217] 在此狀態下,控制器180能夠檢測被施加到與在顯示單元151上顯示的車輛的前 視野相對應的屏幕901"的預定輸入(S509)。在此,預定輸入可以是,例如,在預定的方向上 被施加到屏幕901"的觸摸輸入或者可以包括具有預設的形狀的手勢輸入和與駕駛員的眼 睛相對應的輸入信號或者語音命令。
[0218] 當被施加到屏幕901"的輸入被檢測到時,控制器180能夠改變在顯示單元151 上顯示的車載視頻顯示設備200相關的屏幕的狀態和/或屏幕的輸出范圍以便被輸出 (S510)。
[0219] 在下文中,將會參考圖10C描述其中被顯示在車載視頻顯示設備200中的屏幕被 輸出到顯示單元151的各種實施例。
[0220] 圖10C包括圖示根據本發明的實施例的其中車載視頻顯示設備200的屏幕被改變 以根據被施加到移動終端100的顯示單元151的預定輸入被輸出的各種實施例的視圖。
[0221] 當接收到車輛運行停止信號并且駕駛員的眼睛從顯示車輛的前視野的顯示器移 動到移動終端100時,與用戶操縱相對應的內容屏幕920被輸出到移動終端100的顯示單 元151的第一區域,并且在其上駕駛員保持他的或者他的眼睛的車輛的前視野的圖像901" 被實時顯示在區分第一區域的第二區域中,如在圖10B中所圖示。
[0222] 在此狀態下,控制器180能夠檢測被施加到被輸出到顯示單元151的第一屏幕的 第一輸入,例如,在預定方向上的車輛的前視野的圖像,并且提供控制使得第一屏幕的輸出 范圍被改變以對應于第一輸入。
[0223] 例如,在圖10C的(a)中,當在預定方向上的輕敲觸摸輸入,例如,在向上/向下方 向上的輕敲觸摸輸入,被施加到在顯示單元151上顯示的車輛的前視野的屏幕901"時,在 整個屏幕中顯示單元151上顯示的屏幕901"的輸出范圍被改變并且在與輸入相對應的方 向上屏幕901"被移動,S卩,向上/向下移動,以便被顯示。因此,駕駛員可以觀看被改變以 具有所期待的視角的前視野的屏幕902",如在圖10C的(b)中所圖示。
[0224] 而且,例如,當感測到被施加到被顯示在顯示單元151上的車輛的前視野的屏幕 901"的縮放觸摸輸入時,被顯示在顯示單元151上的屏幕901"的輸出范圍被按比例縮小。 同時,當感測到被施加到屏幕901"的按比例放大觸摸輸入時,被顯示在顯示單元151上的 屏幕901"的輸出范圍被按比例放大以便被顯示。
[0225] 而且,當與在其上駕駛員保持他的或者她的眼睛的前視野相對應的圖像901"和 內容屏幕被區分地顯示在顯示單元151的第一和第二區域時,當被施加到第一屏幕的預 定方向上的第二輸入,即,被輸出到顯示單元151的車輛的前視野的圖像被感測到時,控制 器180能夠提供控制使得與不同的駕駛視角的屏幕相對應的屏幕被實時輸出到顯示單元 151。
[0226] 例如,參考圖10C的(c),當駕駛員向車輛的前視野的圖像901"施加預定的方向 上的輕敲觸摸輸入,例如,在左/右方向上的輕敲觸摸輸入時,后視野的圖像902 "可以與車 輛的前視野的圖像901"一起進一步被顯示在顯示單元151上。即,與各種駕駛視角相對應 的圖像被順序地顯示。在此,其中圖像被顯示的順序可以對應于其中顯示器被布置在車輛 內(例如,從駕駛員的座位到乘客的座位,或者相反)的順序,或者可以對應于其中駕駛員 的眼睛被移動(在本實例中,重復的圖像被刪除)的順序。
[0227] 在下文中,將會參考圖10D描述當運行車輛被恢復時駕駛員的眼睛從移動終端 100移動到車載視頻顯示設備200的不同顯示器時輸出屏幕的方法的示例。
[0228] 當車輛運行恢復信號被輸入時,處于"連接車"狀態下的移動終端100能夠識別車 輛運行已經從停止狀態變成恢復狀態。當被包括在通過車輛內的前相機捕獲到的圖像中的 信號燈從"停止"變成"操作"時,控制器180確定用于運行車輛的恢復信號已經被輸入。
[0229] 更加詳細地,移動終端100能夠基于在被包括在車輛的前視野中的信號燈中指示 的"操作"信號(例如,綠燈或者左轉信號)識別運行車輛已經被恢復。而且,控制器180能 夠基于從車載視頻顯示設備200或者車輛系統接收到的車輛狀態信息(例如,剎車信號被 停止)作為輔助確定參考確定車輛運行的恢復狀態。
[0230] 當車輛運行變成恢復狀態時,移動終端100能夠向顯示單元151輸出請求駕駛員 集中駕駛的警告通知以引導用戶的眼睛轉向車輛的前視野。例如,當車輛運行恢復信號被 輸入時,控制器180能夠輸出預定的警告通知(例如,顯示諸如"請集中向前"的短語的彈 出窗口)以便通知關于車輛運行的恢復狀態以允許駕駛員的眼睛遠離顯示單元151。
[0231] 因此,當駕駛員的眼睛從移動終端100移動到車載視頻顯示設備200時,控制器 180能夠向顯示器的區域,例如,駕駛員的眼睛已經移動到的車輛頭部單元(HUD),顯示已 經被顯示在移動終端100的顯示單元151上的內容屏幕。更加詳細地,被連接的移動終端 100的用戶跟蹤單元120能夠通過進一步考慮基于第三顯示器和車載視頻顯示設備200的 第一和第二顯示器一起捕獲到的駕駛員的圖像檢測駕駛員的眼睛的方向。
[0232] 然后,響應于檢測到的駕駛員的眼睛從顯示單元到第三顯示器的移動,移動終端 100的控制器180能夠將已經被輸出到顯示單元151的內容屏幕和與車輛的前視野相對應 的屏幕(第一屏幕)輸出到駕駛員的眼睛已經移動到的第三顯示器(在此,即使當駕駛員 的眼睛從顯示單元151已經移動到第三顯示器同時車輛在運行時內容屏幕和第一屏幕可 以被顯示在第三顯示器上)。
[0233] 例如,參考圖10D,當車輛運行被恢復并且檢測到駕駛員的眼睛從移動終端100移 動到車載視頻顯示設備200的頭部單元顯示器201e時,在駕駛員的眼睛被移動之前已經被 顯示在顯示單元151上的車輛的前視野的屏幕901"和內容屏幕920",可以與引導駕駛路徑 的地圖屏幕930 -起顯示。
[0234] 在此,當預定的時間已經流逝時或者當控制命令(例如,駕駛員的語音命令)被輸 入時,被顯示在頭部單元顯示器201e上的車輛的前視野的屏幕901"和內容屏幕920"能夠 從屏幕消失。同時,與駕駛員的視線中的變化相對應的車輛的外部圖像也可以被輸出到其 它車載視頻顯示設備300a和300b。
[0235] 例如,如參考圖1在上面所描述的,移動終端100被連接到可以被戴在駕駛員的身 體的一部分上,例如,在駕駛員的頭上的眼鏡型頭戴式顯示器(HMD) 300a。然而,本發明不限 于此并且在駕駛員的身體上可佩戴的各種類型的可佩戴裝置,諸如眼睛型裝置、耳環型裝 置、項鏈型裝置、以及衣服安裝型裝置也可以被實現。
[0236] 當車輛的第一車載視頻顯示設備200 (例如,車輛頭部單元)和第二車載視頻顯示 設備(例如,頭戴式顯示器)300a是處于與移動終端100的"連接車"狀態下時,控制器180 能夠檢測駕駛員的眼睛從第一車載視頻顯示設備200的第一顯示器(例如,顯示車輛的前 視野的顯示器)移動到其第二顯示器(例如,顯示車輛的后視野的顯示器)。
[0237] 當駕駛員的眼睛從第一車輛視頻顯示設備200的第一顯示器移動到其第二顯示 器時,在第二車載視頻顯示設備300a的顯示器上,控制器180顯示在第一顯示器上顯示的 第一屏幕(例如,前視野的圖像)和在第二顯示器上顯示的第二屏幕(例如,車輛的后視野 的圖像)。
[0238] 因此,因為第一和第二屏幕被顯示在車載視頻顯示設備200的多個顯示器中,所 以不需要根據駕駛員的視線的變化改變。
[0239] 在下文中,將會描述其中當車載處于被停止的狀態時車輛的駕駛員或者同伴乘客 從被連接的移動終端100檢查與駕駛員的視線中的變化相對應的車輛的外部圖像的方法。
[0240] 當車載運行停止信號被接收并且駕駛員的眼睛從顯示車輛的前視野的顯示器移 動到移動終端1〇〇時,如在圖11的(a)中所圖示,與用戶操縱相對應的內容屏幕1020被輸 出到移動終端100的顯示單元151的第一區域并且在其處駕駛員已經事先凝視的車輛的前 視野的圖像1001"被實時顯示在區分第一區域的第二區域中。
[0241] 在此狀態下,當在預設的時間段內(例如,5秒鐘或者更長的時間內)沒有檢測 到直對顯示單元151的駕駛員的眼睛時,控制器151能夠停止顯示車輛的前視野的圖像 1001"(第一屏幕)。
[0242] 同時或者其后,在顯示單元151的區域中,控制器180能夠顯示用于使第一屏幕出 現的指示符。在此,指示符是用于顯示與車輛的前視野或者后視野相對應的屏幕的圖標。例 如,在顯示單元151的上端或者下端區域中,指示符可以被顯示為進度條等等。而且,指示 符可以包括方向指示符,其中要被顯示為如在圖11的(b)中所圖示的圖像出現。
[0243] 當指示符被顯示在顯示單元151上,并且在預定的方向上駕駛員或者同伴乘客將 觸摸輸入施加到指示符時,控制器180能夠在被施加的觸摸輸入的方向上顯示與指示符相 對應的第一屏幕。例如,當用戶向下輕彈被顯示在如在圖11的(b)中所圖示的顯示單元 151的上端區域中的指示符1050時,與車輛的各種駕駛視角相對應的圖像,例如,根據如在 圖11的(c)中所圖示的輕彈觸摸輸入的方向前視野的屏幕1001"和后視野的屏幕1002" 被顯示。
[0244] 當用戶將輕彈觸摸輸入施加到被顯示的屏幕時,控制器180能夠根據觸摸輸入的 方向使前視野的屏幕1001"和后視野的屏幕1002"消失。而且,在如上所述的"連接車"狀 態下,移動終端100和車載視頻顯示設備200可以通過無線通單元110交換屏幕、聲音、以 及其它數據。
[0245] 當移動終端100和車載視頻顯示設備200是處于連接狀態時,移動終端100的用 戶跟蹤單元120能夠基于被連接到移動終端100的車載視頻顯示設備200,例如,車輛頭部 單元,和移動終端100的顯示單元151檢測在預定范圍內的駕駛員的眼睛的方向。
[0246] 例如,移動終端100的控制器180能夠通過分析被設置在車輛中的前相機或者設 置在移動終端100或者車載視頻顯示設備200中的相機獲得的駕駛員的圖像確定是否駕駛 員的面部面向車載視頻顯示設備200的顯示器或者是否駕駛員凝視車輛的前窗口,S卩,前 視野。因此,控制器180能夠從車載視頻顯示設備200接收指示駕駛員的眼睛是否被固定 到車載視頻顯示設備200的顯示器的信號或者駕駛員的圖像。
[0247] 以這樣的方式,當檢測到駕駛員的視線中的變化時,并且當確定移動終端100已 經進入視頻共享模式時,控制器180能夠向不同的視頻顯示設備300c或者300b ( "第二視 頻顯示設備"),例如,后座顯示裝置或者同伴乘客的終端傳送在車載視頻顯示設備200 ("第 一視頻顯示設備")中顯示的圖像,例如,在前視野中出現的外部圖像,和被顯示在顯示單元 151上的圖像,例如,與網頁屏幕中的駕駛員的眼睛的方向相對應的圖像。
[0248] 在此,當駕駛員的眼睛從車載視頻顯示設備200或者移動終端100的顯示單元151 移動到不同的方向時,控制器180能夠將在連接的不同的視頻顯示設備300a或者300b,即, 第二視頻顯示設備中的屏幕顯示變成與駕駛員的眼睛已經移動到的位置相對應的圖像并 且對其進行顯示。
[0249] 當將與駕駛員的眼睛相對應的圖像從移動終端100傳送到第二視頻顯示設備時, 第二視頻顯示設備的用戶可以將預定的輸入施加到接收到的圖像。第二視頻顯示設備當將 通過包括對接收到的圖像的輸入獲得的被更新的圖像傳送到移動終端100時,可以將圖像 共享請求遞送給被連接到移動終端100的車載視頻顯示設備200。然后,通過無線通信單元 110,移動終端100將接收到的更新圖像傳送到已經接受圖像共享的第一視頻顯示設備。
[0250] 同時,第二視頻顯示設備可以響應于從移動終端100傳送的圖像共享請求接受或 者拒絕圖像共享。當接收到共享接受信號時,控制器180將在駕駛員的眼睛直對的屏幕上 顯示的圖像傳送到第二視頻顯示設備。控制器180能夠控制移動終端100的顯示單元151 或者音頻輸出模塊152以輸出共享拒絕消息。因此,雖然在車輛內的不同視頻顯示設備200 拒絕圖像共享請求,但是相對應的意圖僅被顯示在駕駛員的移動終端100中,并且因此,駕 駛員的駕駛沒有被直接地干擾。
[0251] 如上所述,因為在車輛內的同伴乘客也能夠實時觀看駕駛員看到的圖像,所以當 他或者她在駕駛車輛時駕駛員的分心被最小化,提供了安全駕駛,并且因為駕駛員能夠在 沒有執行操縱的情況下與同伴乘客一起觀看圖像,所以駕駛員便利被增強。
[0252] 在下文中,將會參考圖12、圖13A、以及圖13B詳細地描述根據本發明的另一實施 例的移動終端的控制方法。特別地,圖12是圖示根據本發明的另一實施例的移動終端的控 制方法的流程圖,并且圖13A至圖13C是圖示在圖12的流程圖的概念視圖。
[0253] 首先,參考圖12,移動終端100被無線地連接到多個視頻顯示設備200、300c、以及 300b (在下文中,多個視頻顯示設備可以引用附圖標記" 200 "),S卩,第一和第二視頻顯示設 備(S501)。
[0254] 在此,第一視頻顯示設備可以是被布置在車輛的前座中的車輛頭部單元,或者可 以是可以將圖像投射到車輛的前窗口的投影儀等等。而且,第二視頻顯示設備可以是被布 置在車輛的后座中的顯示裝置或者車輛的同伴乘客的移動終端。
[0255] 在移動終端100和視頻顯示設備之間的連接指的是"連接車"狀態,其中移動裝置 和信息系統(包括,例如,抬頭顯示器(HUD)、投影儀、車輛的儀表板、車輛的后座顯示裝置 等等,在下文中,其可以被稱為"車輛頭部單元")根據通過車聯網聯盟(CCC)規定的電話到 車(P2C)服務標準,如上所述。
[0256] 在"連接車"狀態下,移動終端100和車載視頻顯示設備200能夠通過無線通信單 元110交換屏幕、聲音、其它數據等等。特別地,在本發明的實施例中,通過例如無線保真 (Wi-Fi)收發器、藍牙收發器等等無線地連接的移動終端100和車載視頻顯示設備200將會 被描述為示例。然而,這樣的連接不限于無線連接并且移動終端100能夠以有線方式被連 接到至少一個車載視頻顯示設備200。
[0257] 不同的圖像也能夠被輸出到相互連接的移動終端和車載視頻顯示設備200的屏 幕(S502)。例如,根據用戶操縱,內容屏幕,例如,應用的執行屏幕或者網頁屏幕可以被輸出 到移動終端100的顯示單元151。而且,與車輛的前視野相對應的外部圖像或者用于執行道 路引導的地圖數據可以被輸出到車載視頻顯示設備200的顯示器(例如,車輛的前頭、頭部 單元顯示器等等)。
[0258] 而且,在"連接車"狀態下,移動終端100的用戶跟蹤單元120能夠基于相互連接 的移動終端100的主體的顯示單元151和第一視頻顯示設備(例如,車輛頭部單元)檢測 在預定范圍內的駕駛員的眼睛的方向(S503)。
[0259] 更加詳細地,移動終端100通過被設置在移動終端100主體中的相機121連續地 檢測是否駕駛員看著第一視頻顯示設備的顯示器或者是否駕駛員看著移動終端100的顯 示單元。
[0260] 而且,移動終端100能夠從車載視頻顯示設備200接收通過車輛內的相機(第一 相機)獲得的第一捕獲圖像。然后,移動終端100能夠通過分析接收到的第一捕獲圖像和 通過移動終端100的相機(第二相機)獲得的第二捕獲圖像檢測駕駛員的眼睛的方向。通 過用戶跟蹤單元120的視頻分析模塊123可以執行視頻分析過程。而且,通過在接收第一 和第二捕獲圖像之后識別駕駛員的面部的方向和/或駕駛員的瞳孔的方向,控制器180能 夠確定駕駛員的眼睛的方向、駕駛員的眼睛被固定到的位置等等。
[0261] 當連續地監視到駕駛員的視線中的變化時,控制器180能夠確定是否移動終端進 入視頻共享模式(S504)。即,控制器180確定是否從移動終端100主體的第一視頻顯示設 備已經接收到視頻共享請求信號。在另一示例中,可以從車輛內的不同視頻顯示設備(例 如,第二視頻顯示設備)接收到這樣的視頻共享請求信號。
[0262] 在此,進入視頻共享模式,其指的是處于"連接車"狀態的車載設備能夠共享屏幕、 聲音、以及其它數據,可以包括當與在車輛內不同的裝置共享在第一視頻顯示設備的顯示 器上顯示的圖像時和當與在車輛內不同的被連接的裝置共享在移動終端100的顯示單元 151上顯示的內容屏幕時兩者。
[0263] 此外,可以通過預設的語音命令、手勢輸入、或者鍵輸入執行進入視頻共享模式。 在此,當駕駛員進入視頻共享模式時,僅可以通過語音命令(例如,高喊"共享視頻")進入 視頻共享模式或者當"連接車"狀態開始以確保安全駕駛時視頻共享可以被設置為作為默 認執行。即,可以實現使得,一連接就執行視頻共享功能。而且,控制器180能夠輸出將指 示視頻共享模式已經進入的通知消息(例如,彈出窗口或者視頻聲音)輸出到顯示單元151 或者音頻輸出模塊152。
[0264] 當在操作S504中根據確定結果視頻共享模式已經進入時,控制器180將與檢測到 的駕駛員的眼睛相對應的屏幕傳送到車輛內的不同裝置,即,到第二視頻顯示設備(S505)。 艮P,控制器180將在第一視頻顯示設備上顯示的第一圖像和在顯示單元151上顯示的第二 圖像當中的與通過用戶跟蹤單元120檢測到的駕駛員的眼睛的方向相對應的圖像傳送到 連接的第二視頻顯示設備。因此,車輛的同伴乘客能夠實時觀看駕駛員觀看的圖像。在此, 與被傳送到第二視頻顯示設備的圖像相同的圖像可以被輸出到顯示單元151或者最初顯 示的屏幕可以如原樣顯示。
[0265] 例如,參考圖13A,當駕駛員的眼睛被固定到顯示車輛的前視野的顯示器(例如, 通過車輛頭部單元200的投影儀前視野中的圖像被投射到的車輛的前窗口)200時,以及 當駕駛員輸入語音命令"共享視頻"時,連接的移動終端1〇〇接收在車輛的前視野中的圖像 601并且將接收到的圖像601實時傳送到車輛的后座顯示設備300c。
[0266] 因此,車輛的前視野的圖像601"被實時顯示在后座顯示設備300c的至少一個區 域中。可以將駕駛員的語音命令與被存儲在存儲器160中的語音命令進行比較。當駕駛員 的語音命令與被存儲的語音命令相同時,語音命令可以被視為控制命令。
[0267] 而且,參考圖13B,當駕駛員900的眼睛被固定到移動終端100的顯示單元151并 且視頻共享信號(例如,語音命令或鍵輸入信號)被輸入時,移動終端100將被輸出到顯示 單元151的屏幕,例如,應用的執行屏幕602,實時輸出到后座顯示裝置300c。因此,應用的 執行屏幕602"被實時顯示在后座顯示裝置300c的至少一個區域中。在此,當駕駛時,根據 駕駛限制,駕駛員被限制不能通過移動終端100觀看一般內容。因此,雖然視頻共享請求信 號被輸入,但是僅當車輛運行停止信號(例如,剎車操作信號)被輸入時才可以執行視頻共 享過程。
[0268] 在此,當駕駛員保持他的或者她的眼睛向前以駕駛車輛時,如在圖13A中所圖示, 車輛的前視野的圖像601"被顯示在車輛的后座顯示設備300c上。在駕駛員的眼睛被移動 之前已經被顯示在后座顯示設備300c上的圖像602"可能消失,可以被按比例縮小以被顯 示,或者可以在背景中執行。
[0269] 而且,控制器180能夠縮放在第一視頻顯示設備上顯示的圖像601或者被輸出到 顯示單元151的圖像602并且其可以在后座顯示設備300c中被顯示。在此,基于具有較低 的像素的設備可以改變圖像的像素。
[0270] 而且,控制器180能夠僅提取與駕駛員的眼睛被固定到的預定范圍相對應的部分 圖像并且將被提取的部分圖像傳送到后座顯示設備300c。而且,控制器180能夠包括在與 駕駛員的眼睛相對應的圖像中駕駛員不能夠觀看的盲點的圖像,并且將其傳送到后座顯示 設備300c。
[0271] 同時,根據用戶操縱(例如,根據駕駛員的視線中的變化)被顯示在第二視頻顯示 設備300c上的共享的圖像可以被移動到屏幕的不同區域,被校正的內容可以被輸入,或者 共享的圖像可以被按比例放大或者縮小或者可以從屏幕消失。
[0272] 如上所述,根據本發明的實施例,根據與車載視頻顯示設備相連接的移動終端,可 以與車輛的同伴乘客一起實時共享駕駛員當前觀看的圖像,并且通過駕駛員的語音命令和 眼睛跟蹤執行這樣的視頻共享,從而當駕駛車輛時可以最小化駕駛員的分心,提供安全駕 駛的環境。
[0273] 在下文中,將會參考圖14和圖15A至圖15E詳細地描述根據本發明的實施例的其 中駕駛員和同伴乘客通過車載連接的裝置交互的移動終端的控制方法。圖14是圖示根據 本發明的實施例的移動終端的控制方法的流程圖,并且圖15A至圖15E是圖示圖14的流程 圖的概念視圖。
[0274] 首先,參考圖14,根據本發明的實施例的移動終端100可以基于預定的控制命令 進入設備連接模式(S701)。在此,控制命令包括特定鍵輸入、語音命令、手勢輸入等等,并且 根據控制命令用于進入設備連接模式的屏幕被輸出到顯示單元151。
[0275] 更加詳細地,控制器180從用戶(或駕駛員)接收用于搜尋要被連接的可用車載 視頻顯示設備的請求。一用于進入設備連接模式的屏幕被輸出就可以生成這樣的請求。當 搜索請求被輸入時,控制器180在顯示單元151上顯示可用于連接的多個視頻顯示設備。
[0276] 在此,控制器180能夠在顯示單元151上顯示與可用于被連接到移動終端100的 主體的車載視頻顯示設備相對應的識別圖像。識別圖像可以被事先存儲在移動終端100的 存儲器160中或者可以是默認圖像、捕獲圖像、相對應的設備的縮略圖圖像、以及相對應設 備的用戶圖像中的任意一個,其可以進一步與相對應的設備有關的圖像一起顯示。因此,控 制器180能夠檢索在移動終端100的地址列表或者電話本中存儲的用戶圖像。
[0277] 當可連接的車載視頻顯示設備在顯示單元151上被顯示為預定的識別圖像時,控 制器180將與根據用戶輸入選擇的識別圖像相對應的視頻顯示設備連接到移動終端180主 體(S702)。在此,通過被施加到識別圖像的用戶輸入,例如,觸摸輸入,可以執行通過用戶輸 入的"選擇",或者通過與特定識別圖像有關的語音命令或者諸如眨眼的手勢等等執行。
[0278] 例如,參考圖15A,當進入設備連接模式時,在車輛內的可連接的設備的識別圖像 81、82、以及83被顯示在顯示單元151上。在此,識別圖像81、82、以及83可以包括縮略圖 圖像81a、82a、以及83a,和用戶圖像81b、82b、以及83b。當可連接的視頻顯示設備的識別 圖像被顯示時,并且當用戶(或者駕駛員)觸摸被期待被連接的視頻顯示設備200的識別 圖像時,在其復選框中標記"v",并且控制器180將相對應的設備連接到移動終端180主體。
[0279] 同時,考慮到可連接的車載視頻顯示設備的相對位置控制器180能夠顯示識別圖 像以幫助用戶選擇。而且,如上所述,可以在根據如上所述的用戶輸入選擇的識別圖像中標 記 "V"。
[0280] 在本實例中,可以使用被設置在車輛中的無線分享器(例如,接入點(AP))基于信 號強度評估可連接的車載視頻顯示設備的相對位置。例如,參考圖15A,當可連接的車載視 頻顯示設備被定位在車輛的前座中時,其識別圖像可以被顯示在顯示單元151的上部區域 中,并且當可連接的車載視頻顯示設備被定位在車輛的后座中時,其識別圖像可以被顯示 在顯示單元151的下部區域中。而且,考慮到車輛內的位置,車輛的圖像可以被顯示在顯示 單元151上并且可連接的車載視頻顯示設備的圖像可以被顯示在其上。
[0281] 此外,通過車輛內的第一視頻顯示設備(例如,車輛頭部單元)可以執行可連接的 車載視頻顯示設備的表示和選擇或者通過車輛內的第二視頻顯示設備(例如,后座顯示設 備或者同伴乘客的移動終端)可以執行可連接的車載視頻顯示設備的表示和選擇。
[0282] 當移動終端100和車載視頻顯示設備200被連接并且第一圖像(例如,車輛的前 視野的圖像)被輸出到第一視頻顯示設備200并且第二圖像(例如,網頁屏幕)被輸出到 移動終端100的顯示單元151 (S703)時,控制器180能夠通過被設置在車輛中和/或在移 動終端180主體中的相機檢測駕駛員的眼睛的變化(S704)。
[0283] 更加詳細地,通過分析經由第一相機基于第一視頻顯示設備的顯示器捕獲到的駕 駛員的圖像和經由第二相機基于移動終端180的主體的顯示單元151捕獲到的圖像,移動 終端100的用戶跟蹤單元120能夠檢測駕駛員的眼睛被固定到的位置。
[0284] 當駕駛員的眼睛被固定到特定的屏幕時預設的語音命令(例如,"共享")被輸入 時,控制器180能夠進入視頻共享模式(S705)。通過預設的語音命令、手勢輸入、或者鍵輸 入可以執行進入視頻共享模式。
[0285] 當進入視頻共享模式時,控制器180將與檢測到的駕駛員的眼睛相對應的屏幕實 時傳送到不同的設備,即,到第二視頻顯示設備(S706)。在本實例中,在與檢測到的駕駛員 的眼睛相對應的屏幕被顯示在第二視頻顯示設備之前,控制器180能夠將詢問是否接受視 頻共享的消息傳送到第二視頻顯示設備。然后,詢問是否接受視頻共享的消息在第二視頻 顯示設備的顯示器中被彈出,如在圖15B中所示。然后,第二視頻顯示設備的用戶將觸摸輸 入施加到在彈出窗口中顯示的"接受"圖標和"拒絕"圖標中的任意一個,并且第二視頻顯 示設備將與觸摸輸入相對應的信號傳送到移動終端1〇〇。
[0286] 當從第二視頻顯示設備接收到共享接受信號(或者響應信號)時,控制器180能 夠將與駕駛員的眼睛被固定到的位置相對應的屏幕信息傳送到與從設備連接模式屏幕選 擇的識別圖像相對應的視頻顯示設備。在此,當選擇多個識別圖像時,控制器180將屏幕信 息同時傳送到與其相對應的多個視頻顯示設備。
[0287] 例如,如在圖15C中所示,當駕駛員通過前窗口 200保持他的或者她的眼睛在前側 上同時駕駛車輛時,并且當視頻共享模式被進入時,前視野的相同圖像801"也被實時輸出 到后座顯示器300c。此外,指示駕駛員看著的前視野的圖像801被接收到并且被傳送到不 同的被連接的設備300c的"指示符"(例如,指示"被傳送"的文本或者相對應的圖像)可 以被顯示在移動終端100的顯示單元151上。
[0288] 同時,當在與所選擇的識別圖像相對應的視頻顯示設備上在預設的時間段(例 如,五秒鐘等等)內沒有檢測到駕駛員的眼睛時,控制器180不能將屏幕信息傳送到相對應 的視頻顯示設備,從而防止網絡的過載并且到不同視頻顯示設備的傳輸率可以被增加。
[0289] 當通過移動終端100由第二視頻顯示設備實時共享被顯示在第一視頻顯示設備 上的圖像時,控制器180能夠從第二視頻顯示設備接收包括預定輸入的更新圖像(S707)。
[0290] 當接收到更新圖像時,控制器180將詢問是否接受視頻共享的消息傳送到最初已 經請求視頻共享的設備,即,到第一視頻顯示設備(S708)。當從第一視頻顯示設備接收到響 應信號(或者共享接受信號)時,控制器180將從第二視頻顯示設備接收到的更新圖像傳 送到第一視頻顯示設備(S709)。
[0291] 在此,當第一視頻顯示設備是被布置在駕駛員的座位中的車輛頭部單元時,詢問 是否接受視頻共享的消息可以通過語音被輸出或者可以不被輸出,以便不干擾駕駛員的駕 駛。而且,當從駕駛員沒有接收到共享接受信號時,可以考慮到視頻共享已經被拒絕,并且 可以不顯示更新圖像。
[0292] 同時,當第二視頻顯示設備對共享圖像執行預定的輸入時可以同時執行前述的順 序過程。在此,預定的輸入可以指的是將線、文本、或者圖像直接地繪制或添加到從第一視 頻顯示設備或者移動終端100傳送的共享圖像的特定對象或者至少一個區域。
[0293] 例如,參考圖15D,當在后座顯示設備300c中實時共享在駕駛員看著的車輛的前 窗口 200上顯示的前視野的圖像時,并且當在后座中存在的同伴乘客在共享圖像中包括的 特定對象(例如,經過道路的小狗)中繪制線840時,通過移動終端100這樣的更新圖像 803與相同的線840"被實時顯示在車輛的前窗口 200上。
[0294] 在另一示例中,在被校正的內容被輸入到第二視頻顯示設備并且通過輸入完成信 號生成更新圖像之后,其可以通過移動終端被傳送到第一視頻顯示設備。從而,駕駛員可以 被引導以通過被繪制的線看到對象。
[0295] 而且,雖然更新圖像被顯示在第一視頻顯示設備上,但是如果其干擾駕駛員的駕 駛,則通過預定的控制命令可以返回先前的圖像。例如,當更新圖像被顯示在第一視頻顯示 設備的顯示器(例如,車輛的前窗口)中時,并且當駕駛員大喊或者講出預設的語音命令 "刪除"時,移動終端100能夠停止傳送更新圖像并且顯示先前的圖像,即,車輛的前視野的 圖像。
[0296] 而且,相對于用于共享更新圖像的請求,當從第一視頻顯示設備接收到視頻共享 拒絕信號時,如在圖15E中所圖示,"(第一視頻顯示設備)拒絕共享"的消息彈出窗口 803 可以被顯示在后座顯示設備300c上(S710)。在本實例中,通過移動終端100接收到的更新 圖像可以被輸出到已經接受共享請求的不同的視頻顯示設備。
[0297] 在下文中,將會參考圖16描述移動終端共享車輛的同伴乘客在"連接車"狀態下 觀看的圖像的控制方法。特別地,圖16是圖示根據本發明的實施例的移動終端允許同伴乘 客共享被提供的視頻的控制方法的流程圖,圖17A至圖17C是圖示圖16的流程圖的概念視 圖,并且圖18A和圖18B是圖示根據本發明的實施例的當存在共享來自多個視頻顯示設備 的視頻的請求時在車載視頻顯示設備中顯示視頻的方法的概念視圖。
[0298] 首先,根據本發明的實施例的移動終端100可以被連接到車輛內的多個視頻顯示 設備,即,第一和第二視頻顯示設備(S901)。例如,移動終端100和車載視頻顯示設備200 可以通過Wi-Fi收發器或者藍牙收發器被無線地連接(然而,本發明不限于此并且可以根 據環境進行有線連接)。
[0299] 如在上面所論述的,第一視頻顯示設備可以是被布置在車輛的前座中的車輛頭部 單元或者可以將圖像投射到車輛的前窗口的投影儀(第一視頻顯示設備的顯示器)。而且, 第二視頻顯示設備可以是被布置在車輛的后座中的顯示裝置或者在車輛內的同伴乘客的 移動終端。
[0300] 而且,如在上面所提及的,在移動終端100和視頻顯示設備之間的連接指的是"連 接車"狀態,其中信息系統和移動終端根據通過車聯網聯盟(CCC)規定的電話到車(P2C)服 務標準。在"連接車"狀態下,移動終端100和車載視頻顯示設備200可以通過無線通信單 元110交換屏幕、聲音、其它數據等等。
[0301] 同時,與同伴乘客的操縱相對應的內容圖像被輸出到第二視頻顯示設備的顯示器 (5902) 。內容圖像可以是與用戶的鍵操縱或者執行命令相對應的圖像。例如,內容圖像可 以是應用的執行屏幕、視頻、圖像等等。在此,例如,同伴乘客可以操縱第二視頻顯示設備以 執行地圖應用(或者搜索網絡服務器)以獲得目的地或者車輛的駕駛路線的搜索結果,并 且在此,顯示搜索結果的地圖數據可以是前述內容圖像。
[0302] 當預定的內容圖像被輸出到第二視頻顯示設備并且視頻共享模式被進入時 (5903) ,控制器180從第二視頻顯示設備接收相對應的內容圖像(例如,地圖數據)(S904)。 接收到的內容圖像可以被顯示在顯示單元151上或者可以不被顯示。
[0303] 另外,當從第二視頻顯示設備接收到共享請求時,控制器180通過無線通信單元 110將詢問是否接受視頻共享的消息傳送到第一視頻顯示設備。當從第一視頻顯示設備接 收到響應信號,即,共享接受信號時(S905),控制器180能夠在第一視頻顯示設備的顯示器 上顯示與接收到的內容圖像相對應的圖像對象(S906)。
[0304] 圖17A示出與內容圖像相對應的圖像對象被顯示在車輛頭部單元的下端區域中 的示例,但是在另一示例中,圖像對象可以被顯示在駕駛員的眼睛被固定到的位置中。而 且,在另一實施例中,與內容圖像相對應的圖像對象可以被顯示在沒有覆蓋車輛的前視野 的區域中。
[0305] 在此,與內容圖像相對應的圖像對象可以包括表示相對應的內容圖像的代表性圖 像和第二視頻顯示設備的用戶圖像中的任意一個,或者可以包括它們兩者。而且,代表性的 圖像可以是相對應的內容圖像的縮略圖圖像、應用的圖標、以及預覽屏幕中的任意一個。
[0306] 同時,在操作S905中,當從第一視頻顯示設備接收到拒絕共享內容圖像的信號 時,控制器180將共享拒絕消息傳送到第二視頻顯示設備(S910)。因此,相對應的消息彈出 窗口被顯示在第二視頻顯示設備的顯示器上。在本實例中,消息彈出窗口可以包括關于已 經拒絕共享的設備的信息。而且,如果車輛當前正在運行時(即,當車輛運行停止信號沒有 被輸入時),這樣的共享拒絕信號可以被自動地生成以確保安全駕駛。
[0307] 當在第一視頻顯示設備(例如,車輛頭部單元)中共享內容圖像時,駕駛員可以通 過眼睛跟蹤檢查和控制相對應的內容圖像。更加詳細地,移動終端100能夠分析通過其相 機獲得的圖像以確定駕駛員的眼睛被固定到的第一視頻顯示設備的顯示器的區域或者點 (S907)。
[0308] 當根據確定結果在預設的時間段內(例如,在兩秒鐘或者更多秒鐘內)駕駛員的 眼睛被固定到與內容圖像相對應的圖像對象時,控制器180能夠將顯示圖像對象變成相對 應的內容圖像(例如,從車輛的后座顯示設備傳送的地圖數據)并且對其進行顯示(S908)。
[0309] 例如,參考圖17A,當同伴乘客通過車輛的后座顯示設備300c搜索目的地的駕駛 路線并且通過預定的鍵或者預定的用戶輸入(包括預設的語音命令和手勢輸入)請求共 享時,通過移動終端100首先接收到相對應的圖像901。當駕駛員接受共享請求時,與圖像 901,即,縮略圖圖像相對應的圖像對象"901"",被顯示在車輛頭部單元200的顯示器上。
[0310] 當在預定的時間段內駕駛員900凝視在顯示器上顯示的圖像對象901"時,移動終 端100在顯示器上顯示通過放大相對應的縮略圖圖像獲得的內容圖像901""。即,駕駛員可 以通過眼睛跟蹤檢查被共享的內容圖像。而且,控制器180能夠基于駕駛員的眼睛控制在 第一視頻顯示設備的顯示器上顯示的內容圖像。即,可以通過駕駛員的眼睛跟蹤來控制被 顯示的內容圖像的諸如放大/縮小、移動、去除、重新傳輸等等的控制功能。
[0311] 例如,參考圖17B的(a),當從后座顯示設備300c傳送的地圖數據被顯示在車輛頭 部單元200的顯示器的第一區域中時,當在預定的時間段內駕駛員凝視區分于第一區域的 第二區域時,與后座顯示設備300c共享的內容圖像可能消失,如在圖17C中所圖示。
[0312] 在另一實施例中,如在圖17B的(b)中所圖不,相對應的內各圖像可以根據觸摸輸 入從顯示器消失。因此,僅存在的道路引導圖像903被顯示在車輛頭部單元200的顯示器 上。而且,在另一實施例中,當預設的觸摸被施加到相對應的內容圖像時,圖像可以被縮小、 放大、或者按比例放大或者縮小以便被顯示。
[0313] 同時,當在操作S907中根據確定結果在預設的時間段內駕駛員的眼睛在與內 容圖像相對應的圖像對象外部時,控制器180能夠停止在顯示器上顯示相對應的對象 (S909)。
[0314] 根據本發明的實施例,通過多個視頻顯示設備可以同時進行視頻共享請求或者在 預定的時間間隔處進行。
[0315] 在本實例中,與從第二視頻顯示設備(例如,車輛的后座顯示設備或者同伴乘客 的移動終端)300c接收到的圖像(例如,第一地圖數據)相對應的第一屏幕1001和與從第 三視頻顯示設備(例如,車輛的不同后座顯示設備或者同伴乘客的移動終端)300c"接收到 的圖像(例如,第二地圖數據)相對應的第二屏幕1002可以被顯示在已經接受視頻共享的 第一視頻顯示設備的顯示器上,如在圖18A中所圖示。
[0316] 在此,第一和第二屏幕可以包括第一和第二對象101和102并且包括視頻顯示設 備中的每一個的識別信息、用戶信息、以及/或者車輛內的位置信息。圖18A圖示其中設備 200上的屏幕1003包括包含用戶信息的第一和第二圖像對象1010和1020的示例。
[0317] 當第一和第二圖像對象1010和1020被顯示時,并且當在預設的時間段內,駕駛員 的眼睛被固定到被顯示的特定圖像對象,例如,在圖18B中的第一圖像對象1010時,控制器 180在車輛頭部單元200的顯示器上顯示與第一圖像對象相對應的內容圖像,S卩,第一地圖 數據1101"。如所圖示的,第二圖像對象可以被移動以與第一地圖數據1101"的邊界相鄰以 便被顯示。而且,在另一示例中,第二圖像對象和/或與第二圖像對象相對應的內容圖像可 以從車輛頭部單元200的顯示器消失。
[0318] 同時,當駕駛員想要觀看與第一和第二圖像對象相對應的內容圖像時,多個屏幕 可以被顯示在被區分的區域中。即,用于同時顯示多個應用的執行結果的Java2微型版本 平臺(J2ME平臺)可以被安裝在第一視頻顯示設備中,即,車輛頭部單元(HUD)中。J2ME平 臺具有多個虛擬機(MVM)功能和在單個屏幕中同時顯示多個應用的執行結果的功能。
[0319] 更加詳細地,為了允許第一應用的執行結果,S卩,第三圖像,和第二應用的執行結 果,即,第四圖像,僅被顯示在車輛頭部單元的顯示器的整個屏幕中的所要求的區域中,實 際幀緩沖器(actual frame buffer)和虛擬幀緩沖器的尺寸被調節為不同的,并且當要被 顯示在虛擬幀緩沖器中的圖像的尺寸被調節時,各自的虛擬幀緩沖器被集成在單個虛擬幀 緩沖器中。被集成的單個虛擬幀緩沖器被復制到實際幀緩沖器以便被同時顯示在單個屏幕 上。
[0320] 當多個內容圖像,S卩,第三和第四圖像,被同時顯示在車輛頭部單元中時,當被施 加到第一和第二圖像對象中的至少一個的第一輸入被感測到時,控制器180能夠放大與相 對應的圖像對象相對應的內容圖像以便被顯示。
[0321] 例如,當從第二視頻顯示設備接收到的"第一地圖數據"被顯示在車輛頭部單元 200的顯示器的第一區域中時,從第三視頻顯示設備接收到的"第二地圖數據"被顯示在第 二區域中,并且與相對應的設備有關的圖像對象被包括在各自的區域中,例如,當在預設的 時間段內駕駛員的眼睛被固定到第一區域時,"第一地圖數據"可以被顯示在車輛頭部單元 200的顯示器的整個區域中。在本實例中,其它的圖像可以作為背景被執行或者可以從顯示 器消失。
[0322] 而且,當多個內容圖像,S卩,第三和第四圖像,被同時顯示在第一視頻顯示設備中, 艮P,車輛頭部單元中時,當被施加到與各自的圖像對象相對應的第三和第四圖像中的至少 一個的第二輸入被感測到時,控制器180能夠從顯示器去除相對應的圖像。
[0323] 此外,當與第三圖像相對應的圖像對象被顯示在第一視頻顯示設備的顯示器上 時,當鎖定功能被激活時,控制器180能夠同時在顯示器上顯示第三圖像,盡管駕駛員的眼 睛沒有被固定到其。在此,例如,當根據語音引導信息的駕駛員的預設的語音命令(例如, "保持顯示"的大喊)被提供時鎖定功能可以被設置。然而,本發明不限于此并且鎖定功能 可以被設置為通過駕駛員的鍵操縱或者手勢輸入執行。
[0324] 圖19A至圖19C是圖示根據本發明的實施例的用于當存在共享來自相同的視頻顯 示設備的新視頻的請求時在車載視頻顯示設備中顯示視頻的方法的概念視圖。
[0325] 首先,參考圖19A,當車輛的同伴乘客通過后座顯示設備300c搜索目的地的駕駛 路線并且通過預定的鍵或者預定的用戶輸入(包括預設的語音命令和手勢輸入)請求和駕 駛員共享時,通過移動終端100首先接收到相對應的圖像1101。在本實例中,如圖所示,消 息"從設備(后座顯示設備)接收到地圖1圖像"可以被輸出到移動終端的顯示單元151。 當駕駛員接受共享請求時,與圖像1101,即,用戶圖像相對應的圖像對象1110被顯示在車 輛頭部單元200的顯示器的區域中。
[0326] 當在預定的時間段內駕駛員凝視被顯示在顯示器上的圖像對象1110時,與圖像 對象相對應的內容圖像,即,第一地圖數據,被顯示。在本實例中,現有的被顯示的道路引導 圖像1003被按比例縮小并且連續地顯示在區分于第一地圖數據的區域中或者可以在背景 中被執行。
[0327] 在此狀態下,當從相同的視頻顯示設備,S卩,車輛的后座顯示設備300c,接收到用 于共享不同的內容圖像的請求時,控制器180能夠在車輛頭部單元200的顯示器的區域中 彈出與用于共享新圖像的請求相對應的通知消息。可替選地,如在圖19B中所圖示,消息 "從設備(后座顯示設備)接收到地圖2圖像"可以被輸出到移動終端100的顯示單元151 并且與顯示設備相對應的圖像對象1110b可以被顯示在車輛頭部單元200的顯示器上。
[0328] 當從相同的顯示設備在預定的時間間隔處接收到用于共享更新圖像或者不同圖 像(在下文中,被稱為"新圖像")的請求時,控制器180能夠以如在圖19C的(a)中所圖示 的重疊方式將新圖像1102"輸出到現有的圖像1101",或者在如在圖19C的(b)中所圖示的 不同區域中顯示新圖像1102"和現有的圖像1101"。
[0329] 同時,當相對于共享新圖像的請求接收到共享拒絕信號時,控制器180能夠輸出 指示共享請求已經被拒絕的消息。而且,例如,在前述的實施例中,與車輛的目的地或者車 站相關的地圖數據被描述為內容圖像,但是本發明不限于此并且被應用于當車載視頻顯示 設備與不同的視頻顯示設備共享從預定的服務器接收到的信息,例如,交通信息。
[0330] 如上所述,在根據本發明的實施例的移動終端及其控制方法中,因為當車輛在運 行時根據駕駛員的眼睛中的變化與先前的駕駛視角相對應的屏幕被一起顯示在與當前駕 駛視角相對應的顯示器上,所以駕駛員可以安全地駕駛車輛并且能夠增強駕駛員便利。
[0331] 而且,通過利用移動終端根據駕駛員的眼睛中的自然變化控制車輛視頻顯示設備 的顯示器,當駕駛車輛時駕駛員不需要執行輸入。另外,同伴乘客可以共享駕駛員看著的圖 像,并且駕駛員可以通過眼睛跟蹤檢查與由同伴乘客搜索到的駕駛路線有關的信息,駕駛 員的分心可以被最小化,確保安全駕駛,并且駕駛員可以被提供有定制的交通信息。
[0332] 在本發明的實施例中,前述的方法可以被實現為能夠通過在程序記錄介質中被處 理器讀取的代碼。處理器可讀介質可以包括任何類型的記錄設備,其中存儲了可以由計算 機系統讀取的數據。處理器可讀介質可以包括如1、狀1、^-1?01、磁帶、軟盤、光數據存儲設 備等。處理器可讀介質還包括以載波或信號的形式的實現(例如,經由互聯網的傳輸)。
[0333] 在配置和方法的應用中沒有限制如上所述的根據本發明的實施例的移動終端,但 是實施例的整體或者一部分能夠被選擇性地組合以被配置成各種實施例。
[0334] 當在不脫離其特征的情況下以多種形式實現實施例時,也應理解的是,上述實施 例不受前面描述的任何細節的限制,除非另有規定,否則應在所附權利要求中限定的范圍 內被廣泛地解釋。因此,落入在權利要求的范圍或者該范圍的等同物內的各種變化和修改 因此意圖被所附的權利要求包含。
【權利要求】
1. 一種移動終端 顯示單元; 無線通信單元,所述無線通信單元被配置成無線地連接到車載視頻顯示設備;以及 控制器,所述控制器被配置成: 檢測駕駛員的眼睛從在所述車載視頻顯示設備中包括的第一顯示器到第二顯示器的 方向變化,并且 響應于檢測到的駕駛員的眼睛從所述第一顯示器到所述第二顯示器的方向變化,控制 所述第二顯示器顯示在所述第一顯示器上顯示的第一屏幕的至少一部分。
2. 根據權利要求1所述的移動終端,其中,所述控制器進一步被配置成基于在車輛中 可拆卸地布置的多個相機檢測所述駕駛員的眼睛的方向變化。
3. 根據權利要求1所述的移動終端,其中,所述控制器進一步被配置成: 從所述駕駛員的眼睛被固定到的所述第一屏幕提取部分圖像,并且 在所述第二顯示器的區域中顯示被提取的部分屏幕。
4. 根據權利要求1所述的移動終端,其中,所述控制器進一步被配置成: 從所述車載視頻顯示設備請求在所述第一顯示器上顯示的第一屏幕的實時傳輸,并且 控制所述第二顯示器在所述第二顯示器的區域中實時顯示根據請求接收到的所述第 一屏幕。
5. 根據權利要求1所述的移動終端,其中,所述控制器進一步被配置成: 檢測所述駕駛員的眼睛從所述第二顯示器到所述第一顯示器的移動, 控制所述第二顯示器停止在所述第二顯示器的區域上顯示所述第一屏幕,并且 控制所述第一顯示器在所述第一顯示器的區域上顯示在所述第二顯示器上顯示的第 二屏幕的至少一部分。
6. 根據權利要求1所述的移動終端,其中,所述控制器進一步被配置成: 檢測所述駕駛員的眼睛從所述第一顯示器到所述移動終端的顯示單元的移動,并且 在所述移動終端的顯示單元上顯示在所述第一顯示器上顯示的第一屏幕的至少一部 分。
7. 根據權利要求6所述的移動終端,其中,所述控制器進一步被配置成當接收到車輛 運行停止信號時將所述第一屏幕的所述至少一部分僅顯示到所述顯示單元的區域。
8. 根據權利要求7所述的移動終端,其中,所述車輛運行停止信號對應于在通過車輛 內的前相機獲得的圖像中包括的信號燈的停止操作狀態。
9. 根據權利要求8所述的移動終端,其中,當所述信號燈的停止操作狀態變成進入操 作狀態時,所述控制器進一步被配置成確定車輛運行恢復信號已經被輸入,并且在所述顯 示單元上顯示警告通知。
10. 根據權利要求6所述的移動終端,其中,當感測到在預設方向上被施加到在所述移 動終端的顯示單元上輸出的第一屏幕的輸入時,所述控制器進一步被配置成改變所述第一 屏幕的輸出范圍以對應于所述輸入。
11. 根據權利要求6所述的移動終端,其中,當感測到在預設方向上被施加到在所述移 動終端的顯示單元上輸出的第一屏幕的輸入時,所述控制器進一步被配置成顯示在被連接 的車載視頻顯示設備的不同顯示器上顯示的屏幕以及所述第一屏幕。
12. 根據權利要求6所述的移動終端,其中,當在預設的時間段內沒有感測到所述駕駛 員的眼睛到所述顯示單元時,所述控制器進一步被配置成: 停止在所述移動終端的顯示單元上顯示所述第一屏幕,并且 將用于重新顯示所述第一屏幕的指示符圖標顯示到所述移動終端的顯示單元的區域。
13. 一種移動終端,包括: 終端主體; 顯示單元; 無線通信單元,所述無線通信單元被配置成無線地連接到包括第一和第二視頻顯示設 備的車載視頻顯示設備;以及 控制器,所述控制器被配置成: 基于連接的第一視頻顯示設備和所述顯示單元檢測在預定范圍內的駕駛員的眼睛的 方向,并且 當視頻共享模式被執行時,控制所述無線通信單元將在所述第一視頻顯示設備上顯示 的第一圖像和在所述顯示單元上顯示的第二圖像當中的與檢測到的駕駛員的眼睛的方向 相對應的圖像傳送到所述第二視頻顯示設備。
14. 根據權利要求13所述的移動終端,其中,當所述檢測到的駕駛員的眼睛的方向被 固定到所述第二圖像時,所述控制器進一步被配置成傳送詢問是否在所述第二視頻顯示設 備上顯示所述第二圖像的消息,并且 當接收到相對于被傳送的消息的肯定的響應信號時,所述控制器進一步被配置成控制 所述無線通信單元將所述第二圖像實時傳送到所述第二視頻顯示設備。
15. 根據權利要求13所述的移動終端,其中,所述控制器進一步被配置成,當接收到視 頻共享接受信號時,從所述第二視頻顯示設備接收更新的圖像并且控制所述無線通信單元 將接收到的更新圖像傳送到所述第一視頻顯示設備。
16. 根據權利要求13所述的移動終端,其中,所述控制器進一步被配置成: 當所述視頻共享模式被執行時,從所述第二視頻顯示設備接收內容圖像,并且 控制所述第一視頻顯示設備顯示與接收到的內容圖像相對應的圖像對象。
17. 根據權利要求16所述的移動終端,其中,與所述內容圖像相對應的圖像對象包括: 所述內容圖像的代表性圖像和與所述第二視頻顯示設備相對應的用戶圖像中的至少一個。
18. 根據權利要求16所述的移動終端,其中,當在預設的時間段內所述駕駛員的眼睛 被固定到所述圖像對象時,所述控制器進一步被配置成控制所述無線通信單元將所述圖像 對象變成所述內容圖像并且顯示所述內容圖像。
19. 根據權利要求16所述的移動終端,其中,所述控制器進一步被配置成控制所述無 線通信單元在所述第一視頻顯示設備的顯示器上連續地顯示所述內容圖像。
20. 根據權利要求16所述的移動終端,其中,當從所述第二視頻顯示設備接收到用于 共享新圖像的請求時,所述控制器進一步被配置成控制所述無線通信單元將與用于共享所 述新圖像的請求相對應的通知消息顯示到區分于其中所述內容圖像被顯示的區域的區域。
【文檔編號】H04M1/725GK104301507SQ201410336137
【公開日】2015年1月21日 申請日期:2014年7月15日 優先權日:2013年7月15日
【發明者】趙慶玟 申請人:Lg電子株式會社