用于使用不同語言的翻譯的交通工具的圖像捕獲系統的制作方法

本公開內容涉及用在交通工具中的系統，具體地但非排他地，涉及在旨在講不同語言的多個不同國家中駕駛的交通工具中使用的系統。本公開內容還涉及并入這樣的交通工具系統的交通工具以及有助于在多個不同國家中駕駛交通工具的方法。本發明的各方面涉及系統、方法及交通工具。

背景技術：

自載(on-board)衛星導航系統具有以所選擇的語言為駕駛員提供口頭指示的設備，使得可以容易地理解并跟隨如由用戶所選擇的導航路線。然而，在駕駛交通工具穿越講不同語言的不同國家或領土的情況下，對交通工具駕駛員而言存在以下問題：他們可能不理解在路線中出現的道路標志的語言或其他信息顯示。例如，當駕駛交通工具穿越歐洲時，交通工具駕駛員可能不得不駕駛經過若干不同國家，每個國家具有不同的語言，而交通工具駕駛員或乘客可能不熟悉任何一種語言。這可能對駕駛員造成具有壓力的駕駛體驗，并且如果重要的道路交通信息經由道邊的標牌來傳達，則存在潛在的危險。對駕駛員而言，詞典可用于查找他們不熟悉的語言中的詞，然而此過程與駕駛交通工具的動作不相容，所以需要中斷行程以使駕駛員查找翻譯。

基于這樣的背景，構思出了本發明。本發明的實施方式可以提供有助于駕駛員在多個不同地理區域中的道路上使用的方法或系統。根據以下描述、權利要求書和附圖，本發明的其他目的和優點將變得明顯。

技術實現要素：

本發明的各方面提供了如所附權利要求書中要求保護的系統、方法及交通工具。

根據本發明的一方面，提供了一種用在具有選定交通工具語言的交通工具中的系統，在交通工具用戶與該系統之間要使用所述選定交通工具語言來進行通信，該系統包括：用于捕獲交通工具外部的圖像場景的圖像捕獲部件，其中，圖像場景包括一個或更多個信息指示，一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；用于將表示選定交通工具語言的交通工具語言信號輸出至非自載服務器的部件；用于將表示國家語言的國家語言信號輸出至非自載服務器的部件；用于將文本輸出至非自載服務器以將文本從國家語言翻譯成交通工具語言的部件；用于接收從非自載服務器輸出的表示翻譯文本的翻譯文本的部件；以及用于將翻譯文本輸出傳送至交通工具用戶的部件。

另一方面，提供了一種用在具有選定交通工具語言的交通工具中的系統，在交通工具用戶與該系統之間要使用所述選定交通工具語言來進行通信，該系統包括：用于捕獲交通工具外部的圖像場景的圖像捕獲部件，其中，圖像場景包括一個或更多個信息指示，一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；用于將文本從國家語言翻譯成選定交通工具語言并生成表示翻譯文本的翻譯文本輸出的部件；以及用于將翻譯文本輸出傳送至交通工具用戶的部件。

出于本說明書的目的，短語“信息指示”意在指示當交通工具正行駛時以數字或字母字符或其他符號的形式向交通工具用戶傳達含義或指示的、具有標牌、電子或其他顯示板、廣告牌或任何其他布告牌上通常承載的類型的任意字符，并且包括例如具有道路名稱和編號、方向信息、道路出口或路口編號、距離、道路標志符號和地名的形式的字符。

可以視覺地或聽覺地或者通過這兩者將信息輸出傳送給用戶。可以由用戶經由例如人機界面(HMI)根據偏好來選擇通信部件。

該系統通過以下方式來幫助駕駛員在道路上使用：通過使用相機系統捕獲圖像數據并將從圖像數據得到的使用熟悉的語言翻譯的文本傳送給駕駛員來為駕駛員提供查看可能使用了不熟悉的語言的道路標志信息或者當駕駛員直接查看標志時他可能已經遺漏的道路標志信息的設備。

有益的是，相對于交通工具計算機系統非自載地或外部地執行翻譯處理，以便減小自載計算機所需的處理器能力以及數據存儲。

本實施方式提供了以下優點：翻譯軟件不需要被存儲在交通工具自身上，而是存儲在非自載服務器上。這降低了對自載的交通工具計算機的處理要求。

然而，如果在交通工具上執行翻譯，則在存在無線“黑點”或者交通工具與外部服務器系統之間的通信相對弱的情況下是有利的，原因是仍然可以經由自載翻譯處理器為用戶呈現成像文本的翻譯。

信息指示還可以包括圖像場景中的符號，該系統包括用于根據符號得到符號含義的部件以及用于將符號含義傳送至交通工具用戶的部件。

信息指示可以包括在圖像場景中的道路標志中。可替選地或另外地，信息指示可以包括在圖像場景中的廣告牌中。

該系統可以包括用于確定交通工具的地理位置的位置指示部件，并且其中，用于輸出國家語言信號的部件從位置指示部件得到國家語言信號。

圖像處理部件可以包括用于生成多個信息輸出的部件，其中，信息輸出中的每個信息輸出表示圖像場景的不同區域中的文本和/或符號。以這種方式，用戶可以選擇要被呈現的與道路標志的不同區域相關或與沿路邊的連續道路標志相關的多條信息。

在本實施方式中，對于該系統而言有益的是：包括用于使得用戶能夠對需要來自其的信息的圖像場景的區域進行選擇的用戶選擇部件。

在另一實現中，可以按照交通工具經過圖像場景中的相應的不同區域的次序將多個信息輸出傳送給用戶。

在一種實施方式中，通信部件可以被布置成以取決于圖像場景中的信息指示的位置的方式將信息輸出傳送給交通工具用戶。

該系統可以包括具有多個揚聲器的音頻系統，每個揚聲器在交通工具中的不同位置處。如果生成了多個信息輸出，則信息輸出中的每個信息輸出可以根據揚聲器在交通工具中的位置以及圖像場景中的信息指示的位置通過揚聲器中的不同的揚聲器來傳送。這以他們的部件獲得信息所需的最小努力為駕駛員提供了圖像場景中的信息的特別方便的位置依賴呈現。具體地，如果根據圖像場景中的相應信息指示相對于駕駛員的相對位置來傳送信息輸出，則以特別清楚的方式來建議駕駛員。

通信部件可以包括音頻系統和/或視覺顯示屏。

該系統可以包括用于使得用戶能夠選擇視覺顯示屏或音頻系統作為通信部件的部件。

根據本發明的另一方面，提供了一種用在具有選定交通工具語言的交通工具中的方法，交通工具用戶與該系統之間要使用所述選定交通工具語言來進行通信，該方法包括：捕獲交通工具外部的圖像場景，其中，圖像場景包括一個或更多個信息指示，一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；將表示選定交通工具語言的交通工具語言信號輸出至非自載服務器；將表示國家語言的國家語言信號輸出至非自載服務器；將文本輸出至非自載服務器以將文本從國家語言翻譯成交通工具語言；從非自載服務器接收表示翻譯文本的翻譯文本輸出；以及將翻譯文本輸出傳送給交通工具用戶。

根據另一方面，提供了一種用在具有選定交通工具語言的交通工具中的方法，在交通工具用戶與該系統之間要使用所述選定交通工具語言來進行通信，該方法包括：捕獲交通工具外部的圖像場景，其中，圖像場景包括一個或更多個信息指示，一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；將文本從國家語言翻譯成選定交通工具語言并生成表示翻譯文本的翻譯文本輸出；以及將翻譯文本輸出傳送給交通工具用戶。

根據又一方面，本發明涉及一種包括如上述陳述中的任何陳述所闡述的系統的交通工具。

在本申請的范圍內，應當明確地設想，在前述段落中、在權利要求書中和/或在以下說明書和附圖中闡述的各個方面、實施方式、示例和替代以及特別是其各個特征可以獨立地被采用或以任意組合被采用。也就是說，除非這樣的特征不相容，否則所有實施方式和/或任何實施方式的特征可以以任意方式和/或組合來組合。本申請人保留改變任何原始提交的權利要求或因此提交任何新的權利要求的權利，該權利包括對任何原始提交的權利要求進行修正以使其取決于和/或包括雖然最初未以那樣的方式要求保護的任何其他權利要求的任何特征的權利。

附圖說明

現在將參照下面的圖僅借助于示例對本發明的實施方式進行描述，在附圖中：

圖1示出了根據本發明的第一實施方式的交通工具系統的示意圖，該交通工具系統包括用于捕獲圖像場景的交通工具相機系統；

圖2是當交通工具行駛在途中時可以由圖1中的交通工具相機系統捕獲的圖像場景的示例；

圖3是當交通工具行駛在途中時可以由圖1中的交通工具相機系統捕獲的替選圖像場景的示例；

圖4是可以被捕獲的圖像場景中的道路標志的示例，道路標志包括文本信息和符號信息兩者；

圖5是示出了從由交通工具相機系統捕獲的圖像場景中的道路標志中提取符號信息和文本信息的方法的步驟的流程圖；以及

圖6示出了根據圖1中示出的本發明的替選實施方式的交通工具系統的示意圖。

具體實施方式

交通工具通常包括自載的交通工具計算機系統10，自載的交通工具計算機系統10自動地響應于來自各種交通工具傳感器的傳感器輸出或者響應于用戶發起的命令來控制各種交通工具設置。交通工具計算機系統10的構成部分是以下信息娛樂系統，該信息娛樂系統使得能夠分別經由交通工具內的無線電系統和電視系統(未示出)將音頻和視覺自載娛樂服務提供給交通工具用戶。信息娛樂系統還包括衛星導航系統(未示出)。

交通工具配備有具有全球位置傳感器12的形式的位置指示部件，該位置指示部件通過與外部定位系統(未示出)進行通信來創建當前交通工具位置的指示。全球位置傳感器12將輸出信號14提供至計算機系統10從而將交通工具位置的指示提供至計算機。此外，輸出信號14特別用作衛星導航系統的輸入。

自載計算機系統10可以只包括交通工具上承載的并且在購買時構成交通工具的整體部分的硬件，或者可以部分地或全部地由還用于交通工具上非自載的其他目的的、交通工具自載的裝置，諸如駕駛員的個人裝置(例如，平板或智能電話)提供。鑒于此，可以在交通工具用戶的個人移動裝置上運行的應用中實施本發明。

計算機系統10根據位置信號得到相應的國家指示信號以提供交通工具正在其中行駛的國家的指示。國家指示信號可以從存儲在計算機系統10上的查找表得到。

如果計算機系統部分地或全部地在交通工具內的由用戶攜帶的移動裝置中實施，則移動裝置可以用于生成國家信號。移動裝置通常與移動網絡運營商通信，以使得能夠確定交通工具正行駛在局域網的哪個小區中。

在購買交通工具時經由交通工具語言設置功能16來設置交通工具的語言，交通工具的語言與用戶希望與HMI通信的語言相對應。將交通工具語言信號18從交通工具語言設置功能16提供至計算機系統10。交通工具還包括麥克風20以使得交通工具用戶能夠向計算機系統10發出語音命令或者當經由無線連接(例如，)通過計算機系統進行操作時使得能夠與用戶的電話進行交互。

交通工具還包括人機界面(HMI)22，駕駛員可以經由HMI 22輸入或控制各種交通工具設置，如對信息娛樂系統的輸入并且包括對衛星導航系統的輸入。為此，HMI設置有用戶輸入界面24。HMI 22還包括用于向交通工具駕駛員顯示關于各種交通工具設置或屬性的信息的通常呈LCD顯示屏26形式的顯示部件。HMI經由輸出信號28與交通工具計算機進行通信。交通工具還包括響應于來自交通工具計算機的控制輸出信號32的音頻系統30。

在購買交通工具時對交通工具的語言進行設置，交通工具的語言與用戶希望與HMI通信的語言相對應(例如，英語、德語、法語)。如隨后將進一步詳細描述的，語言信號18被輸入至交通工具計算機系統10，使得經由HMI顯示器26和/或音頻系統30用正確的語言將通信如指令和其他提示輸出給駕駛員。

交通工具的前方配備有相機系統40，該相機系統40用于在交通工具行駛在途中時從圖像場景捕獲圖像數據。相機系統40經由輸出信號42將圖像場景數據提供至計算機系統。計算機系統10包括用于對由相機系統捕獲的圖像數據進行處理的處理器部件。出于處理圖像數據的目的，計算機系統包括圖像處理器44、標志-符號-文本(SST)識別處理器46和文本-語音(TTS)處理器48。

計算機系統10還包括數據存儲裝置或存儲器50，在所述數據存儲裝置或存儲器50中可以暫時地或永久地存儲被提供至計算機系統10的數據。

自載計算機系統以經由無線連接56的常規方式經由因特網服務提供商54與外部服務器52進行通信。

如果在語言與交通工具的選定語言不同的國家或領土中正在駕駛交通工具，則如由交通工具語言信號18所指示的，該系統能夠操作用于從承載使用外國語言的文本的道路標志捕獲圖像數據并且使得能夠翻譯圖像數據中的文本。該系統還能夠操作用于使得能夠解釋由道路標志承載的符號，尤其當駕駛員行駛在除了他自己的國家以外的國家中時他可能不熟悉這些符號。可以將文本的翻譯和符號的解釋傳送給駕駛員以幫助安全便捷的駕駛。

參照圖2，示出了當交通工具行駛在途中時可以由交通工具相機系統40捕獲的圖像場景60的示例。圖像場景60包括第一道路標志62和第二道路標志64，第一道路標志62包括各自承載文本的第一標志區域62a和第二標志區域62b，第二道路標志64包括單個文本區域。道路標志62、64上的文本可以涉及例如地名或名勝、方向或正行駛的道路的出口。相機系統40從場景捕獲圖像數據并將圖像數據輸出至圖像處理器44。圖像處理器44對數據進行處理并將數據提供至SST處理器46。SST處理器46確定圖像場景中是否出現了標志。如果識別出了標志，則與圖像的標志元素相關的圖像數據經歷符號識別步驟，以確定標志上是否出現了符號。圖像數據還經歷文本識別步驟，以確定標志上是否出現了文本。在圖2的示例中，道路標志62、64上均不存在要識別的符號，僅存在文本。

對于圖2所示的道路標志，出于翻譯的目的，從圖像數據提取第一道路標志62的第一標志區域62a和第二標志區域62b上的文本以及第二道路標志64上的文本。在數據存儲裝置50中，給圖像場景中出現道路標志62、64的各個位置分配文本指示。如根據以下描述將變得清楚的，出于呈現的目的，對標志的不同區域的數字分配是有用的。

將文本指示連同與如從全球位置傳感器12得到的識別交通工具正在其中行駛的國家的交通工具位置相對應的國家指示信號(未示出)輸出至外部服務器52。國家指示信號提供道路標志62、64上的文本的語言的指示。經由無線通信將國家指示信號發送至存儲在外部服務器52上的文本翻譯處理器。此外，經由無線通信將由計算機系統10接收到的交通工具語言信號18發送至外部服務器52。因此，外部服務器52接收與圖像場景中的道路標志中的文本相對應的數據、國家指示信號和交通工具語言信號。

由外部服務器52上的文本翻譯處理器來翻譯在外部服務器52處接收的文本，在外部服務器52上的文本翻譯處理器中將文本從國家語言9(如由國家指示信號所指示的)轉換成交通工具語言(如由交通工具語言信號所指示的)。經由無線通信將與翻譯文本相對應的數據傳送回至計算機系統10。將與翻譯文本相對應的數據輸入至自載計算機上的TTS處理器48，在TTS處理器48中將文本轉換成與音頻系統30兼容的文本信號以使得能夠通過音頻系統的揚聲器為駕駛員聽覺上呈現翻譯文本。還將翻譯文本轉換成與HMI顯示器22兼容的文本信號，使得可以為駕駛員視覺上呈現翻譯文本。HMI顯示器26為駕駛員呈現選擇畫面以使得他能夠經由用戶輸入部件24來選擇在聽覺上收聽與道路標志信息相關的通告還是使用信息的可視顯示來呈現與道路標志信息相關的通告或者是否使用視覺上和聽覺上兩者來呈現與道路標志信息相關的通告。

將與翻譯文本相對應的數據存儲在計算機系統上的數據存儲器50中，使得在需要時可以在以后對數據進行訪問。如下文將進一步詳細描述的，將翻譯文本數據與圖像場景數據組合地存儲，使得駕駛員可以從由相機系統50捕獲的先前圖像場景中進行選擇以檢索所需要的文本信息。

為了翻譯的可視呈現，可以在數據存儲裝置50中為道路標志62、64中的文本的每個區域分配不同的數字指示。然后，在顯示畫面26上為用戶呈現表明哪個數字指示與道路標志62、64中的文本的哪個區域相對應的查找表格。例如，可以為第一道路標志62的第一區域62a分配數字1，可以為第一道路標志62的第二區域62b分配數字2，并且可以為第二道路標志64分配數字3。選擇畫面包括與1、2和3相對應的三個文本翻譯的列表以使得駕駛員能夠將圖像中的道路標志與適當的翻譯文本相關聯。

可替選地或另外地，響應于駕駛員選擇感興趣的標志的特定區域，可以為他提供文本翻譯的可聽通告。例如，駕駛員可以通過選擇數字1來選擇收聽與第一道路標志62的第一區域62a相關的可聽通告，或者可以通過選擇數字3來選擇收聽與第二道路標志64相關的通告。

在上述實施方式的變型中，可以按照交通工具經過道路標志62、64的次序為駕駛員呈現與翻譯文本相對應的通告。在這種情況下，當駕駛員經過上面有文本的道路標志時，他在行程中將只收聽通告而無需做出選擇。

該系統還可以被配置成使得駕駛員能夠從數據存儲器50中檢索與先前已經經過的道路標志相關的信息。為此，駕駛員選擇HMI顯示器26上的選項以請求先前的道路標志信息。然后，為他呈現一系列先前圖像，他可以使用用戶輸入部件24從這一系列先前圖像中選擇文本的翻譯所需的先前道路標志。從數據存儲器50檢索所選擇的翻譯并且根據他選擇的偏好將所選擇的翻譯聽覺上或視覺上呈現給駕駛員。

在另一實施方式中，該系統可以被配置成結合音頻系統進行操作以根據道路標志在圖像場景70中的位置為駕駛員提供通告。參照圖3，交通工具行程可以包括沿三車道公路或汽車高速公路行駛，三個車道中的每個車道上分別具有第一高架道路標志72、第二高架道路標志74和第三高架道路標志76。

音頻系統30包括布置在交通工具中的不同位置處的多個揚聲器(未示出)。通常，例如，音頻系統30可以包括左手前方揚聲器、左手后方揚聲器、右手前方揚聲器、右手后方揚聲器和中央前方揚聲器。與前面一樣，相機系統40捕獲包括三個高架道路標志72、74、76的圖像場景70。將與道路標志中的文本相關的數據連同交通工具語言信號和國家輸出信號一起輸出至外部服務器52用于翻譯。在外部服務器52處翻譯文本并且將與翻譯文本相對應的數據發送回至計算機系統10。將與翻譯文本相對應的數據輸入至TTS處理器48，在TTS處理器48中將翻譯文本轉換成與音頻系統兼容的文本輸出信號，以使得能夠為駕駛員聽覺上呈現翻譯文本。

將每個道路標志72、74、76的位置指示分配給數據存儲器50中的關聯文本數據以指示道路標志在圖像場景70中的位置。然后，計算機系統根據文本在圖像場景70中的位置將文本信號輸出至音頻系統30。例如，將與左手車道上方的道路標志72的文本相對應的文本輸出信號輸出至左手前方揚聲器，將與右手車道上方的道路標志76的文本相對應的文本輸出信號輸出至右手前方揚聲器，并且將與中間車道上方的道路標志74的文本相對應的文本輸出信號輸出至前方中央揚聲器。每次通過一個揚聲器依次遞送可聽輸出。通過其收聽通告的揚聲器向駕駛員指示文本是從圖像場景70中的哪一部分(即，左、右或中間)得到的。

還在圖像處理器44中將與翻譯文本相對應的數據轉換成與HMI顯示器26兼容的文本輸出信號。如前所述，在數據存儲器中，存儲與左手道路標志72相關的文本數據并為其分配數字1，存儲與中間道路標志74相關的文本數據并為其分配數字2，并且存儲與右手道路標志76相關的文本數據并為其分配數字3。在HMI顯示器26上為駕駛員呈現圖像場景的可視顯示以及數字指示1、2和3。還在顯示器26上呈現數字指示的列表以及相應的文本翻譯以使得駕駛員能夠選擇需要重復翻譯的道路標志72、74或76。駕駛員可以選擇重復文本翻譯的可聽通告或者可以選擇視覺上呈現文本翻譯。

在本發明的又一實施方式中，系統無需要求任何翻譯方面卻可以簡單地用于使得能夠使用道路標志的語言視覺上或聽覺上為駕駛員呈現作為先前已經經過的道路標志的提醒的文本。當在駕駛員開車經過時他未能全面閱讀或理解道路標志的內容時，這可能是有用的。如前面一樣，相機系統40捕獲圖像數據并將數據發送至計算機系統10。如果全球位置傳感器12指示交通工具正在歸屬國行駛，使得不存在語言問題，所以無需出于翻譯目的而將數據發送至外部服務器52。相反，在TTS處理器48中對數據進行轉換以提供可以被輸出至音頻系統30的文本輸出信號。還在圖像處理器44中對數據進行轉換以提供與HMI顯示器26兼容的文本輸出信號。如前所述，在HMI顯示器26上為駕駛員呈現圖像場景以及歸屬于文本的每個區域的數字指示，以使得能夠選擇需要翻譯的文本。然后，可以根據駕駛員的選擇聽覺上或視覺上呈現翻譯。

圖4示出了可能在法國的道路上遇到的并且所捕獲的圖像場景中的道路標志80的示例。相機系統40捕獲場景的圖像并將圖像數據發送至計算機系統10用于處理。道路標志80包括符號82以及文本84。與前面一樣，由SST識別處理器46對圖像數據進行處理以識別圖像場景中出現的道路標志80。SST識別處理器46還能夠操作用于識別并從圖像數據中提取與符號82相關的數據。然后解釋該符號，使得可以向駕駛員呈現該符號的含義。當駕駛員正行駛在他不熟悉道路符號的、除了他的歸屬國以外的國家時，這尤其有用。

圖5示出了進一步詳細示出計算機系統10如何進行操作以從并入符號指示82和文本指示84兩者的道路標志80中辨別含義的流程圖。在標志識別步驟90中，SST識別處理器46確定圖像場景中出現道路標志80。GPS傳感器還將關于道路標志80的地理位置的指示92提供至HMI顯示器(或音頻系統)。

在隨后的標志解析步驟94中，系統對已經識別出的場景中的標志上的符號執行符號識別檢查96并且對已經識別出的場景中的標志上的文本執行文本識別步驟98。在必要時，SST識別處理器46從圖像數據中提取符號數據和文本數據。對于圖4中的道路標志80，僅存在要識別的一個符號82和一個文本指示84，但對于其他道路標志，可以存在附加的符號指示或文本指示(如由附加的框100和102所表示的)。在識別出多個符號和/或文本的情況下，從數據中提取每一個符號和/或文本以提供獨立且分立的數據集用于處理的下一階段。

處理的下一階段是在步驟108中確定是否需要符號含義的翻譯或文本含義的翻譯。如果國家指示信號指示正在語言與交通工具的選定語言不同的國家中駕駛交通工具，則需要文本指示的翻譯。

如果需要文本指示的翻譯，則計算機系統(或移動裝置)還基于全球位置傳感器輸出將國家指示信號發送至外部服務器52以指示交通工具正在其中行駛的國家(在本示例中，法國)。

為了將所識別的、道路標志中的符號的含義傳送給用戶，外部服務器52承載針對各種不同國家將道路標志符號與它們的含義聯系起來的數據存儲器或數據庫104。外部服務器52在數據存儲器104中查找與(如根據國家指示信號所確定的)適當的國家相對應的符號的含義并將表示符號含義106的數據信號發送回至計算機系統10。如果在步驟108中已經確定需要將符號含義翻譯成選定交通工具語言(即，由于選定交通工具語言與交通工具正在其中行駛的國家的語言不同)，則在將與含義相關的數據被發送回至交通工具之前，在遠端服務器52上執行翻譯步驟。

一旦TTS處理器48已經對符號含義進行了處理以提供與音頻系統30兼容的符號輸出信號，則然后在步驟112中，將翻譯輸出呈現給駕駛員。因此，駕駛員聽到了符號含義的翻譯可聽呈現。

以對與符號82相關的數據類似的方式，在步驟98中(如果存在文本的多個區域，則包括步驟102)從圖像場景提取與文本84相關的數據。如果確定交通工具正在其中行駛的國家的語言與交通工具的選定語言不同，則經由無線通信將文本數據發送至外部服務器52并且在步驟110中在遠端服務器52上執行對文本含義的翻譯。如果正在語言與交通工具的選定語言相同的國家中駕駛交通工具，則不需要文本指示的翻譯并且可以以文本在道路標志上出現的形式對應于文本簡單地在聽覺上將文本傳送給駕駛員。

如果需要翻譯，則將文本數據連同交通工具語言信號和國家指示信號一起發送至外部服務器52。如前所述，外部服務器52在數據存儲器中查找并將與文本的翻譯版本相對應的數據信號提供至計算機系統10。

如果國家語言信號指示交通工具正在其中行駛的國家具有不止一種語言，則在外部服務器52上確定要根據哪種語言來翻譯文本。可替選地，可以為駕駛員呈現可以從中選擇國家語言用于隨后在外部服務器52上翻譯成交通工具語言的列表。

與前面一樣，在步驟112中，駕駛員可以選擇經由音頻系統30收聽翻譯文本的可聽通告或者在HMI顯示器26上查看翻譯文本的可視指示，或者他可以選擇這兩個選項。在HMI顯示器26上為駕駛員呈現選擇畫面以使得他能夠選擇他偏好的呈現方法。經由用戶輸入裝置24選擇偏好的呈現類型。

參照圖6，在另一實施方式中，對于處理的翻譯階段，計算機系統10不需要依賴外部服務器52，而是可以設置有自載翻譯處理器120。在這種情況下，將與圖像場景中的文本相對應的數據連同國家指示信號和交通工具語言信號一起提供至翻譯處理器120。翻譯處理器120將文本翻譯成交通工具語言，并且如果駕駛員選擇了可聽呈現，則將適當的文本輸出信號輸出至音頻系統30。可替選地，如果駕駛員已經選擇了視覺上查看翻譯，則將適當的文本信號輸出至HMI顯示器以向駕駛員視覺呈現翻譯文本。本實施方式的益處在于：當交通工具與圖1中的外部服務器52正在通信時可能存在的任何無線通信“黑點”不會導致被傳送給駕駛員的翻譯信息的延遲。

在不與圖1中的外部服務器52進行通信的情況下，計算機系統還在數據存儲器中存儲將標志符號信息與用于可以駕駛交通工具的、世界上的各個國家的含義關聯起來的查找表。當相機系統將包括與圖像場景中的道路標志中的文本相關的數據的圖像數據返回至計算機系統10時，將數據連同相應的國家指示信號一起輸入至存儲器50，使得可以從相關查找表提取相應的含義。然后，在TTS處理器48中也對含義進行轉換以根據駕駛員所選擇的偏好使用交通工具語言將適當的文本輸出信號提供至音頻系統30和/或將適當的文本輸出信號提供至HMI顯示器26。

在再一實施方式中，系統可以被配置成使非自載的以及自載的文本翻譯步驟和符號解釋步驟得以執行。例如，如果交通工具正行駛在與外部服務器的無線通信丟失的“黑點”中，或者僅提供數據的緩慢通信，則系統可以被配置成依賴自載的文本翻譯和符號解釋功能。

除了道路標志的翻譯和解釋以外，還可以設想本發明提供益處的其他應用。例如，交通工具上的相機系統可以從布告牌或廣告捕獲圖像數據，使得系統可以為交通工具駕駛員提供出現在這樣的布告牌上的大量其他有用信息諸如關于名勝、飯店、商店和服務設施的信息的翻譯或解釋。

本領域技術人員應當理解的是，在不偏離所附權利要求書的范圍的情況下，可以采用許多替代形式對本發明進行修改。

在以下帶編號的條款中闡述了本發明的更多方面：

條款1.一種用在具有選定交通工具語言的交通工具中的系統，在交通工具用戶與所述系統之間要使用所述選定交通工具語言來進行通信，所述系統包括：用于捕獲所述交通工具外部的圖像場景的圖像捕獲裝置，其中，所述圖像場景包括一個或更多個信息指示，所述一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；用于將表示選定交通工具語言的交通工具語言信號輸出至非自載服務器的裝置；用于將表示所述國家語言的國家語言信號輸出至所述非自載服務器的裝置；用于將所述文本輸出至所述非自載服務器以將所述文本從所述國家語言翻譯成所述交通工具語言的裝置；用于從所述非自載服務器接收表示翻譯文本的翻譯文本輸出的翻譯器；以及用于將所述翻譯文本輸出傳送給所述交通工具用戶的通信裝置。

條款2.一種用在具有選定交通工具語言的交通工具中的系統，在交通工具用戶與所述系統之間要使用所述選定交通工具語言來進行通信，所述系統包括：用于捕獲所述交通工具外部的圖像場景的圖像捕獲裝置，其中，所述圖像場景包括一個或更多個信息指示，所述一個或更多個信息指示包括使用除了選定交通工具語言以外的國家語言的文本；用于將所述文本從所述國家語言翻譯成所述選定交通工具語言并生成表示所述翻譯文本的翻譯文本輸出的翻譯裝置；以及用于將所述翻譯文本輸出傳送給所述交通工具用戶的通信裝置。

條款3.根據條款1所述的系統，其中，所述信息指示還包括符號，所述系統包括用于從所述符號得到符號含義的處理器，以及其中，所述通信裝置將所述符號含義傳送給所述交通工具用戶。

條款4.根據條款1所述的系統，其中，所述信息指示包括在所述圖像場景中的道路標志中。

條款5.根據條款1所述的系統，其中，所述信息指示包括在所述圖像場景中的廣告牌中。

條款6.根據條款1所述的系統，包括用于確定所述交通工具的地理位置的位置指示，以及其中，所述輸出裝置從所述位置指示得到所述國家語言信號。

條款7.根據條款1所述的系統，其中，所述圖像處理器包括用于生成多個信息輸出的輸出裝置，其中，所述信息輸出中的每個信息輸出表示所述圖像場景的不同區域中的文本和/或符號。

條款8.根據條款7所述的系統，包括用于使得用戶能夠選擇所述圖像場景的需要來自其的信息的區域的用戶選擇裝置。

條款9.根據條款7所述的系統，其中，所述輸出裝置被配置成按照所述交通工具經過所述圖像場景中的相應的不同區域的次序將所述多個信息輸出傳送給所述用戶。

條款10.根據條款1所述的系統，其中，所述通信裝置被配置成以取決于所述圖像場景中的所述信息指示的位置的方式將所述信息輸出傳送給所述交通工具用戶。

條款11.根據條款10所述的系統，包括具有多個揚聲器的音頻系統，每個揚聲器位于所述交通工具中的不同位置處，以及其中，根據揚聲器在所述交通工具中的位置以及所述信息指示在所述圖像場景中的位置通過所述揚聲器來傳送所述信息輸出或每個信息輸出。

條款12.根據條款1所述的系統，其中，所述通信裝置包括音頻系統。

條款13.根據條款1所述的系統，其中，所述通信裝置包括視覺顯示屏。

條款14.根據條款12所述的系統，還包括用于使得用戶能夠選擇所述通信裝置的類型的選擇部件。

條款15.一種用在具有選定交通工具語言的交通工具中的方法，在交通工具用戶與系統之間要使用所述選定交通工具語言來進行通信，所述方法包括：捕獲所述交通工具外部的圖像場景，其中，所述圖像場景包括一個或更多個信息指示，所述一個或更多個信息指示包括使用除了所述選定交通工具語言以外的國家語言的文本；將表示所述選定交通工具語言的交通工具語言信號輸出至非自載服務器；將表示所述國家語言的國家語言信號輸出至所述非自載服務器；將所述文本輸出至所述非自載服務器以將所述文本從所述國家語言翻譯成所述交通工具語言；從所述非自載服務器接收表示翻譯文本的翻譯文本輸出；以及將所述翻譯文本輸出傳送給所述交通工具用戶。

條款16.一種用在具有選定交通工具語言的交通工具中的方法，在交通工具用戶與系統之間要使用所述選定交通工具語言來進行通信，所述方法包括：捕獲所述交通工具外部的圖像場景，其中，所述圖像場景包括一個或更多個信息指示，所述一個或更多個信息指示包括使用除了所述選定交通工具語言以外的國家語言的文本；將所述文本從所述國家語言翻譯成所述選定交通工具語言并生成表示翻譯文本的翻譯文本輸出；以及將所述翻譯文本輸出傳送給所述交通工具用戶。

條款17.一種包括根據條款1所述的系統的交通工具。