車載控制裝置及車載控制方法

車載控制裝置及車載控制方法
【專利摘要】根據本發明的車載控制裝置，其接收顯示在顯示器上的多個操作鍵的信息，并基于該操作鍵信息根據對用戶說話實施語音識別后得到的結果來確定對應的操作鍵，接收用戶采用決定鍵發出的執行指示，執行分配給操作鍵的功能，因此無需直接接觸顯示在顯示器上的多個操作鍵且無需復雜的按鍵操作，即可進行操作。此外，通過僅在方向盤上設置1個決定鍵，用戶在駕駛過程中無需松開方向盤即可對顯示在顯示器上的操作鍵進行安全操作。
【專利說明】
車載控制裝置及車載控制方法
【技術領域】
[0001]本發明涉及一種指示執行分配給操作鍵的功能的車載控制裝置及車載控制方法，該操作鍵顯示在與車載設備連接的顯示器上。
【【背景技術】】
[0002]以往，一般的車載導航裝置等車載信息機器中，為了執行分配給顯示在與該機器連接的顯示器上的操作鍵的功能，需通過觸摸屏、與各操作鍵對應的物理鍵或者旋轉開關和十字鍵等操作設備等，指定顯示在顯示器畫面中的操作鍵，從而實施操作。
[0003]因此，例如利用觸摸屏進行操作時，用戶的手會松開方向盤，從而存有難以在駕駛中進行操作并且會妨礙駕駛的問題。
此外，在使用物理鍵時，物理鍵的數量會與操作鍵的數量成比例地增加，因此在操作鍵數量較多時，存有難以在方向盤上配置與所有操作鍵對應的物理鍵的問題。
[0004]此外，雖然并非不能在方向盤上配置旋轉開關或十字鍵，但并不優選在有限的配置空間中配置這些較大的設備，隨著顯示在顯示器上的操作鍵的數量增加，需要復雜的操作來指定各操作鍵，因此存有難以在駕駛中進行操作并且會妨礙駕駛的問題。
[0005]為了解決這些問題，例如在專利文獻I中公開了提供一種在操作自動變速機的變速控制裝置或車輛裝備類機器時，駕駛者無需松開方向盤即可控制車載控制系統的車輛控制裝置的技術。
【現有技術文獻】
【專利文獻】
[0006]【專利文獻I】
日本專利特開平8-83093號公報
【
【發明內容】
】
【發明所要解決的技術問題】
[0007]但是，例如專利文獻I那樣現有技術中，在顯示器上顯示的多個操作鍵中，經常會出現該操作鍵的數量龐大或所能執行的操作鍵會相應隨時狀況和顯示內容而有所不同的情況，對于用戶來說，若僅是直接使用專利文獻I的發明，有時會難以提供充分的操作性。
[0008]具體而言，存有以下問題，即在操作鍵的數量龐大時，用戶難以記住與該所有操作鍵對應的控制指令，同時作為語音識別技術的問題，其取決于用戶的說話狀態和周圍環境等，如果等待的控制指令的數量增加，則語音識別精度會隨著數量的增加而降低。此外，隨著控制對象的增加，可同時受理的控制指令的語音輸入內容必須清晰可辨，因此一般還會存有用戶必須記住更長的語句來作為控制指令的課題。
[0009]例如，音頻型車載導航裝置中，僅是“放大”這一控制指令時，可以表示[放大地圖畫面]和[放大音頻音量]中的任一種，意思比較含糊，所以必須說“放大地圖”或者“放大音量”等。此外，僅在特定條件下才能受理的操作中，可能造成用戶的困惑，例如雖然用戶記住了控制指令但不知道應在什么情況說指令。
[0010]本發明為解決上述問題開發而成，其目的在于提供一種車載控制裝置及車載控制方法，在操作顯示在與車載設備連接的顯示器上的多個操作鍵時，易于在駕駛過程中進行操作且不會妨礙駕駛，并且能夠根據顯示內容將與可受理的操作對應的控制指令清楚明了地提供給用戶。
【解決技術問題所采用的技術方案】
[0011]為了實現上述目的，本發明涉及一種車載控制裝置，用來控制搭載在車輛上的車載設備，其特征在于，具有:按鍵信息接收部，其根據顯示在與所述車載設備連接的顯示器上的顯示內容的變化，動態地接收顯示在所述顯示器上的多個操作鍵的信息;語音識別部，其使用語音識別字典，識別用戶說話的語音;操作鍵確定部，其基于所述按鍵信息接收部所接收到的操作鍵信息及所述語音識別部的語音識別結果，確定與所述用戶說話的語音相對應的操作鍵；以及控制部，其接收來自決定鍵的輸出，以選擇所述操作鍵確定部所確定的操作鍵，對所述車載設備發出指示，以執行分配給所確定的所述操作鍵的功能。
【發明效果】
[0012]根據本發明的車載控制裝置，無需直接接觸顯示在顯示器上的多個操作鍵且無需復雜的按鍵操作，即可進行操作。此外，通過僅在方向盤上設置I個決定鍵，用戶即可在駕駛過程中對顯示在顯示器上的操作鍵進行安全操作而無需松開方向盤。
【【附圖說明】】
[0013]圖1是表示實施方式I的車載控制裝置的一例的框圖。
圖2是表示實施方式I的車載控制裝置的動作的流程圖。
圖3是實施方式I中在顯示器的顯示畫面上顯示著多個操作鍵的菜單畫面的一例的圖。圖4是表示圖3時的操作鍵信息(與各操作鍵對應的識別關鍵詞及執行指令)的一例的表格。
圖5是表示車載導航裝置(車載設備)的動作及顯示器的顯示內容、操作鍵信息以及用戶操作的具體例的說明圖。
圖6是表示實施方式I的車載控制裝置的另一例的框圖。
圖7是表示實施方式I的車載控制裝置的其他另一例的框圖。
圖8是表示實施方式2的車載控制裝置的一例的框圖。
圖9是表示實施方式2的車載控制裝置的動作的流程圖。
圖10是表示實施方式2中從在顯示器的顯示畫面上顯示多個操作鍵的菜單畫面進行轉移的一例的圖。
圖11是表示實施方式2的車載控制裝置的另一例的框圖。
圖12是表示實施方式3的車載控制裝置的一例的框圖。
圖13是表示實施方式3的車載控制裝置的動作的流程圖。
圖14是表示實施方式3的車載控制裝置的動作的流程圖的另一例。
圖15是表示實施方式3的車載控制裝置的另一例的框圖。
圖16是表示實施方式4的車載控制裝置的一例的框圖。
圖17是表示實施方式4的車載控制裝置的動作的流程圖。 圖18是表示實施方式5的車載控制裝置的一例的框圖。
圖19是表示實施方式5的車載控制裝置的動作的流程圖。
圖20是表示實施方式6的車載控制裝置的一例的框圖。
圖21是表示實施方式6的車載控制裝置的動作的流程圖。
圖22是表示實施方式6的操作鍵信息(與各操作鍵對應的識別關鍵詞、執行指令及坐標信息)的一例的表格。
【【具體實施方式】】
[0014]以下參照附圖，詳細說明本發明的實施例。
本發明的車載控制裝置，其通過用戶操作對搭載在車輛上的各種車載設備進行控制，其中通過語音識別及I個決定鍵對顯示在與車載設備連接的顯示器上的多個操作鍵進行操作。
[0015]實施方式I
圖1是表示本發明的實施方式I的車載控制裝置的一例的框圖。該車載控制裝置10與作為控制對象的車載設備I連接，具有:按鍵信息接收部11、語音識別部12、語音識別字典13、操作鍵確定部14以及控制部15，通過聯合運用車載設備I及車載控制裝置10，對車載設備I實施操作控制。此外，該車載控制裝置10上連接著話筒3及I個決定鍵4，車載設備I上連接著顯示器2。
[0016]另外，作為與車載控制裝置10連接的車載設備I，可以是例如車載導航裝置或HUD(Head-Up Display，平視顯示器)、儀表板等具有操作控制功能的顯示器、具有顯示器的機器或與顯示器連接的機器等進行顯示及操作的裝置，該車載控制裝置10自身也可組入這些機器中。作為連接方式，可以是有線，也可以是Bluetooth(注冊商標)或W1-Fi(注冊商標)等無線，也可以構成為網絡上的服務器。
[0017]此外，雖然此處說明中將決定鍵4設為設置在車輛的方向盤(把手)上的H/W開關，但設置的位置及開關的形態并無限定，只要是用來執行所決定的操作的開關即可。此外，雖然省略了圖示，但作為車載設備I的操作控
制，可以并用觸摸屏、H/W開關、旋轉開關、十字鍵以及遙控器等現有的操作設備來進行操作，與車載控制裝置10連接的車載設備可以是多個，話筒3及I個決定鍵4也可連接至車載設備I側。以下實施方式中也相同。
[0018]車載設備I將顯示在顯示器2上的操作鍵的信息發送至車載控制裝置10，并從車載控制裝置10接收與各操作鍵對應的執行指令，執行與該操作鍵對應(被分配)的功能。與該操作鍵對應(被分配)的功能是指選擇該操作鍵時會執行的功能，例如轉移至預先規定的畫面或重放音樂等。
[0019]此外，顯示在顯示器2上的操作鍵并非嚴格地僅限定為顯示在顯示器2上的操作鍵，也可包含由于未收入顯示器2的顯示區域等理由，可通過規定操作例如畫面滾動、畫面縮小或放大以及顯示/隱藏的切換來進行顯示的操作鍵。另外，以下實施方式中也相同。
[0020]操作鍵信息接收部11通過所連接的車載設備1，接收顯示在與車載設備I連接的顯示器2上的多個操作鍵的信息。操作鍵信息的具體例將在下文另述，其會相應顯示在顯示器2上的顯示內容的變化，實施動態接收。也就是說，隨著在顯示器2中畫面顯示的顯示內容進行動態變化，接收的操作鍵信息也會發生動態變化。
[0021]語音識別部12具有語音識別字典13，通過將利用話筒3等采集的聲音(用戶說話的語音)進行A/D轉換，以例如PCM(Pulse Code Modulat1n，脈沖編碼調制)方式進行獲取，并對語音的特征量與語音識別字典13進行對照來實施語音識別處理。此處，作為語音識別處理，可使用例如Hidden Markov Model(隱馬爾可夫模型)等一般方法。此外，語音識別部12也可使用網絡上的語音識別服務器。
[0022]此處，語音識別字典13構成為，可識別下述操作鍵確定部14的按鍵確定處理中使用的關鍵詞等，語音識別部12輸出說話中含有的關鍵詞以作為語音識別結果(以下稱為“識別關鍵詞”)。
[0023]車載導航系統等中搭載的語音識別功能中，一般而言，用戶會對系統明示(指示)開始說話等。因此，用來指示語音識別開始的按鈕等(以下稱為“語音識別開始指示部”)顯示在觸摸屏上或設置在方向盤上。然后，在由用戶按下語音識別開始指示部后，識別說話的語音。也就是說，在語音識別開始指示部輸出語音識別開始信號，并且語音識別部接收該信號后，會等待用戶說話，實施上述識別處理。
[0024]但是，即使沒有上述的用戶的語音識別開始指示，該實施方式I的語音識別部12也會始終識別用戶的說話內容。也就是說，語音識別部12即使未接收語音識別開始信號，也會重復實施以下處理:使用識別字典實施識別處理，并輸出包含在語音識別結果中的關鍵詞。此外，雖然如上所述始終識別用戶的說話內容，但為了抑制CPU和存儲器等的使用量，也可僅在基于輸入語音的特征(例如輸入音量等)能夠判定出話筒輸入的聲音為語音時才進行識別處理。以下實施方式中也相同。
[0025]操作鍵確定部14基于通過按鍵信息接收部11接收的操作鍵信息及語音識別部12的語音識別結果，指定與用戶說話的語音對應的操作鍵。具體而言，參照按鍵信息接收部11所獲取到的操作鍵信息，來確定與從語音識別部12獲取到的識別關鍵詞對應的操作鍵的執行指令。
[0026]控制部15通過接收來自用來選擇由操作鍵確定部14指定的各操作鍵的決定鍵4的輸出，并將與所指定的操作鍵對應的執行指令發送至車載設備I，從而對車載設備I發出指示，執行分配給該操作鍵的功能。執行指令只要是能夠按照預先規定的規則進行唯一指定操作鍵的指令即可，可以是任何形態，例如由數字串或字符串構成的ID、電信號圖案或者操作鍵的名稱等。以下實施方式中也相同。
[0027]接著，參照圖2具體說明如此構成的實施方式I的車載控制裝置10的動作。此處，假設連接的車載設備I是音頻型車載導航裝置。
[0028]首先，按鍵信息接收部11通過連接的車載導航裝置(車載設備I)接收顯示在顯示器2上的操作鍵信息(步驟STl)。例如，如圖3所示，顯示器2的顯示畫面中顯示[重放]、[停止]、[下一首]、[上一首]這4個操作鍵時，如圖4所示，作為操作鍵信息，是指與各操作鍵對應的至少I個識別關鍵詞及執行指令的信息。
[0029]此處，圖3是實施方式I中在顯示器2的顯示畫面上顯示有多個操作鍵的菜單畫面的一例的圖。此外，圖4是表示圖3時的操作鍵信息(與各操作鍵對應的識別關鍵詞及執行指令)的一例的表格。此時，操作鍵[重放]的識別關鍵詞為“重放”，執行指令代碼為“0001”，操作鍵[停止]的識別關鍵詞為“停止”，執行指令代碼為“0010”，操作鍵[下一首]的識別關鍵詞為“下一首”，執行指令代碼為“0011”，操作鍵[上一首]的識別關鍵詞為“上一首”，執行指令代碼為“0100”。
[0030]其后，語音識別部12使用語音識別字典13，根據從話筒3輸入的語音信號實施語音識別，并輸出說話中含有的識別關鍵詞(步驟ST2)。例如，語音識別字典13內事先將“重放”定義為識別關鍵詞，在用戶說“嗯，‘重放’”等時，會輸出“識別關鍵詞=‘重放’”。
[0031 ]接著，操作鍵確定部14使用從語音識別部12獲取的識別關鍵詞，參照從按鍵信息接收部11獲取的操作鍵信息，判定有無與語音識別結果對應的操作鍵(步驟ST3)。具體地說，判斷有無與語音識別結果即識別關鍵詞一致的操作鍵。
[0032]然后，操作鍵信息中沒有與語音識別結果(識別關鍵詞)對應的操作鍵時(步驟ST3為否時)，返回步驟ST2，再次利用語音識別部12實施語音識別處理。
[0033]另一方面，存有與語音識別結果對應的操作鍵時、即存有與識別關鍵詞相一致的操作鍵時(步驟ST3為是時)，確定與該識別關鍵詞相一致的操作鍵(步驟ST4)，并將與該操作鍵對應的執行指令發送至控制部15。例如，“識別關鍵詞=‘重放’”時，確定“操作鍵=‘重放’”，將對應的“執行指令=‘0001’”發送至控制部15。
[0034]控制部15檢測到與車載控制裝置10連接的I個決定鍵4被按下后(步驟ST5為是時)，將從操作鍵確定部14發送來的執行指令發送至與車載控制裝置10連接的車載設備I(步驟ST6)，由車載設備I實施相應的功能。例如，將與“操作鍵=重放”對應的“執行指令=‘0001’”從車載控制裝置10發送至車載設備I，作為與“執行指令=‘0001’”對應的功能，車載設備I例如實施音樂重放。
[0035]此處，操作鍵信息接收部11相應顯示器2的顯示內容的變化，動態地接收操作鍵的信息。以下參照圖5說明其詳細內容。
圖5是顯示車載導航裝置(車載設備I)的動作及顯示器2的顯示內容、操作鍵信息以及用戶操作的具體例的說明圖。
[0036]如圖5(a)所示，顯示器2中顯示有具有[設定目的地][音頻][編輯路線][幫助]以及[返回]這5個操作鍵的主菜單。此時，按鍵信息接收部11接收的操作鍵信息如圖5(b)所不O
[0037]在此狀態下，例如用戶想要重放音樂時，如圖5(c)所示，用戶說“嗯，‘音頻’”并按下決定鍵4后，如圖5(d)所示，在顯示器2上顯示音頻菜單畫面(轉移至音頻菜單畫面)。
[0038]在圖5(d)所示的音頻菜單畫面中，顯示有[藝術家][專輯][所有曲目][檢索]以及[返回]這5個操作鍵。此時，按鍵信息接收部11接收的操作鍵信息如圖5(e)所示。
在此狀態下，例如圖5(f)所示，用戶說“所有曲目”并按下決定鍵4后，顯示器2上會顯示所有曲目列表畫面(轉移至所有曲目列表畫面)。
[0039]以下，省略圖示，此處進一步按照如下流程進行操作即可:用戶繼續說“XXXX”(列表中的樂曲名)并按下決定鍵4后，歌曲XXXX得以重放，并顯示如上所述的音頻操作畫面。
另外，圖5(c)及(f)所示的符號30表示用戶說的話(說話內容)。
[0040]如上所述，根據該實施方式I，無需直接接觸顯示在顯示器上的多個操作鍵且無需復雜的按鍵操作，即可進行操作。此外，通過僅在方向盤上設置I個決定鍵，用戶在駕駛過程中無需松開方向盤即可對顯示在顯示器上的操作鍵進行安全操作。
[0041 ] 此外，對于具有例如在層次化的畫面間進行轉移的UI (User Interface，用戶界面)的車載設備或者在顯示區域內操作鍵存在局部重疊或添加的顯示，也可動態地實施相應的操作，也就是說，可相應顯示器的顯示內容的變化，動態地接收操作鍵的信息，因此即使所顯示的操作鍵發生變更，也能夠實施動態跟蹤，或者能對應彈出的通知進行操作。
[0042]此外，如圖6所示，車載控制裝置10還具有字典生成部16，其基于所顯示的操作鍵的信息，根據至少與顯示在顯示器2上的操作鍵對應的語句(識別關鍵詞)生成字典，語音識別部12也可使用通過字典生成部16生成的語音識別字典17，識別用戶說出的語音。
[0043]在生成語音識別字典17時，為了識別語音而需要使用音素等讀取信息，但該信息可與識別關鍵詞對應地填入操作鍵信息中，也可通過形態分析處理等，根據操作鍵信息的操作鍵名稱和識別關鍵詞的信息等文本信息，添加或推測讀取信息。此處的形態分析處理可使用一般方法，例如上述語音識別處理中也使用的Hidden Markov Model等。
[0044]如上所述，在顯示內容發生動態變化時會相應地生成語音識別字典17，因此能夠將語音識別對象詞匯數抑制在所需最小限度。因此，能夠防止誤識別與操作無關的語句，或者能夠縮短語音識別所需的時間，提高語音識別性能(精度、響應速度等)，所以用戶能夠實施方便的操作。
[0045]此外，如圖7所示，車載控制裝置10除了決定鍵4以外還具有用來識別用戶的身體動作的動作識別部18，控制部15也可在通過動作識別部18識別出用戶打算執行的身體動作，例如點頭或眨眼等時，發出指示，執行分配給所確定的操作鍵的功能。
[0046]作為動作識別部18的身體動作識別處理，采用使用攝像頭5的一般的圖案識別即可，點頭的檢測中，可以在頭部安裝加速度傳感器，在規定方向上檢測出規定強度時判斷為點了頭。
[0047]如此，不僅是決定鍵，連按下決定鍵的動作(操作)也不需要，因此無需任何按鈕操作，手或手指完全無需松開方向盤，即使在行駛中也能夠實施安全的操作。
[0048]另外，通過使用車載控制裝置10的車載設備I的微型計算機運行與本發明特有的處理有關的程序，能夠作為硬件與軟件聯動的具體單元，從而實現車載控制裝置10。以下實施方式中也相同。
[0049]實施方式2
圖8是表示本發明的實施方式2的車載控制裝置的一例的框圖。另外，與實施方式I中說明的結構相同時，標注相同符號并省略重復說明。
[0050]與實施方式I相比，以下所示的實施方式2的車載控制裝置10還具有受理信息通知部19，其基于操作鍵確定部14的操作鍵確定結果，通過所連接的揚聲器6、或車載設備I利用顯示器2通知以下某種信息:開始受理該確定的操作鍵的執行指示、正在繼續受理執行指示、或者所確定的操作鍵信息。另外，雖然省略了圖示，但也可使用與車載設備I連接的揚聲器。
[0051]以下，說明如此構成的實施方式2的車載控制裝置10的動作。
圖9是表示實施方式2的車載控制裝置10的動作的流程圖。此處，也與實施方式I同樣地假設所連接的車載設備I是音頻型導航裝置。
[0052]到通過操作鍵確定部確定操作鍵為止的處理(步驟STll?ST14)與實施方式I的圖2所示的流程圖的步驟STl?ST4相同，因此省略說明。
[0053]此外，該實施方式2中，在步驟ST14中操作鍵確定部14確定操作鍵后，受理信息通知部19會通知通過操作鍵確定部14確定操作鍵后能受理該操作鍵的執行指示;或者所確定的操作鍵的信息等中至少如下的某種信息:確定操作鍵后開始受理該操作鍵的執行指示、正在繼續受理執行指示、所指定的操作鍵的信息(步驟ST15)。
[0054]具體地說，例如接收確定為“操作鍵=‘重放’”的結果后，通過從所連接的揚聲器6中鳴響音效或音樂，或者變更顯示器2的顯示畫面的亮度、顏色等，通知操作鍵已被確定且能夠受理該操作鍵的執行指示等。
[0055]并且，也可利用針對每個操作鍵準備的錄音語音或語音合成的TTS(TexttoSpeech，從文字到語音)技術，讀出操作鍵名稱(例如“重放”等)等，以將所確定的操作鍵明確地傳達給用戶。此外，也可對顯示在顯示器2上的操作鍵施加視覺效果，例如圖10(b)所示，使所確定的操作鍵的周圍亮燈、在所選擇的操作鍵附近顯示表示確定的圖形或圖標、或者變更操作鍵部分的亮度、顏色、形狀、大小等。
[0056]圖10是表示實施方式2中從在顯示器2的顯示畫面上顯示多個操作鍵的菜單畫面進行轉移的一例的圖。
如圖10(a)所示，顯示器2中顯示有具有[設定目的地][音頻][路線編輯][幫助]以及[返回]這5個操作鍵的主菜單。
[0057]在此狀態下，例如用戶想要重放音樂時，用戶說“音頻”后，會如圖10(b)所示，通過僅[音頻]這一操作鍵被附加用框圍住等強調顯示40，從而使用戶能夠視覺識別已可受理該操作鍵的執行指示。
[0058]然后，在此狀態下，用戶按下決定鍵4后，如圖10(c)所示，在顯示器2上顯示[藝術家][專輯][所有曲目][檢索]以及[返回]這5個操作鍵。以后的操作及畫面轉移予以省略。
[0059]如上所述，根據該實施方式2，能夠在執行指示前確認可受理執行指示的定時或所確定的操作鍵中的至少一個，因此能夠抑制在操作鍵被確定前即使按下決定鍵也無法受理執行指示的問題、或因確定了與意圖不同的操作鍵而產生誤操作(與用戶的意圖不同的操作)的問題。
[0060]此外，如圖11所示，車載控制裝置10還具有用來獲取車輛的信息的車輛信息獲取部20，受理信息通知部19也可以相應通過車輛信息獲取部20從各種傳感器7獲取的車速或方向盤的轉向角等車輛信息，變更對所確定的操作鍵進行通知的通知方法。
[0061]例如，如上所述要將所確定的操作鍵特別明確地傳達給用戶時，考慮如下方法，如果車輛的行駛速度小于預先決定的規定值，則判斷為有查看畫面的空閑，從而重視方便性，例如圖10(b)所示，對顯示器2發出指示，采用傳遞通知信息時無需花費時間的畫面顯示方式來進行通知，如果車輛的行駛速度為規定值以上，則重視安全性，對揚聲器6發出指示，采用無需查看畫面的聲音方式來進行通知(語音向導等)。
[0062]然后，控制部15檢測到與車載控制裝置10連接的I個決定鍵4被按下后(步驟ST16為是時)，將發送自操作鍵確定部14的執行指令發送至與車載控制裝置10連接的車載設備I(步驟ST17)，車載設備I實施相應的功能。
[0063]如此，例如在停車時采用畫面顯示方式進行通知，因此能夠輕松操作，在行駛時采用語音輸出方式進行通知，因此能夠實現安全操作等，從而能夠在用戶的駕駛負荷較低時重視方便性，在用戶的駕駛負荷較高時重視安全性，將所確定的操作鍵通知給用戶，因此，用戶能夠相應駕駛狀況進行安全且方便的操作，并能夠改善操作的不便。
[0064]另外，此處的車輛信息含有車輛行駛的道路的道路寬度和彎曲程度(直線程度)等道路信息、行駛中的時刻信息等，不僅是停車時和行駛時的差異，還可根據車速來變化通知方法，或者根據行駛場所、道路信息、時刻等變更該車速的閾值并變化通知方法，因此對于用戶來說，能夠提供安全且方便的操作。
[0065]此外，雖然省略了圖示，但也可根據所連接的導航裝置(車載設備I)等的信息來獲取行駛中的自車位置、道路寬度信息，從而根據行駛的難易度來變更行駛速度的規定值(閾值)。
[0066]實施方式3
圖12是表示本發明的實施方式3的車載控制裝置的一例的框圖。另外，與實施方式1、2中說明的結構相同時，標注相同符號并省略重復說明。
[0067]與實施方式I相比，以下所示的實施方式3的車載控制裝置10還具有受理期間設定部21，其設定可受理分配給由操作鍵確定部14確定的操作鍵的功能的執行指示期間(受理期間)，控制部15僅在受理期間設定部21所設定的受理期間內受理執行指示。
[0068]以下，說明如此構成的實施方式3的車載控制裝置10的動作。
圖13是表示實施方式3的車載控制裝置10的動作的流程圖。此處，也與實施方式1、2同樣地假設所連接的車載設備I是音頻型車載導航裝置。
[0069]到通過操作鍵確定部14確定操作鍵為止的處理(步驟ST21?ST24)與實施方式I的圖2所示的流程圖的步驟STl?ST4相同，因此省略說明。
[0070]然后，該實施方式3中，在步驟ST24中由操作鍵確定部14確定操作鍵后，受理期間設定部21接收操作鍵確定部14的操作鍵確定結果，并設定預先決定的規定受理期間例如10秒鐘(步驟ST25)。
[0071]如果在確定操作鍵后的規定受理期間(此處為10秒)以內(步驟ST26為否時)，則控制部15與實施方式I同樣地等待用戶按下決定鍵。另一方面，如果操作鍵被確定后經過規定受理期間(10秒)，仍未檢測出用戶按下決定鍵(步驟ST27為否且步驟ST26為是時)，則返回步驟ST22，再次利用語音識別部12實施語音識別處理。
[0072]然后，控制部15檢測到與車載控制裝置10連接的I個決定鍵4被按下后(步驟ST27為是時)，將發送自操作鍵確定部14的執行指令發送至與車載控制裝置10連接的車載設備I(步驟ST28)，車載設備I實施相應的功能。
[0073]如上所述，根據該實施方式3，若操作鍵被確定后到決定鍵被按下的期間內經過了受理期間，則識別出的語句會被取消，因此能夠降低出現誤識別時發生并非用戶所意圖的動作的可能性。此外，由于用戶會將注意力集中在駕駛方面，所以在忘記所確定的操作鍵為何等時，也能夠通過在經過受理期間后重新發聲來重新從語音識別開始進行操作，因此能夠改善用戶的操作方便性。
[0074]此外，如圖14所示，語音識別部12在步驟ST25中設定了規定受理期間后的該受理期間內也會運行，每次語音識別部12的語音識別結果發生變更時，操作鍵確定部14可基于該變更后的語音識別結果重新確定操作鍵。
[0075]也就是說，用戶在操作鍵被確定后的規定受理期間(例如10秒)以內且用戶未按下決定鍵的期間內說了話(用戶重新說話)時(步驟ST26、ST27都為否且步驟ST29為是時)，返回步驟ST22，再次利用語音識別部12實施語音識別處理。
[0076]如此，在操作鍵被確定但想要重新選擇其他操作鍵或所確定的操作鍵不正確等時，只要未經過規定期間，就能夠通過重新說話來方便地糾正誤識別，因此能夠改善用戶的操作方便性。
[0077]此外，如圖15所示，車載控制裝置10還具有用來獲取車輛的信息的車輛信息獲取部20，受理期間設定部21也可以根據車輛信息獲取部20從各種傳感器(車速傳感器等)7獲取的車速或方向盤的轉向角等車輛信息，變更受理期間(使其可變)。另外，此處的車輛信息中含有車輛行駛的道路的道路寬度及彎曲程度(直線程度)等道路信息等。
[0078]例如，高速行駛時或在路口左轉/右轉時，判斷為駕駛負荷較高、用戶難以按下決定鍵時，則延長設定受理期間，反之如果方向盤的操作頻率較低，持續了一段時間的直線行駛，則判斷為駕駛負荷較低、用戶容易按下決定鍵，從而縮短設定受理期間。
[0079]如此，根據與駕駛負荷有關的用戶空閑程度，來設定適當的受理期間，因此能夠減輕操作中的問題，例如在忙碌時無法在受理期間內實施執行指示，為此必須再次實施語音識別才能進行操作，或者在發生誤識別時可能出現并非用戶所意圖的動作。
[0080]此外，雖然省略了圖示，但也可以根據所連接的導航裝置(車載設備I)等的信息獲取行駛中的自車位置及道路寬度信息，并相應行駛的難易度變更受理期間。
[0081 ]實施方式4
圖16是表示本發明的實施方式4的車載控制裝置的一例的框圖。另外，與實施方式I?3中說明的結構相同時，標注相同符號并省略重復說明。
[0082]與實施方式I相比，以下所示的實施方式4的車載控制裝置10還具有說話判定部22，其判定來自話筒3的輸入語音(用戶說話的語音)是否為意圖進行操作的話語，僅在通過說話判定部22判定為輸入語音(說話的語音)是意圖進行操作的話語時，語音識別部12才對該話語進行語音識別。
[0083]說話判定部22的說話狀態判定處理(判定是否為意圖進行操作的話語的處理)中，使用例如語音識別中使用的上述Hidden Markov Model即可，例如如果作為并非意圖進行操作的話語，預先學習笑聲、咳嗽、噴嚏或多人對話中的至少I個語音特征，則能夠識別出輸入語音并非意圖進行操作的話語，因此能夠判定其是否為意圖進行操作的話語。
[0084]或者，雖然省略了圖示，但在車內使用時，乘客的位置不會頻繁變動，因此通過配置多個話筒，從而能根據各話筒的輸入信號的功率比或相位差的變動，來判斷其是否為多人進行會話，因此在這種多人對話的情況下，能夠判定為并非意圖進行操作的話語。此外，僅以駕駛者為操作對象時，能夠將來自駕駛座位置方向以外的語音判定為并非意圖進行操作的話語。
[0085]以下，說明如此構成的實施方式4的車載控制裝置10的動作。
圖17是表示實施方式4的車載控制裝置10的動作的流程圖。此處，也與實施方式I?3同樣地假設所連接的車載設備I是音頻型車載導航裝置。
[0086]首先，操作鍵信息接收部11通過所連接的車載導航裝置(車載設備I)接收顯示在顯示器2上的操作鍵信息(步驟ST31)。
接著，說話判定部22通過例如上述方法判定來自話筒3的輸入語音是否為意圖進行操作的話語(步驟ST32)。
[0087]然后，在判定為來自話筒3的輸入語音并非意圖進行操作的話語時(步驟ST32為否時)進行等待，直至判定為意圖進行操作的話語被輸入。也就是說，在判定為并非意圖進行操作的話語時，在實施語音識別處理前放棄該輸入語音。
[0088]另一方面，在判定為是意圖進行操作的話語時(步驟ST32為是時)，語音識別部12接收說話判定部22對說話狀態的判定結果，并實施語音識別處理(步驟ST33)。也就是說，僅在步驟ST32中判定為是意圖進行操作的話語時，實施語音識別處理。
[0089]接著，操作鍵確定部14使用從語音識別部12獲取的識別關鍵詞，參照從按鍵信息接收部11獲取的操作鍵信息，判定有無與語音識別結果對應的操作鍵(步驟ST34)。
[0090]然后，在操作鍵信息中沒有與語音識別結果(識別關鍵詞)對應的操作鍵且操作鍵未被確定時(步驟ST34為否時)，返回步驟ST32，再次由說話判定部22實施說話狀態判定處理。
[0091]另一方面，若存在與語音識別結果對應的操作鍵且操作鍵已被確定時，S卩、存在與識別關鍵詞相一致的操作鍵(步驟ST34為是)，則其后的處理(步驟ST35?ST37)與實施方式I的圖2所示的流程圖的步驟ST4?ST6相同，因此省略說明。
[0092]如上所述，根據該實施方式4，能夠在語音識別前去除與操作無關的話語，因此能夠在語音識別處理中抑制誤識別的發生頻率，抑制并非意圖的操作鍵的執行，從而改善用戶操作的方便性。
[0093]實施方式5
圖18是表示本發明的實施方式5的車載控制裝置的一例的框圖。另外，與實施方式I?4中說明的結構相同時，標注相同符號并省略重復說明。
[0094]與實施方式I相比，以下所示的實施方式5的車載控制裝置10還具有輸出音去除部23，其獲取從車載設備I輸出至與車載設備I連接的揚聲器8的揚聲器輸出音信號，并從輸入音中去除該揚聲器輸出音的成分，通過該輸出音去除部23去除揚聲器輸出音的成分后，由語音識別部12對語音實施語音識別。
[0095]作為輸出音去除部23的輸出音去除方法，例如可使用一般的揚聲器輸出音信號及話筒輸入音信號，并利用通過學習辨識法(learning identificat1n method)求得濾波器系數的自適應濾波器等來實施去除。如此，能夠推測在使用的聲響環境下輸入至話筒的揚聲器輸出音的聲學回聲成分，因此通過從輸入至話筒的語音信號中減去該聲學回聲成分，能夠抑制揚聲器輸出音信號對語音識別精度造成的影響。
[0096]以下，說明如此構成的實施方式5的車載控制裝置10的動作。
圖19是表示實施方式5的車載控制裝置10的動作的流程圖。此處，也與實施方式I?4同樣地假設連接的車載設備I是音頻型車載導航裝置。
[0097]首先，操作鍵信息接收部11通過連接的車載導航裝置(車載設備I)接收顯示在顯示器2上的操作鍵信息(步驟ST41)。
接著，輸出音去除部23接收從車載設備I發送至揚聲器8的揚聲器輸出音信號(步驟ST42)，使用該揚聲器輸出音信號及從話筒輸入的語音信號，通過例如上述方法，從話筒輸入的語音中去除揚聲器輸出的語音的聲學回聲成分(輸出音成分)(步驟ST43)。
[0098]然后，語音識別部12對通過輸出音去除部23去除揚聲器輸出音后的輸入語音實施語音識別處理(步驟ST44)。
該語音識別處理以后的處理(步驟ST45?ST48)與實施方式I的圖2所示的流程圖的步驟ST3?ST6相同，因此省略說明。
[0099]另外，上述實施方式5中，去除的是所連接的車載設備I的揚聲器輸出音信號，但也可以一同接收并去除從車載控制裝置10本身及其他機器或搭載有車載控制裝置10的車輛等輸出的聲音的信號。
[0100]如上所述，根據該實施方式5，即使在車載語音向導、音效播放過程中或音樂重放過程中，也能夠從話筒輸入的語音中去除揚聲器輸出音的聲學回聲成分，因此能夠抑制誤識別，實施更高精度的語音識別，并且能夠改善用戶操作的方便性。
[0101]實施方式6
圖20是表示本發明的實施方式6的車載控制裝置的一例的框圖。另外，與實施方式I?5中說明的結構相同時，標注相同符號并省略重復說明。
[0102]與實施方式I相比，以下所示的實施方式6的車載控制裝置10還具有用來檢測用戶視線的視線檢測部24，操作鍵確定部14使用視線檢測部24所檢測出的視線信息及語音識別部12的識別結果，來確定操作鍵。
視線檢測部24檢測用戶的視線，并將該視線的坐標信息發送至操作鍵確定部14。
[0103]視線檢測部24的視線檢測處理中，例如可基于通過攝像頭5拍攝用戶的臉部的圖像，利用一般的圖案識別，根據臉部方向大致推測視線，或者雖然省略了圖示，但也可使用采用光源照射的角膜反射法等來檢測視線。此外，如果事先獲取顯示器2與用戶的肉眼的相對位置關系的信息，則可作為坐標值獲取用戶在查看顯示器2的哪個部分。
[0104]以下，說明如此構成的實施方式6的車載控制裝置10的動作。
圖21是表示實施方式6的車載控制裝置10的動作的流程圖。此處，也與實施方式I?5同樣地假設連接的車載設備I是音頻型車載導航裝置。
[0105]首先，按鍵信息接收部11通過連接的車載導航裝置(車載設備I)接收顯示在顯示器2上的操作鍵信息(步驟ST51)。
此處接收的操作鍵信息如圖22所示，除了與各操作鍵對應的識別關鍵詞及執行指令以夕卜，還包含顯示各操作鍵的顯示器2上的坐標信息例如(x，y) = (100，100)等。該坐標信息中只要是能夠唯一識別例如操作鍵的左上坐標或中心坐標等顯示位置的信息即可，也可一同添加知曉尺寸的信息。
[0106]接著，視線檢測部24通過例如上述方法，根據通過攝像頭5拍攝的攝像頭圖像檢測用戶的視線方向，獲取用戶視線所朝向的顯示器2的顯示畫面上的對應坐標信息(以下稱為“視線坐標”)例如(X，y) = (200，200)，并發送至操作鍵確定部14(步驟ST52)。
此外，語音識別部12使用語音識別字典13，根據從話筒3輸入的語音信號實施語音識別，并輸出說話中含有的識別關鍵詞(步驟ST53)。
[0107]然后，操作鍵確定部14基于步驟ST52中從視線檢測部24接收的視線坐標、步驟ST53中識別出的語音識別結果以及步驟ST51中接收到的操作鍵信息，來判定有無與視線方向及識別結果對應的操作鍵(步驟ST54)，若存在與視線方向及識別結果對應的操作鍵(步驟ST54為是時)，則確定與語音識別結果對應的操作鍵(步驟ST55)。
[0108]具體而言，將從通過視線檢測部24接收到的視線坐標(1，50= (200，200)至預先決定的規定范圍例如± 100、即從坐標(x，y) = (100，100)至(x，y) = (300，300)為止的范圍假設為可識別范圍。
[0109]然后，根據添加至按鍵信息接收部11所接收到的操作鍵信息中的操作鍵的坐標信息，操作鍵處于上述可識別范圍內即操作鍵信息是圖22中所示的信息時，僅坐標(x，y) =(100，100) S卩[重放]及坐標(x，y) = (100，300) S卩[下一首]為可識別范圍內的操作鍵，因此僅參照操作鍵[重放]及[下一首]的操作鍵信息，確定與語音識別結果對應的操作鍵。
[0110]另一方面，可識別范圍內的操作鍵信息中沒有與語音識別結果(識別關鍵詞)對應的操作鍵時(步驟ST54為否時)，返回步驟ST52，并再次實施視線檢測部24的視線檢測及語音識別部12的語音識別處理。
[0111]然后，步驟ST55的操作鍵確定以后的處理(步驟ST56?ST57)與實施方式I的圖2所示流程圖的步驟ST5?ST6相同，因此省略說明。
另外，要連接多個車載設備時，也可利用視線檢測部24檢測出的視線方向來限定操作對象機器。
[0112]此外，雖省略了圖示，但與實施方式I同樣，還具有字典生成部16(參照圖6)，可使用添加至操作鍵信息中的坐標位置及通過視線檢測部24獲取的視線坐標，生成語音識別字典，僅限定規定的可識別范圍中含有的操作鍵實施語音識別。
[0113]如此，通過從顯示畫面中篩選出用戶查看的附近位置，并限定在該篩選出的附近位置確定操作鍵，從而將語音識別的對象限定為與用戶想要操作的按鍵對應的識別關鍵詞，因此能夠提高語音識別的精度或響應速度。在例如顯示器2的顯示畫面較大的情況下，或有多個畫面(多個顯示器)等情況下，特別有效。
[0114]如上所述，根據該實施方式6，能夠通過視線檢測推測用戶想要操作的按鍵，并且能夠抑制對與說話不同的操作鍵的確定，因此能夠抑制對并非意圖的操作鍵的執行，改善用戶的操作方便性。
[0115]另外，本申請發明可在本發明的范圍內自由組合各實施方式，或者改善各實施方式的任意構成要素或在各實施方式中省略任意構成要素。
【工業上的實用性】
[0116]只要是例如車載導航裝置或HUD(Head-UpDisplay，平視顯示器)、儀表板等具有操作控制功能的顯示器、具有顯示器的機器或與顯示器連接的機器等進行顯示及操作的裝置就可將本發明的車載控制裝置適用于任何的車載設備。此外，該車載控制裝置自身也可組裝于這些機器中。
【符號說明】
[0117]I車載設備 2顯示器
3話筒 4決定鍵 5攝像頭
6、8揚聲器 7各種傳感器 10車載控制裝置 11按鍵信息接收部 12語音識別部13、17語音識別字典14操作鍵確定部15控制部16字典生成部18動作識別部19受理信息通知部20車輛信息獲取部21受理期間設定部22說話判定部23輸出音去除部24視線檢測部30說話(說話內容)40強調顯示。
【主權項】
1.一種車載控制裝置，其用來對搭載于車輛的車載設備實施控制，其特征在于，具有: 按鍵信息接收部，其根據顯示在與所述車載設備連接的顯示器上的顯示內容的變化，動態地接收顯示在所述顯示器上的多個操作鍵的信息； 語音識別部，其使用語音識別字典，識別用戶說話的語音； 操作鍵確定部，其基于所述按鍵信息接收部所接收到的操作鍵信息及所述語音識別部的語音識別結果，來確定與所述用戶說話的語音對應的操作鍵;以及 控制部，其接收來自決定鍵的輸出，以選擇由所述操作鍵確定部所確定的操作鍵，并對所述車載設備發出指示，以執行分配給所確定的所述操作鍵的功能。2.根據權利要求1所述的車載控制裝置，其特征在于， 還具有字典生成部，其基于所述操作鍵的信息，至少根據與顯示在所述顯示器上的操作鍵相對應的語句，生成所述語音識別字典， 所述語音識別部使用所述字典生成部所生成的語音識別字典，識別所述用戶說話的語■~>V.曰O3.根據權利要求1所述的車載控制裝置，其特征在于， 還具有受理信息通知部，其基于所述操作鍵確定部的操作鍵確定結果，通知以下至少一項內容:開始受理所確定的所述操作鍵的執行指示的情況、正在繼續受理所確定的所述操作鍵的執行指示的情況、或者所確定的所述操作鍵信息。4.根據權利要求3所述的車載控制裝置，其特征在于， 還具有車輛信息獲取部，其用來獲取所述車輛的信息， 所述受理信息通知部根據所述車輛信息獲取部所獲取的車輛信息，變更進行所述通知的方法。5.根據權利要求1所述的車載控制裝置，其特征在于， 還具有受理期間設定部，其設定能對分配給所述操作鍵確定部所確定的操作鍵的功能的執行指示進行受理的受理期間， 所述控制部僅在所述受理期間設定部所設定的所述受理期間內受理執行指示。6.根據權利要求5所述的車載控制裝置，其特征在于， 所述語音識別部在所述受理期間內也進行動作， 所述操作鍵確定部在每次所述語音識別部的語音識別結果發生變更時，基于該變更后的語音識別結果重新確定操作鍵。7.根據權利要求5所述的車載控制裝置，其特征在于， 還具有車輛信息獲取部，其用來獲取所述車輛的信息， 所述受理期間設定部根據所述車輛信息獲取部所獲取的車輛信息，來變更所述受理期間。8.根據權利要求1所述的車載控制裝置，其特征在于， 還具有說話判定部，其判定所述用戶說話的語音是否為意圖進行操作的話語， 所述語音識別部僅在所述說話判定部判定為所述說話的語音是意圖進行操作的話語的情況下實施語音識別。9.根據權利要求1所述的車載控制裝置，其特征在于， 還具有動作識別部，其用來識別所述用戶的身體動作， 所述控制部在所述動作識別部識別出所述用戶意圖執行功能的身體動作的情況下發出指示，以執行分配給所確定的所述操作鍵的功能。10.根據權利要求1所述的車載控制裝置，其特征在于， 還具有輸出音去除部，其獲取從所述車載設備輸出的輸出音信號，并從輸入音去除該輸出音的成分， 所述語音識別部對于經過所述輸出音去除部去除所述輸出音的成分后的語音實施所述語音識別。11.根據權利要求1所述的車載控制裝置，其特征在于， 還具有視線檢測部，其檢測所述用戶的視線，并將該視線的坐標信息發送至所述操作鍵確定部， 所述按鍵信息接收部一同接收顯示有各操作鍵的顯示器上的坐標信息，以作為所述操作鍵信息， 所述操作鍵確定部基于從所述視線檢測部接收到的所述視線的坐標信息、所述語音識別部的識別結果以及所述按鍵信息接收部所接收到的操作鍵信息，來確定所述操作鍵。12.一種車載控制方法，其用來對搭載于車輛的車載設備實施控制，其特征在于，具有如下步驟: 按鍵信息接收部根據顯示在與所述車載設備連接的顯示器上的顯示內容的變化，動態地接收顯示在所述顯示器上的多個操作鍵的信息的步驟； 語音識別部使用語音識別字典，識別用戶說話的語音的步驟； 操作鍵確定部基于所述按鍵信息接收部所接收到的操作鍵信息及所述語音識別部的語音識別結果，確定與所述用戶說話的語音相對應的操作鍵的步驟;以及 控制部接收來自決定鍵的輸出，以選擇所述操作鍵確定部所確定的操作鍵，并對所述車載設備發出指示，以執行分配給所確定的所述操作鍵的功能的步驟。
【文檔編號】B60R16/037GK106030697SQ201480076456
【公開日】2016年10月12日
【申請日】2014年2月26日
【發明人】武井匠, 熊谷太郎
【申請人】三菱電機株式會社