專利名稱：具備近接感測投影點坐標指示的離屏觸控交互系統的制作方法
技術領域：
本發明是關于ー種觸控式圖形界面人機交互系統，特別是關于觸控裝置與顯示裝置分離的、觸控裝置具備近接物體投影點坐標感測、圖形界面上可顯示近接物體投影點位置指示點的觸控式圖形界面人機交互系統。
背景技術：
目前圖形界面人機交互系統主要有以下兩大類。ー類是已經廣泛應用多年的基于鼠標輸入的圖形界面，以美國微軟公司的Window操作系統圖形界面為典型代表。這種圖形界面交互方式的主要特點是，界面上始終顯示一個指示點，例如鼠標箭頭或文字輸入光標。使用者操作一個ニ維平面坐標輸入設備，例如鼠標、軌跡球、觸控板(TouchPad)Jl^Jf (TrackPoint)等,該設備產生ニ維坐標數據，圖形界面根據該坐標數據定位鼠標或光標，根據該坐標數據的變化而在圖形界面上移動鼠標或光標，從而定位圖形界面上的各種元素，如按鈕、菜単、圖標、文字等，然后利用對機械按鍵或觸控板的點擊動作對已定位的界面元素進行點選(click)操作，或在點擊后并且釋放按鍵之前進行拖曳(drag)操作。另ー類是近年來逐漸流行的觸控式圖形界面，以美國蘋果電腦公司的手機和平板電腦所采用的圖形界面為典型代表。這種圖形界面交互方式的主要特點是，其顯示屏同時也是ー個觸控面板，無論實際實現上觸控面板與顯示屏是集成為單ー設備，還是觸控面板作為附加設備覆蓋于顯示屏之上，對于使用者來說沒有可察覺的區別，兩者融為一體。這種觸控界面不需要顯示指示點，因為手指或觸控筆等物體本身就指明了觸碰的位置。使用者因此可以根據直覺用手指或觸控筆等物體對圖形界面中的元素進行點選(click)、拖曳(drag)等操作，并且可以支持多個觸控點，以及執行更多復雜的基于手勢(Gesture)的操作。這種交互方式帶來了十分出色的用戶體驗，在便攜式設備上的應用近年來得到了飛速的發展。上述第一類交互系統的主要缺陷在干，1，操作圖形界面的直觀性和易用性相對較差，例如選取ー個界面元素需要兩個動作首先通過ニ維坐標輸入設備移動指示點到界面元素上方，然后通過點擊機械按鍵或觸控板來執行點選操作。2，此種系統通常只同時支持ー個指示點，即使有多個輸入設備接入系統，也只能對這ー個指示點進行移動，例如筆記本電腦同時具備觸控板和鼠標，但是圖形界面上鼠標或光標總是只有ー個。也因此無法實現更多的手勢操作，如在觸控式圖形界面上易于實現的兩個手指分開放大圖像，合攏縮小圖像。3，此種交互系統的輸入設備通常需要機械按鍵或鍵盤的配合才能完整地實現所有交互操作。 上述第二類交互系統的直觀性和易用性優于第一類，但是其最大的缺陷或者說限制在于，觸控面板必須與顯示屏合為一體，這樣才能達到交互操作時的直觀性和易用性。這就要求要么將觸控面板完全集成于顯示屏之內(in-cell)，或者以透明的形式覆蓋于顯示屏之上。這樣帶來的問題在干，1，觸控面板的技術要求和生產成本較高，生產過程中的良品率相對較低。2，對于非便攜式設備，例如平板電視、投影儀等，其顯示屏通常尺寸較大，因此使用者需要與顯示屏之間保持一定距離，才能獲得較舒適的視野范圍和清晰度，如此ー來使用者無法直接觸摸到顯示屏，如果一定要使用者靠近顯示屏去進行觸控操作，完成操作之后再后退到原來的位置，無疑使用起來極為不便，用戶體驗甚至比采用鼠標的方式更糟。這是此類交互系統最大的局限性。
目前已經出現ー些觸控式遙控器，其配置有觸控面板，可將觸控信息傳送至接收端，進而控制遠端的圖形交互界面，但是現有的這類產品都未能很好地解決ー個主要矛盾因為觸控面板與顯示屏分離，使用者無法通過觸控面板直觀地定位圖形界面上的元素，因而無法直觀、快捷地實現交互操作。已知的解決方案包括1，實質上是將上述第一類交互系統的ニ維坐標輸入設備改裝為無線傳輸，或較遠距離的有線傳輸，使用者通過遙控器上的觸控面板控制顯示屏上的鼠標或光標，移動到指定的界面元素之上，然后再通過點擊動作實現點選，這種方案繼承了上述第一類交互系統的所有缺陷。2，遙控器具備顯示屏和觸控面板，遙控器與受控端建立雙向數據連接，受控端可將顯示在遠端顯示屏上的圖形界面部分或全部傳送到該遙控器上，在遙控器顯示屏上同步顯示出來，使用者可直觀地在遙控器上執行觸控交互操作。此種方案的缺陷為，使用者視線必須在遠端顯示屏和遙控器顯示屏之間轉換，使用者在執行交互操作時無法同時觀看遠端顯示屏上的內容，其易用性大打折扣；且基于傳輸速率限制，遠端顯示屏上顯示的內容有時不能完整地，實時地在遙控器顯示屏上呈現；另外，此種方案遙控器和接收端的成本都較高。
發明內容
本發明提出一種觸控式圖形界面人機交互系統，包括與圖形界面顯示裝置分離的觸控裝置，其觸控面板具備近接感測功能，既可感測物體接觸到觸控面板時的觸碰點的坐標數據，也可感測接近觸控面板的物體在觸控面板上的投影點的坐標數據，并將該兩種坐標數據傳送至圖形界面控制模塊；由圖形界面控制模塊在顯示裝置上以指示點的形式顯示出來。該圖形界面控制模塊可與顯示裝置集成在同一個設備內，比如平板電視，或作為ー個單獨的設備并向顯示裝置輸出畫面，比如機頂盒。使用者在操作該觸控裝置時，視線不必離開顯示屏，當手指或觸控筆等物體靠近觸控面板并被感測到時，在顯示屏上可直觀地看到對應的指示點的位置和其移動的軌跡。因此，用戶可以像操作便攜設備觸控界面一祥在遠端顯示屏上實現直覺式的觸控操作。根據本發明的觸控裝置包括觸控面板、控制模塊、數據傳輸模塊。其中觸控面板可感測物體接觸時觸碰點的位置并輸出坐標數據，并且可以感測物體接近時相對于觸控面板的投影點的位置并輸出坐標數據。該觸控面板可同時支持一個或者多個觸碰點以及投影點的感測。其中控制模塊讀取觸控面板輸出的觸碰點和投影點的坐標數據，將其轉換成可供數據傳輸模塊發送的格式。其中數據傳送模塊從控制模塊接收數據并傳送至接收端。根據本發明的圖形界面控制模塊包括數據傳輸模塊、數據處理模塊、觸控式圖形界面控制模塊、指示點控制模塊、畫面合并顯示模塊。其中數據傳輸模塊負責與上述觸控裝置通過無線或有線的數據連接，接收由觸控裝置發送的數據，并轉發給數據處理模塊。其中數據處理模塊將接收到的數據進行解析，得到觸控面板輸出的觸碰點坐標和投影點坐標，井分發給指示點控制模塊和觸控式圖形界面控制模塊。其中觸控式圖形界面控制模塊負責繪制圖形界面，井根據接收到的一個或者多個觸碰點坐標數據執行相應的觸控界面交互操作，即實現如前述第二類交互系統的功能。其中指示點控制模塊根據接收到的一個或者多個觸碰點坐標數據和投影點坐標數據在圖形界面之上對應的位置繪制明顯可見的ー個或者多個指示點，該觸碰點坐標數據和投影點坐標數據的變化直接表現為該指示點在圖形界面上的移動。其中畫面合并顯示模塊將圖形界面與所有的指示點合并為ー個畫面，以供在顯示裝置上顯示，并保證所有指示點在Z軸方向上位于圖形界面之上，而不會被任何界面元素所遮蓋根據本發明的指示點，包括根據已感測的近接物體投影點的個數，在顯示屏上具有相同數量的指示點；根據已接觸的物體觸碰點的個數，在顯示屏上具有相同數量的指示點。該指示點在任意圖形界面之上的任意位置均清晰可見。該指示點可以用不同的顯示方式來區分其所指示的是觸碰點還是投影點，不同的顯示方式可以通過指示點的形狀、大小、紋理、顔色或其他方式來區分，是否需要區分兩種指示點視乎使用者的需求而定，可以由使用者進行配置。當近接物體在可感測范圍內移動但尚未接觸到觸控面板時，該指示點跟隨該近接物體投影點的移動在圖形界面上做相應移動。當近接物體繼續靠近進而接觸到觸控面板時，該指示點指示出與觸碰點的位置。當物體保持與觸控面板的接觸并移動時，該指示點隨觸碰點的移動而做相應移動。當物體離開觸控面板但仍然在近接感應范圍之內時，該指示點轉而指示投影點的位置。當物體繼續離開觸控面板并超出可近接感測的范圍時，該指示點消失。根據本發明的觸控裝置的觸控面板與與圖形界面控制模塊所繪制的圖形界面之間存在形狀、尺寸和坐標的對應關系，包括該觸控面板有效感測區域與該圖形界面的可觸控區域的形狀相似，而不必完全相同；其兩者尺寸不必相同；其兩者分辨率不必相同；當兩者形狀或尺寸或分辨率并非完全相同時，觸控面板輸出的坐標數據以固定的比率轉換之后可以完全覆蓋圖形界面的可觸控區域。通過本發明提供的觸控式人機交互系統，使用者操作時實現可一直停留在顯示裝置的顯示屏上，觀察圖形界面，將手指或觸控筆等物體置于觸控裝置的觸控面板上方一定距離之內時，在顯示屏上將可以直觀地看到與該物體在觸控面板上投影點所對應的指示點。使用者移動手指或觸控筆等可感測物體但不離開可感測范圍時，在遠端顯示屏上將可以直觀地看到該指示點相應地移動。使用者將手指或觸控筆等可感測物體繼續靠近并進而接觸到觸控面板時，該指示點即反映出使用者在圖形界面上觸碰到的位置。如圖I所示。使用者因此可以憑直覺對遠端顯示屏上的觸控式圖形界面進行操作，而不會感覺到任何障礙。本發明的優點在于，在完全保留前述第二類交互系統的直觀性和易用性的同吋，克服了其缺陷和限制，使用者可以在顯示屏距離較遠時仍然獲得直觀的、優秀的觸控式交互體驗。本發明可以應用于平板電視、機頂盒、視頻會議系統，以及其他需要觸控裝置與顯示裝置分離的觸控式人機交互的場合。
圖I為觸控裝置感測到手指接觸及靠近，顯示裝置的顯示屏上同步顯示出對應的指示點的示意圖。
圖2為本發明實施例中使用者未將手指靠近或接觸到觸控面板時的情景。圖3為本發明實施例中使用者將手指靠近觸控面板時的情景。圖4為本發明實施例中使用者將手指在觸控面板上方可感測范圍內移動以定位想要觸碰的界面圖標時的情景。圖5為本發明實施例中 使用者將手指繼續靠近直至接觸到觸控面板時的情景。圖6為本發明實施例中使用者將手指在觸控面板上滑動時的情景。圖7為本發明實施例中使用者將手指抬起離開觸控面板時的情景。圖8為本發明實施例中使用者將手指移出觸控面板可感測范圍之外時的情景。圖9為本發明實施例的系統結構圖。圖10為計算觸控面板坐標數據與圖形界面觸控區域坐標數據之間的轉換比例的示意圖。圖11為將指示點畫面與觸控式圖形界面做合并的示意圖。
具體實施例方式這里給出本發明的ー種具體實施例，用于詳細地說明和解釋本發明，但是并不能用于限制本發明。在本實施例中，采用ー種平板電視作為例子，其具有帶觸控面板的遙控器，在電視屏幕上顯示觸控式圖形用戶界面。使用者操作該遙控器時，視線可以一直停留于電視屏幕上，而不必轉換到該遙控器之上。這里以使用者將圖形界面上的一個圖標從屏幕右上角移動到屏幕左下角的操作為例，其操作步驟說明如下。步驟一，當使用者未將任何手指直接接觸遙控器的觸控面板，并且未將任何手指靠近遙控器的觸控面板并進入可近接感測范圍時，電視屏幕上不顯示任何指示點。如圖2所示。步驟ニ，當使用者手指靠近遙控器的觸控面板并被感測到時，在電視屏幕上出現指示該手指位置的指示點，本實施例中以空心圓圈作為投影點的指示點，如圖3所示。步驟三，使用者在觸控面板上方移動手指但尚未觸碰到該觸控面板吋，電視屏幕上的指示點會相應地移動。使用者因此可以一邊移動手指，一邊根據電視屏幕上的指示點來找到想要觸控的圖標的位置，如圖4所示。步驟四，當使用者移動手指使指示點到達預定的位置之后，將手指繼續向觸控面板靠近直至接觸到觸控面板，本實施例中該指示點變為實心的圓點來表示觸碰點，同時由該指示點定位的界面元素得到ー觸碰操作指令，例如，該位置處的ー圖標被選中。如圖5所
/Jn ο步驟五，當使用者保持手指與觸控面板接觸并在其之上移動時，該指示點也跟隨手指觸碰點做相應移動，同時觸控界面可以根據該移動執行相應的觸控操作，例如，已選中的圖標跟隨指示點的位置移動。如圖6所示。步驟六，當使用者將圖標移動到預定的位置后，將手指抬起離開觸控面板但仍然處于可近接感測的范圍之內時，其對應的指示點在電視屏幕上仍然可見，但變回空心的圓圈表示所指示的是投影點而不再是觸碰點，如圖7所示。步驟七，當使用者將手指繼續抬起并超出該觸控面板的近接感測范圍時，其對應的指示點在電視屏幕上消失。如圖8所示。應當理解，上述操作步驟僅為舉例說明ー典型的移動圖標的交互操作，并不為限制本發明實施例僅能執行上述操作。圖9為本實施例的系統結構圖。特別說明的是，圖中只畫出了與本發明相關的組件和模塊，對于平板電視普遍具有的電視信號接收處理模塊、視頻信號接收處理模塊等等并未畫出。圖中的觸控面板10為ー矩形電容式觸控面板(Touch Pad)，其可感測懸停于其上方一定范圍之內的多個手指或觸控筆，并輸出該手指或觸控筆在觸控面板上投影點的ニ維坐標。該觸控面板同時也能感測與之直接接觸的手指或觸控筆位置，并輸出ニ維坐標。目前比較成熟的電容式觸控面板主要分為自電容式和互電容式，或者兩種方式的結合。通過仔細調整電容感應觸點的排列方式以及信噪比(SNR)，即可以實現對近接物體和觸碰物體的感測，并輸出準確的坐標數據。目前已有觸控面板生產廠家推出此種產品。控制模塊11為遙控器I的主控芯片，采用主流的低功耗型MCU，其對觸控面板10進行初始化，使其處于工作狀態以感測物體的接近和觸碰，井隨時讀取觸控面板10輸出的觸碰點坐標數據Iio和投影點坐標數據120，然后將此兩種數據打包成適合傳輸的格式，再轉交給數據傳輸模塊12。遙控器I上的數據傳輸模塊12與平板電視2的數據傳輸模塊25建立數據連接，目前可用的無線傳輸方式有紅外、藍牙、WiFi、Zigbee等,本實施例采用Zigbee無線通訊技術，其功耗低，適用于近距離傳輸，大多數現有的Zigbee芯片的數據傳輸速率為250Kbps或更高，完全可以勝任本實施例中需要傳輸的ニ維坐標的數據量。以每個觸控點或投影點200Hz采樣率為例，每個坐標點X軸和Y軸坐標分別占用2Byte，則每個觸控點或投影點的數據量僅為200*4*8 = 6400bps,即使同時傳輸10個觸控點或投影點的數據，其總的數據量也僅為60Kbps。遙控器I與平板電視2在通過雙方的數據傳輸模塊初次建立連接吋，遙控器I的控制模塊11通過數據傳輸通道將觸控面板10的分辨率發送給平板電視2的數據處理模塊24，數據處理模塊24根據觸控面板10的分辨率與觸控式圖形界面控制模塊22的有效觸控區域的分辨率，計算出兩者之間X軸和Y軸坐標數據線性轉換的比例RatioX和RatioY，如圖10所示。數據處理模塊24具備浮點運算能力以提高坐標轉換的精度。特別說明的是，在本實施例中圖形界面有效觸控區域的分辨率等于顯示屏20的分辨率，即顯示屏20上顯示的所有區域均為可觸控操作的區域，而在其他特定的應用場合，兩者不必完全相等，有效觸控區域可能小于顯示屏的分辨率，也即顯示屏上顯示的圖形界面只有部分區域可進行觸控操作。有效觸控區域也可能大于顯示屏的分辨率，本發明對此并不做限制，但是由于超出的部分不會在顯示屏上顯示出來，實際應用中沒有大大的意義。平板電視2的數據傳輸模塊25將接收到的數據轉交給數據處理模塊24，該數據處理模塊24對數據進行拆包，得到每個觸碰點坐標數據110和投影點坐標數據120，并根據前述已計算出的坐標數據線性轉換比例RatioX和RatioY，計算出轉換后的觸碰點坐標數據210和投影點坐標數據220，并傳送到指示點控制模塊23，同吋，將轉換后的觸碰位置坐 標數據210傳送到觸控式圖形界面控制模塊22。指示點控制模塊23輸出一畫面，該畫面分辨率與圖形界面有效觸控區域的分辨率相等，也即與顯示屏20的分辨率相等，該畫面背景為透明，并根據由數據處理模塊24發送過來經轉換后的觸碰點坐標數據210和投影點坐標數據220在該畫面上繪制指示點，并以不同的顯示形式區分表示觸碰點的指示點和表示投影點的指示點。本實施例中，以空心圓圈表示投影點的指示點，以實心的圓點表示觸碰點的指示點。觸控式圖形界面控制模塊22輸出繪制有圖形界面的一畫面，并根據由數據處理模塊24發送過來的經轉換后的觸碰點坐標數據210，執行相應的觸控交互操作，并相應地更新繪制圖形界面。例如，當觸碰點在某按鈕上時，執行由該按鈕定義的動作；當檢測到一系列連續的觸碰點坐標變化，即手指在觸控面板上滑動時，執行該滑動手勢對應的操作，等等。該觸控式圖形界面控制模塊22既可自行開發，亦可采取免費或付費授權的方式直接采用現有的技術，例如主要由美國Google公司開發的Android平板電腦觸控界面。畫面合并顯示模塊21將指示點控制模塊23輸出的指示點畫面和觸控式圖形界面控制模塊22輸出的圖形界面進行合并，其合并的規則為指示點畫面在Z軸方向上位于圖形界面之上；指示點畫面以α混合的方式合并到圖形界面之上。從而確保所有的指示點與圖形界面合并之后仍然清晰可見，并且圖形界面上的內容也不會被指示點完全覆蓋，如圖11所示。該畫面合并顯示模塊21通常由專門的圖形處理芯片(GPU)完成，既不會大量占用主控芯片(CPU)的處理時間，又能保證流暢的顯示效果。在目前消費電子領域中，特別是在用于具備觸控式圖形界面的中高端設備中，所采用的主流的嵌入式單芯片大多已經集成GPU。顯示屏20接收來自畫面合并顯示模塊21輸出的畫面并顯示給使用者。如上所述，通過本發明實施例提供的技術方案，使用者通過遙控器I與平板電視2上的觸控式圖形交互界面進行互動時，可利用指示點直觀地感知到手指或觸控筆所處的位置，以及是否與觸控板接觸到。其用戶體驗相比于用手指或觸控筆直接在顯示屏上進行觸摸的方式，既兼具其直觀、便捷的優點，更因為不需要將手置于屏幕之上，而避免在操作時手會遮擋部分屏幕畫面的缺憾，可以說進一步提升了用戶體驗。在基于此技術方案的平板電視上，用戶可以流暢的操作圖形界面，瀏覽網頁、圖片，并操作豐富的應用程序，以及游戲。
以上所述僅為本發明在平板電視產品上的優選實施例，并不用于限制本發明。對于掌握相關技術的人員來說，本發明可以有各種更改和變化。凡在本發明的精神和原則之內，所做的任何修改、替換、改進等，均應包含在本發明的保護范圍之內。
權利要求
1.一種觸控式圖形界面人機交互系統，包括觸控裝置、圖形界面控制模塊、顯示裝置，其特征在于觸控裝置與顯示裝置分離，觸控裝置上的觸控面板可感測物體接觸到觸控面板時觸碰點的坐標和物體接近時在觸控面板上的投影點的坐標，觸控裝置與圖形界面控制模塊之間建立數據連接，將觸碰點和投影點的坐標傳送到圖形界面控制模塊，圖形界面控制模塊根據接收到的觸碰點和投影點的坐標，在圖形界面上畫出對應的指示點，所有畫出的指示點不會被其他界面元素所遮蓋，當觸碰點和投影點移動時，對應的指示點隨之在圖形界面上移動，若觸碰點和投影點消失，對應的指示點隨之在圖形界面上消失，圖形界面控制模塊將所畫出的圖形界面和指示點輸出到顯示裝置。
2.根據權利要求I所述的觸控式圖形界面人機交互系統，其特征在于觸控裝置、圖形界面控制模塊、顯示裝置分別為單獨的設備。
3.根據權利要求I所述的觸控式圖形界面人機交互系統，其特征在于觸控裝置為ー個單獨的設備，圖形界面控制模塊和顯示裝置集成于另ー個單獨的設備。
4.根據權利要求I所述的觸控式圖形界面人機交互系統，其特征在于觸控裝置與圖形界面控制模塊集成于ー個設備，顯示裝置為另ー個單獨的設備。
5.根據權利要求2或權利要求3所述的觸控式圖形界面人機交互系統，其特征在于觸控裝置與圖形界面控制模塊之間通過無線通訊模塊建立數據連接并傳輸數據。
6.根據權利要求2或權利要求3所述的觸控式圖形界面人機交互系統，其特征在于觸控裝置與圖形界面控制模塊之間通過有線通訊模塊建立數據連接并傳輸數據。
7.—種觸控裝置，包括觸控面板，數據傳輸模塊，其特征在于該觸控面板具備近接感測功能，既可以感測物體接觸到觸控面板時觸碰點的坐標，也可以感測物體接近觸控面板時在觸控面板上的投影點的坐標，并通過數據傳輸模塊發送觸碰點和投影點的坐標數據。
8.根據權利要求7所述的觸控裝置，其特征在于觸控面板可同時感測ー個或多個觸碰點和投影點的坐標，并通過數據傳輸模塊發送所有觸碰點和投影點的坐標數據。
9.根據權利要求7所述的觸控裝置，其特征在于數據傳輸模塊采用無線通訊方式。
10.根據權利要求7所述的觸控裝置，其特征在于數據傳輸模塊采用有線通訊方式。
11.一種圖形界面控制模塊，輸出圖形界面的畫面，從觸控裝置接收數據，執行相應的觸控操作并更新圖形界面的畫面，其特征在于根據從觸控裝置接收的觸碰點和投影點的坐標數據，定位到圖形界面上對應的位置，在該位置畫出指示點，所畫的指示點不會被圖形界面上的任何界面元素所遮蓋；當觸碰點和投影點的坐標數據變化時，擦除在原來位置所畫的指示點，在變化后的位置畫出指示點，使得指示點在圖形界面上的移動反映出觸碰點和投影點的移動；當觸碰點或投影點消失時，擦除與該觸碰點或投影點對應的指示點。
12.根據權利要求11所述的圖形界面控制模塊，其特征在于區分從觸控裝置接收的坐標數據是表示觸碰點還是投影點，對于觸碰點和投影點畫出不同形式的指示點。
13.根據權利要求11所述的圖形界面控制模塊，其特征在于具有可配置的選項，可以通過配置選項指定是否需要畫出觸碰點的指示點、是否需要畫出投影點的指示點。
14.根據權利要求11所述的圖形界面控制模塊，其特征在于，包括 數據傳輸模塊，用干與根據權利要求7所述的觸控裝置建立數據連接，從所述觸控裝置接收數據，并轉發給數據處理模塊； 所述數據處理模塊，從數據傳輸模塊所轉發的數據中解析出所述的觸碰點坐標數據和投影點坐標數據，并轉發給指示點控制模塊和觸控式圖形界面控制模塊； 所述指示點控制模塊，根據接收到的所述觸碰點坐標數據和投影點坐標數據，畫出所有的指示點，并輸出給畫面合并顯示模塊； 所述觸控式圖形界面控制模塊，繪制圖形界面的畫面，根據接收到的所述觸碰點位置數據和投影點位置數據 執行相應的觸控操作，同時更新圖形界面的畫面，并將圖形界面的畫面輸出到畫面合并顯示模塊； 所述畫面合并顯示模塊，將接收到的所述圖形界面的畫面和指示點畫面合并為ー個畫面，然后輸出到顯示裝置。
全文摘要
本發明提出一種觸控裝置與圖形界面顯示屏分離并具備近接感測投影點坐標指示的人機交互系統。該觸控裝置可感測物體接近其觸控面板時的投影點的坐標，也可感測物體接觸到觸控面板時觸碰點的坐標，并將此兩種坐標數據以有線或無線的方式傳送至一圖形界面控制模塊。該圖形界面控制模塊繪制圖形界面，并根據接收到的投影點坐標數據，在圖形界面上對應的位置畫出指示點，從而以直觀的方式指示出并持續跟蹤靠近觸控面板的物體的投影點位置。當物體接觸到觸控面板時，圖形界面控制模塊根據觸碰點的坐標以及移動執行相應的觸控式圖形界面交互操作，同時也可在圖形界面上畫出觸碰點的指示點。
文檔編號G06F3/048GK102622182SQ201210111348
公開日2012年8月1日 申請日期2012年4月16日 優先權日2012年4月16日
發明者李波 申請人:李波