基于mr技術的電力業擴工程輔助系統及其工作方法
【專利摘要】基于MR技術的電力業擴工程輔助系統及其工作方法，涉及電力營銷業擴領域。目前，業擴服務效率低。本發明包括MR服務器、連接到MR服務器的MR終端，MR終端包括攝像頭、交互語音模塊、透明顯示屏、MR終端控制處理模塊，MR服務器包括電力業擴工程信息數據庫存儲模塊、電力業擴工程信息錄入模塊、打印模塊、OCR識別模塊，MR數據及圖像處理模塊，MR終端控制處理模塊、電力業擴工程信息錄入模塊、打印模塊、OCR識別模塊均連接到MR數據及圖像處理模塊，攝像頭、透明顯示屏和交互語音模塊連接到MR終端控制處理模塊。本技術方案使業擴工程提質增效。
【專利說明】
基于MR技術的電力業擴工程輔助系統及其工作方法
技術領域
[0001]本發明涉及電力營銷業擴領域，尤其涉及一種基于MR技術的電力業擴工程輔助系統及其工作方法。
【背景技術】
[0002]隨著虛擬技術相關軟件以及硬件的不斷成熟，成本降低，用戶級的虛擬技術設備逐步問世。相關設備也越來越多地運用到日常娛樂和工作中。而電力行業的業擴服務長期以來模式調整不明顯，且面對互聯網世界技術的沖擊，應適當應用最新的互聯網技術提高現有電力業擴行業的效率。
【發明內容】
[0003]本發明要解決的技術問題和提出的技術任務是對現有技術方案進行完善與改進，提供基于MR技術的電力業擴工程輔助系統，以為客戶提供更好、更快捷的服務目的。為此，本發明采取以下技術方案。
[0004]基于MR技術的電力業擴工程輔助系統，包括MR服務器、連接到MR服務器的MR終端，所述的MR終端包括用于攝入圖像信息的攝像頭、用于錄入語音和進行語音播放的交互語音模塊、用于MR影像顯示的透明顯示屏、用于處理攝錄信息并進行顯示控制的MR終端控制處理模塊，所述的MR服務器包括電力業擴工程信息數據庫存儲模塊、電力業擴工程信息錄入模塊、打印模塊、OCR識別模塊，MR數據及圖像處理模塊，所述的MR終端控制處理模塊、電力業擴工程信息錄入模塊、打印模塊、OCR識別模塊均連接到MR數據及圖像處理模塊，所述的攝像頭、透明顯示屏和交互語音模塊連接到MR終端控制處理模塊。MR終端的交互語音模塊、攝像頭和電力業擴工程信息錄入模塊等模塊可以方便的錄入MR的原始素材信息，經過MR終端控制處理模塊、OCR識別模塊和MR數據及圖像處理模塊的處理存儲和反饋給MR終端，實現基于MR技術的實時交互體驗，在操作步驟、注意事項、故障排查、語音指示等，實現對電力營銷一線員工在裝表接電等各類業擴操作全過程中的實時可視化指導。
[0005]作為對上述技術方案的進一步完善和補充，本發明還包括以下附加技術特征。
[0006]所述的MR終端為MR智能可穿戴終端。MR智能可穿戴終端結構輕巧，便于攜帶。
[0007]所述的MR智能可穿戴終端包括MR眼鏡。MR眼鏡最容易應用、結構最輕巧，技術上與MR眼鏡基本一致，技術成熟。
[0008]所述的打印模塊為用于打印電力業擴工程設備物理標簽的微型打印裝置。通過把物理標簽打印出來貼到實際設備上可以降低OCR識別模塊對實際設備的技術識別能力，微型打印裝置結構小，成本低。
[0009]所述的MR數據及圖像處理模塊設有用于導入包括CAD文件和文件的數據模型接口。方便應用現有的BIM和CAD模型文件，不需要重復建模。
[0010]電力業擴工程信息數據庫存儲模塊設有電力業擴工程CRM數據導入接口。通過CRM數據導入接口可以直接導入現有CRM系統的各種用戶信息，不需要手工錄入大量的用戶信息，降低的工作強度。
[0011]所述的MR數據及圖像處理模塊設有設備的識別碼生成模塊。識別碼是設備識別的唯一根據，與傳統的多重信息識別相比，識別碼對應設備信息速度快、精確，不會出現不確定設備的現象，效率尚。
[0012]所述的OCR識別模塊設有人臉、文字圖像、條形碼和二維碼識別子模塊。針對人臉、文字圖像、條形碼和二維碼的識別應用普遍，技術成熟，便于直接集成到MR服務器。
[0013]基于MR技術的電力業擴工程輔助系統的工作方法，包括以下步驟:
1)通過MR終端的攝像頭和電力業擴工程信息錄入模塊，錄入各種工程信息和圖像；
2)0CR識別模塊把MR終端控制處理模塊傳輸過來的圖像進行特征處理，并通過MR數據及圖像處理模塊結合電力業擴工程信息錄入模塊錄入的數據信息和數據模型接口導入模型數據進行處理，然后結合電力業擴工程CRM數據導入接口導入的CRM用戶信息數據進行對應的編碼歸類并存儲到工程信息數據庫存儲模塊；
3 )MR數據及圖像處理模塊把數據庫存儲模塊處理過MR數據對象根據MR終端攝像頭所攝的現場影像資料進行OCR識別后反饋給MR終端控制處理模塊，并把MR影像和工程信息顯示在MR終端的透明顯示屏上，把語音信息通過交互語音模塊與使用人實現交互。
[0014]基于MR技術的電力業擴工程輔助系統工作方法，包括用戶識別方法及施工驗收方法;
用戶識別方法包括以下步驟:
SlOl用戶信息匯編:導入現有的營銷系統中的用戶信息，按照現有的信息將數據分類，并且與用戶的個人的照片信息綁定，然后將儲存數據裝載到MR終端；
S102用戶信息識別:服務人員借助MR終端，當畫面中出現用戶人臉時，通過攝像頭捕捉人臉，將信息傳遞給MR終端控制處理模塊，進行識別并提取相匹配的客戶信息；
S103客戶信息顯示:被調取的用戶信息傳遞給透明顯示屏，借助眼鏡前的透明顯示屏成像，使服務人員可以看到相應的客戶信息；
施工驗收方法括以下步驟:
S201工程信息匯編:借助錄入軟件，將工程相關信息錄入數據庫，并且按照設備單元組合為模塊，分數據單元儲存。
[0015]S202識別碼生成裝貼:對應各個數據單元，生成對應的電子識別碼;借助物聯網技術將該電子識別碼與相應的圖像、編碼或二維碼相關聯;借助圖像打印技術，生成相應的物理標簽，裝貼在設備上的固定位置；
S203工程信息識別:施工、安裝或驗收人員通過設于MR終端上的攝像頭讀取設備上的識別碼，MR終端控制處理模塊進行判斷識別，并調取對應的數據庫中的信息；
S204工程信息顯示:被調取的工程信息，將結合攝像頭拍攝的實際影像，將電子信息以直觀的圖形形式導出；通過眼鏡前的透明顯示屏成像，使施工、安裝或驗收人員可以直觀了解施工信息，最終達到業擴工程提質增效的效果。
[0016]有益效果:有效提高施工安裝環節中工作人員的施工效率，增加施工安裝的準確性;有效簡化驗收步驟，減少人員工作量，提高驗收效率。最終提高整體業擴流程的工作效率，減少業擴周期。
【附圖說明】
[0017]圖1是本發明結構原理示意圖。
[0018]圖2是本發明的用戶識別流程圖。
[0019]圖3是本發明的施工驗收流程圖。
[0020]圖中:1-攝像頭;2-交互語音模塊;3-透明顯示屏;4-MR終端控制處理模塊;5-MR數據及圖像處理模塊;6-工程信息數據庫存儲模塊;7-工程信息錄入模塊;8-打印模塊;9-0CR識別模塊;5-1-數據模型接口； 5-2-識別碼生成模塊;6-1-CRM數據導入接口。
【具體實施方式】
[0021]以下結合說明書附圖對本發明的技術方案做進一步的詳細說明。
[0022]如圖1所示，基于MR技術的電力業擴工程輔助系統，包括MR服務器、連接到MR服務器的MR終端，MR終端包括用于攝入圖像信息的攝像頭1、用于錄入語音和進行語音播放的交互語音模塊2、用于MR影像顯示的透明顯示屏3、用于處理攝錄信息并進行顯示控制的MR終端控制處理模塊4，MR服務器包括電力業擴工程信息數據庫存儲模塊6、電力業擴工程信息錄入模塊7、打印模塊8、0CR識別模塊9，MR數據及圖像處理模塊5，MR終端控制處理模塊4、電力業擴工程信息錄入模塊7、打印模塊8、OCR識別模塊9均連接到MR數據及圖像處理模塊5，攝像頭1、透明顯示屏3和交互語音模塊2連接到MR終端控制處理模塊4。
[0023]為了方便攜帶，MR終端為MR智能可穿戴終端。MR智能可穿戴終端結構輕巧，便于攜帶。
[0024]為了使用成熟技術和簡便應用，MR智能可穿戴終端包括MR眼鏡。MR眼鏡最容易應用、結構最輕巧，技術上與MR眼鏡基本一致，技術成熟。
[0025]為了提升OCR識別精度和降低成本，打印模塊8為用于打印電力業擴工程設備物理標簽的微型打印裝置。通過把物理標簽打印出來貼到實際設備上可以降低OCR識別模塊9對實際設備的技術識別能力，微型打印裝置結構小，成本低。
[0026]為了方便使用現有的模型數據，MR數據及圖像處理模塊5設有用于導入包括CAD文件和BIM文件的數據模型接口 5-1。方便應用現有的BIM和CAD模型文件，不需要重復建模。
[0027]為了降低用戶信息的錄入工作量，電力業擴工程信息數據庫存儲模塊6設有電力業擴工程CRM數據導入接口 6-1。通過CRM數據導入接口 6-1可以直接導入現有CRM系統的各種用戶信息，不需要手工錄入大量的用戶信息，降低的工作強度。
[0028]為了提升設備匹配識別效率，MR數據及圖像處理模塊5設有設備的識別碼生成模塊5-2。識別碼是設備識別的唯一根據，與傳統的多重信息識別相比，識別碼對應設備信息速度快、精確，不會出現不確定設備的現象，效率高。
[0029]為了降低OCR識別的技術要求，降低成本，OCR識別模塊9設有人臉、文字圖像、條形碼和二維碼等常用圖像的識別子模塊。針對人臉、文字圖像、條形碼和二維碼等常用圖像的識別應用普遍，技術成熟，便于直接集成到MR服務器。
[0030]基于MR技術的電力業擴工程輔助系統的工作原理過程如下:
I)通過MR終端的攝像頭I和電力業擴工程信息錄入模塊7，錄入各種工程信息和圖像。
[0031]2)0CR識別模塊9把MR終端控制處理模塊4傳輸過來的圖像進行特征處理，并通過MR數據及圖像處理模塊5結合電力業擴工程信息錄入模塊7錄入的數據信息和數據模型接口 5-1導入模型數據進行處理，然后結合電力業擴工程CRM數據導入接口 6-1導入的CRM用戶信息數據進行對應的編碼歸類并存儲到工程信息數據庫存儲模塊6。
[0032]3)MR數據及圖像處理模塊5把數據庫存儲模塊處理過MR數據對象根據MR終端攝像頭I所攝的現場影像資料進行OCR識別后反饋給MR終端控制處理模塊4，并把MR影像和工程信息顯示在MR終端的透明顯示屏3上，把語音信息通過交互語音模塊2與使用人實現交互。
[0033]顯示在MR終端的MR影像和工程信息包括實操作步驟、注意事項、故障排查、語音指示等多方面信息的提示。
[0034]具體工作方法，例一:
如圖2所示，基于MR技術的電力業擴工程輔助系統用戶識別方法，主要步驟包括:
(I)用戶信息匯編:在MR軟件數據庫中導入現有的營銷系統中的用戶信息，按照現有的信息將數據分類，并且與用戶的個人的照片信息綁定，然后將儲存信息的軟件裝載到智能可視化設備的終端中。
[0035](2)用戶信息識別:服務人員借助智能可穿戴設備(眼鏡)，當畫面中出現用戶人臉時，處理器結合攝像頭捕捉人臉，將信息傳遞給設備終端軟件，軟件識別并提取相匹配的客戶信息。
[0036](3)客戶信息顯示:被調取的用戶信息傳遞給設備終端，借助眼鏡前的透明顯示屏成像，使服務人員可以看到相應的客戶信息。更具信息快速反應，最終達到營銷服務提質增效的效果。
[0037]具體工作方法，例二:
如圖3所示，基于MR技術的電力業擴工程輔助系統施工驗收方法，主要步驟包括:
(I)工程信息匯編:借助錄入軟件，將工程相關信息(例如:電氣二次設備接線信息等)錄入數據庫，并且按照設備單元組合為模塊，分數據單元儲存。
[0038](2)識別碼生成裝貼:對應各個數據單元，生成對應的電子識別碼。借助物聯網技術將該電子識別碼與相應的圖像、編碼或二維碼相關聯。借助圖像打印技術，生成相應的物理標簽，裝貼在設備上的固定位置。
[0039](3)工程信息識別:施工、安裝或驗收人員利用裝載了對應的電力MR業擴工程輔助系統的智能可穿戴終端，通過攝像頭讀取設備上的識別碼，處理器進行判斷識別，調取對應的數據庫中的信息。
[0040](4)工程信息顯示:被調取的工程信息，將結合攝像頭拍攝的實際影像，將電子信息以直觀的圖形形式導出。通過眼鏡前的透明顯示屏成像，使施工、安裝或驗收人員可以直觀了解施工信息，最終達到業擴工程提質增效的效果。
[0041]本技術方案用一種全新的工作模式代替傳統的工作模式，利用基于MR技術的電力業擴工程輔助系統，以準確定位客戶、快速高效施工、建議精確驗收、增黏性為目標，充分利用混合現實、圖像識別、移動互聯等技術，實現業擴服務的提速增效，創新拓展了業擴服務的內涵和外延，為優質客戶提供更好、更快捷的服務。
[0042]其具體用途包括:
1.實現對電力營銷一線員工在裝表接電全過程中的實時可視化指導。在現場安裝或者新員工培訓時，利用MR終端(如MR眼鏡等)現實操作步驟、注意事項、故障排查、語音指示等多方面信息的提示。
[0043]2.實現MR操作環境與BM及CAD軟件接口的互聯互通。可以預留現有CAD文件、BIM文件等多種類型文件的接入口，通過轉換使得相關文件可以在該平臺上運行。
[0044]3.實現電力營銷服務人員通過MR終端(如MR眼鏡等)實時地識別并獲取客戶的姓名、年齡、信譽度、繳費偏好等信息。
[0045]4.實現輸變電、配網、新能源等業擴工程施工中的各種施工信息實時顯示，無需依賴于紙質圖紙。基于MR終端(如MR眼鏡等)，直觀地顯示各個施工部位的詳細節點和施工要點。
[0046]5.實現輸變電、配網、新能源等業擴工程安裝中的各種安裝信息實時顯示，無需依賴于紙質圖紙。基于MR終端(如MR眼鏡等)，直觀地顯示一次接線、二次接線、輸電線路走向等重要信息。
[0047]6.實現輸變電、配網、新能源等業擴工程驗收中的各類驗收信息實時顯示，無需依賴于紙質圖紙。基于MR終端(如MR眼鏡等)，直觀地顯示相應輸變電工程的驗收要點，進行逐個確認。
[0048]7.實現輸變電、配網、新能源等業擴工程檢修中的各類檢修信息實時顯示，無需依賴于紙質圖紙。基于MR終端(如MR眼鏡等)，直觀地顯示相應輸變電工程的檢修要點，進行逐個排查、修理。
[0049]在周途I中，通過MR軟件將裝表接電全過程中的操作步驟、注意事項、故障排查、語音借助等各種工況下的信息進行整合，導入MR終端(如MR眼鏡等)，一線員工或者新進員工通過MR終端直接在設備上根據看到的各類提示進行操作，大大提高了工作效率，減少了新員工培訓周期。
[0050]在用途2中，將WM、CAD軟件通過開放程序端口并且鑲嵌的方式打包到MR輔助系統中。
[0051]在用途3中，通過人臉識別系統和電力營銷的大數據庫相結合，利用MR終端(如MR眼鏡等)實時識別前來辦理業務的客戶，并通過后臺大數據庫對客戶信息的分析，為客戶打上姓名、年齡、信譽度、繳費偏好等重要信息，直接顯示在MR終端上，促進業擴服務提速增效。
[0052]在用途4中，將輸變電、配網、新能源等業擴工程的設計信息通過軟件匯編轉換成MR程序，導入MR終端，并生成相應的識別碼。通過將識別碼與真實工業設備結合，通過MR終端掃描，可實現實時可視化顯示節點詳圖和施工要點。
[0053]在用途5中，將輸變電、配網、新能源等業擴工程的設計信息通過軟件匯編轉換成MR程序，導入MR終端，并生成相應的識別碼。通過將識別碼與真實工業設備結合，通過MR終端掃描，可實現實時可視化顯示一次接線、二次接線、輸電線路走向等重要信息。
[0054]在用途6中，將輸變電、配網、新能源等業擴工程的設計信息通過軟件匯編轉換成MR程序，導入MR終端，并生成相應的識別碼。通過將識別碼與真實工業設備結合，通過MR終端掃描，可實現實時可視化顯示驗收要點，并逐個進行確認。
[0055]在用途7中，將輸變電、配網、新能源等業擴工程的設計信息通過軟件匯編轉換成MR程序，導入MR終端，并生成相應的識別碼。通過將識別碼與真實工業設備結合，通過MR終端掃描，可實現實時可視化顯示檢修要點，并逐個排查、修理。
[0056]以上所示的基于MR技術的電力業擴工程輔助系統及其工作方法是本發明的具體實施例，已經體現出本發明實質性特點和進步，可根據實際的使用需要，在本發明的啟示下，對其進行形狀、結構等方面的等同修改，均在本方案的保護范圍之列。
【主權項】
1.基于MR技術的電力業擴工程輔助系統，包括MR服務器、連接到MR服務器的MR終端，其特征在于:所述的MR終端包括用于攝入圖像信息的攝像頭(I )、用于錄入語音和進行語音播放的交互語音模塊(2)、用于MR影像顯示的透明顯示屏(3)、用于處理攝錄信息并進行顯示控制的MR終端控制處理模塊(4)，所述的MR服務器包括電力業擴工程信息數據庫存儲模塊(6 )、電力業擴工程信息錄入模塊(7 )、打印模塊(8 )、OCR識別模塊(9)，MR數據及圖像處理模塊(5 )，所述的MR終端控制處理模塊(4 )、電力業擴工程信息錄入模塊(7 )、打印模塊(8 )、OCR識別模塊(9)均連接到MR數據及圖像處理模塊(5)，所述的攝像頭(1)、透明顯示屏(3)和交互語音模塊(2)連接到MR終端控制處理模塊(4)。2.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的MR終端為MR智能可穿戴終端。3.根據權利要求2所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的MR智能可穿戴終端包括MR眼鏡。4.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的打印模塊(8)為用于打印電力業擴工程設備物理標簽的微型打印裝置。5.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的MR數據及圖像處理模塊(5)設有用于導入包括CAD文件和WM文件的數據模型接口(5-1)。6.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:電力業擴工程信息數據庫存儲模塊(6)設有電力業擴工程CRM數據導入接口(6-1)。7.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的MR數據及圖像處理模塊(5)設有設備的識別碼生成模塊(5-2)。8.根據權利要求1所述的基于MR技術的電力業擴工程輔助系統，其特征在于:所述的OCR識別模塊(9)設有人臉、文字圖像、條形碼和二維碼識別子模塊。9.基于MR技術的電力業擴工程輔助系統的工作方法，其特征在于包括以下步驟: 1)通過MR終端的攝像頭(I)和電力業擴工程信息錄入模塊(7)，錄入各種工程信息和圖像； 2)0CR識別模塊(9)把MR終端控制處理模塊(4)傳輸過來的圖像進行特征處理，并通過MR數據及圖像處理模塊(5)結合電力業擴工程信息錄入模塊(7)錄入的數據信息和數據模型接口(5-1)導入模型數據進行處理，然后結合電力業擴工程CRM數據導入接口(6-1)導入的CRM用戶信息數據進行對應的編碼歸類并存儲到工程信息數據庫存儲模塊(6); 3)MR數據及圖像處理模塊(5)把數據庫存儲模塊處理過MR數據對象根據MR終端攝像頭(I)所攝的現場影像資料進行OCR識別后反饋給MR終端控制處理模塊(4)，并把MR影像和工程信息顯示在MR終端的透明顯示屏(3)上，把語音信息通過交互語音模塊(2)與使用人實現交互。10.根據權利要求9所述的基于MR技術的電力業擴工程輔助系統工作方法，其特征在于:包括用戶識別方法及施工驗收方法； 用戶識別方法包括以下步驟: SlOl用戶信息匯編:導入現有的營銷系統中的用戶信息，按照現有的信息將數據分類，并且與用戶的個人的照片信息綁定，然后將儲存數據裝載到MR終端； S102用戶信息識別:服務人員借助MR終端，當畫面中出現用戶人臉時，通過攝像頭(I)捕捉人臉，將信息傳遞給MR終端控制處理模塊(4)，進行識別并提取相匹配的客戶信息；S103客戶信息顯示:被調取的用戶信息傳遞給透明顯示屏(3)，借助眼鏡前的透明顯示屏成像，使服務人員可以看到相應的客戶信息； 施工驗收方法括以下步驟: S201工程信息匯編:借助錄入軟件，將工程相關信息錄入數據庫，并且按照設備單元組合為模塊，分數據單元儲存； S202識別碼生成裝貼:對應各個數據單元，生成對應的電子識別碼;借助物聯網技術將該電子識別碼與相應的圖像、編碼或二維碼相關聯;借助圖像打印技術，生成相應的物理標簽，裝貼在設備上的固定位置； S203工程信息識別:施工、安裝或驗收人員通過設于MR終端上的攝像頭讀取設備上的識別碼，MR終端控制處理模塊進行判斷識別，并調取對應的數據庫中的信息； S204工程信息顯示:被調取的工程信息，將結合攝像頭拍攝的實際影像，將電子信息以直觀的圖形形式導出；通過眼鏡前的透明顯示屏成像，使施工、安裝或驗收人員可以直觀了解施工信息，最終達到業擴工程提質增效的效果。
【文檔編號】G06Q50/06GK106066700SQ201610491913
【公開日】2016年11月2日
【申請日】2016年6月29日 公開號201610491913.7, CN 106066700 A, CN 106066700A, CN 201610491913, CN-A-106066700, CN106066700 A, CN106066700A, CN201610491913, CN201610491913.7
【發明人】舒愷, 王敬波, 嚴浩軍, 張燦江, 郭高鵬, 張潔, 陳玄俊, 牛文棟, 周勛甜, 張帥, 梁玉潔, 李弘毅, 羅彥虎, 韓瀟, 余丹萍, 張甦濤, 王州波, 張穎, 張申娜, 張碧波, 孫科
【申請人】寧波市電力設計院有限公司, 國家電網公司, 國網浙江省電力公司寧波供電公司, 國網浙江省電力公司