專利名稱:多傳感器定位和識別的制作方法
技術領域:
本發明通常涉及用于定位和識別無線設備例如在模擬或數字蜂窩系統、個人通信系統(PCS)、增強型專用移動無線電設備(ESMR)和其它類型的無線語音和數據通信系統中使用的無線設備的方法和裝置。更具體地但非排他地,本發明涉及用于將來自多個傳感器類型的信息進行組合以識別和定位無線設備用戶的方法。背景 因為閉路攝像機的發明,安全區域和公共區域的實時監視已經用于提高警衛人員的效率。卡式錄像機(VCR)的出現實現了視頻新聞報道的存檔。在20世紀70年代中期,視頻技術變得對于公共安全功能例如法律實施、人群監視和高速公路交通控制是成本有效的。數碼攝像機的引入允許對視頻圖像的軟件分析,并且在20世紀90年代期間,面部識別技術已經變得足夠準確以被更廣泛地使用。在2001年11月11日的襲擊以后,對通過自動化視頻系統識別在安全位置上的人的需要已經被視為公共需要。在2002年5月,美國公園管理局在自由女神像和埃利斯島處的計算機化的視頻視照相機上安裝了面部識別軟件。除了面部識別以外,視頻系統還可以使用其它識別技術,其實例也包括步態識別、服裝識別以及使用模式識別的ニ維(2-D)或三維(3-D)圖像映射。使用靜物照相機、攝像機或其它成像系統的這些圖像識別技術可一般地稱作“視頻度量(videometric)”系統。視頻度量系統可以將ー個圖像或一系列圖像減小為數字簽名標簽。視頻度量系統可以對未識別的對象加標簽或編索引以檢測重復的訪問者。然而,對個人的識別和跟蹤通常限于在視頻網絡數據庫中存儲的已經識別出的那些人。此外,視頻度量系統受到由安裝的成像系統提供的視場的限制。視頻度量簽名是對允許識別對象的特征的識別。與指紋很像,視頻度量簽名對于個人是唯一的,但是在一段較長的持續時間期間更容易改變。響應于美國通信委員會(FCC)的增強9-1-1階段II命令,用于以高準確度定位無線設備(例如,蜂窩電話)的技術開始被廣泛地使用。無線定位技術包括基于網絡的技術和基于手機的技木。基于網絡的高準確度的技術使用利用到達時間(TOA)、到達時間差(TDOA)和/或到達角(AoA)技術的手機的上行鏈路(移動臺到基站)無線電信令來定位移動設備。高準確度的定位技術可以包括使用定時信標系統,例如全球導航衛星系統(GNSS),最好的實例是NAVSTAR全球定位系統(GPS)。來自無線通信網絡的GNSS信號和信令的使用考慮輔助GNSS (A-GNSS),該A-GNSS降低了通過傳統的GPS生成定位所需的時間并且可以增加接收機靈敏度。中等準確度的定位技術有時作為回退方法或者與高準確度的定位技術結合來用于發射機的定位。這些技術包括基于網絡的小區ID定位技術,并且可以包括使用校準的RF指紋識別(模式匹配技木)的定時或功率測距信號強度測量(SSM)的增添。基于手機的中等準確度的技術包括下行鏈路無線電信號技術,例如增強型觀測時間差(E-OTD)、高級前向鏈路三邊測量(AFLT)和觀測到達時間差(OTDOA)。還可以使用定位技術的混合。已經成功地實施了 υ-TDOA、AoA, AFLT, A-GPS, Τ0Α、SSM和OTDOA的各種組合,并且已經提出了高或高/中等準確度的手機和網絡定位技術的其它組合。使用基于網絡的無線定位技術的無源定位依賴于對無線電空中接ロ或WCN鏈路的監控以及等待移動設備在控制信道或業務信道上執行網絡事務。這些網絡事務包括定期 的重新注冊以及諸如與呼叫或數據連接有關的事件(發起、終止、切換)的特殊事件和諸如位置更新的漫游事件。使用基于網絡的無線定位技術的有源定位依賴于無線定位系統的合作或指派(co-opting)。合作約定包括經由系統報文發送(messaging)來輪詢或審核,報文發送的實例包括身份認證請求、Any_Time_Interrogation (ATI)(作為移動終止定位請求過程的一部分)、空SMS pinging或者簡單地呼叫考慮中的移動臺或向考慮中的移動臺發送報文。WCN的指派包括僅空閑移動設備被立即重新注冊的僅控制信道MSI收集器基站、通話(會話)中的兩個移動設備被捕獲、詢問和識別的蜜罐技術(honey-pot)基站的使用,或者在具有局部尋呼區域(定位區域)的特定區域中放置較小的WCN小區以迫使移動臺進行重新注
ΠΠ
ノ Itr ο對于與本文所描述的主題有關的其它背景信息,讀者可以參照轉讓給TruePosition公司的下列專利申請于2005年6月10日提交的第11/150,414號美國專利申請‘—Advanced Triggers for Location-Based Service Applications in a WirelessLocation System”;于 2005 年 8 月 8 日提交的第 11/198996 號專利申請“Geo-fencing ina Wireless Location System”;以及于2009年4月22日提交的第12/428325號專利申請“Network Autonomous Wireless Location System”。這些專利申請中的姆一個通過引用被完整地并入本文。概述在很多工作場景中,無線設備的被確定的位置可能不是可用的。例如,設備可能暫時被屏蔽而不能從無線網絡接收或者向無線網絡發送。此外,當成像或視頻度量系統具有關于對象的充分通暢的視場時,它們可能只提供識別和跟蹤功能。本文描述了用于提供回退技術的各種方法和系統。在一些實施方式中,可以對這樣的系統進行組合以提供無縫的或不間斷的定位、跟蹤和監視服務。通過結合計算機化的視頻監視與無線定位功能,對象的視頻度量簽名可以更容易地與公共已知的個人身份相聯系,從而實現在視頻監視網絡的覆蓋區域外部或之間的連續監視。這種無縫監視可以是實時的或者被存檔以用于將來的取證分析。視頻度量簽名與公共身份的聯系還可以允許視頻度量數據庫的自動化供應。除了擴展監視覆蓋區域以外,計算機化的視頻監視與無線位置確定的結合還可以允許經由現有的移動設備和在無線網絡中使用的用戶標識符來識別移動設備用戶。在一個實施方式中,公開了跟蹤與移動設備相關聯的對象的方法。該方法可以包括從圖像捕獲設備接收圖像數據,接收移動設備的識別信息和位置信息,分析所接收的圖像數據,以及基于所分析的圖像數據和與所述移動設備相關聯的位置信息來確定所接收的圖像數據與所述移動設備相關聯,以及以其它方式使所接收的圖像數據與通過所述位置和所述識別信息識別的移動設備關聯。應當注意的是,提供該概要以引入以簡化的形式的概念的選擇,將在下文中進ー步描述這些概念的選擇。該概要既不g在標識所要求權利的主題的關鍵特征或必要特征,也不g在用作確定所要求權利的主題的范圍的幫助。
除了前述內容以外,在形成本發明的一部分的權利要求、附圖
和正文中還描述了其它方面。本領域技術人員可以認識到,本發明的一個或多個各種方面可以包括但不限于用于實現本公開的這里提及的方面的電路和/或程序設計。附圖的簡要說明當結合附圖閱讀時,將更好地理解前述概要以及下面的詳細描述。為了說明本發明的目的,在附圖中示出了本發明的示例性結構;然而,本發明不限于附圖中所公開的特定方法和工具圖I示意性地描繪了具有無線定位能力的主要功能組件無線通信網絡以及在地理上協同定位的計算機化的視頻/攝影監視網絡。圖2示出了在城市區域中在視頻監視下對象的定位促進識別的機會。圖3A和圖3B示出了在視頻監視下對象的定位促進識別。圖4示出了在視頻監視下對象的定位促進識別。圖5示出了通過阻塞點進入視頻監視覆蓋范圍的對象的定位促進監視。圖6示出了視頻監視覆蓋區域中的對象的定位促進識別,定位促進識別使用視差(立體觀測)來估計對象的范圍和運動。圖7示出了包括本發明的方面的操作過程的實施例。圖8示出了用于跟蹤與移動設備相關聯的對象的操作過程的實施例。圖9示出了用于跟蹤與移動設備相關聯的對象的操作過程的另ー實施例。
具體實施例方式在下面的描述和附圖中闡述某些特定的細節以提供對本發明的各種實施方式的徹底理解。為了避免不必要地使本發明的各種實施方式難理解,在下面的公開中未闡述通常與計算和軟件技術相關聯的某些公知的細節。此外,相關領域的普通技術人員將理解,他們可以在沒有下面描述的細節中的一個或多個的情況下實踐本發明的其它實施方式。最后,雖然參照下面的公開的步驟和順序對各種方法進行了描述,但是該描述因此用于提供本發明的實施方式的明確實現,并且這些步驟和步驟的順序不應被認為對實踐本發明是必需的。所描述的是本發明的示例性的實施方式。首先,提供了問題的詳細概述,后面是所公開的主題的更詳細的描述。生物測定法是指用于基于ー個或多個固有的物理特性來唯一識別對象的方法。生物測定法可以用作安全訪問管理和訪問控制的方法,并且還可以用于識別在監視下的對象。生物測定特性的實例可以包括物體的形狀、指紋、面部識別、DNA、手和手掌的幾何形狀以及虹膜識別。
在生物測定系統中,對象第一次使用生物測定系統可以稱作注冊。在注冊期間,可以存儲來自對象的生物測定信息。在后續識別期間,可以檢測生物測定信息并將其與在注冊時存儲的信息進行比較。這樣的生物測定系統可以包括用于從對象接收信息并且向系統提供輸入的傳感器。該系統還可以執行預處理以增強或者以其它方式準備輸入(例如,移除背景噪聲)。然后,系統可以接著提取識別所需的特征。可以用任何形式來表示這些特征,例如,向量或者具有特定特性的圖像。唯一識別對象的特征集可以稱作簽名。在注冊期間,可以在存儲器中存儲這些特征。在匹配或識別階段期間,可以將獲得的特征傳送給匹配功能,所述匹配功能將這些特征與其它現有的特征集進行比較。特征集可以稱作模板。在一些實施方式中,可以使用適當的算法來估計模板之間的距離。面部識別系統可以從來自視頻源的數字圖像或視頻幀自動地識別對象。在ー些實施方式中,可以將來自圖像和面部數據庫中的選定的面部特征進行比較。ー些面部識別算法可以通過從對象的面部的圖像中提取特征來識別面部。例如,面部識別算法可以分析眼睛、鼻子、顴骨和下巴的相對位置、大小和/或形狀。然后,提取的特征可以用于捜索具有匹配特征的其它圖像。在其它實施方式中,面部識別算法可以將面部圖像的集合標準化,并且將數據進行壓縮,從而節省圖像中的對于面部檢測有用的數據。識別算法的一些實例包括線性判別分析、隱馬爾可夫模型和神經元激勵的動態鏈接匹配。3-D用于捕獲和識別圖像的系統可以包括ー個或多個捕獲設備,例如數字或模擬照相機,其具有用于捕獲圖像的適當的光學器件、用于數字化圖像的照相機接ロ、輸入/輸出硬件或通信鏈路和用于處理圖像并且檢測圖像的特征的程序。因此,照片或視頻識別可以用于經由物理參數的存入數據庫的“快照”(通常稱作光度測定或視頻度量數據庫條目)來識別個人或對象。然而,正是該視頻度量數據庫的群體可以限制這樣的識別功能的使用。例如,在檢查諸如鐵路場地的安全設施的視頻監視系統中,可能需要填充有每個員エ的視頻度量數據庫,且可能被授權的訪問者可能需要可靠地檢測侵入者。侵入者的所記錄的視頻度量細節可以潛在地用于檢測同一個人第二次的闖入,但是侵入者的識別可能不能只從視頻度量數據確定而不管視頻度量標簽的創建。在一些情況下,公共身份可能不是從無線設備可得到的(例如,在預付費移動設備的情況下),在這樣的情況下,視頻度量簽名可以具有與其相關聯的公共ID,然后,它又可以應用于先前未識別出的無線設備ID。在其它情況下,移動設備的公共ID可以不匹配基于已知的視頻度量的公共ID (在被盜的移動設備的情況下)。基于網絡的無線定位系統(WLS)可以用于從無線電發射(例如,上行鏈路無線電信道廣播)來定位無線設備,所述無線電發射是由無線設備在無線通信網絡(WCN)與無線設備之間的控制、語音或數據會話期間發送的。基于網絡的WLS的準確度可能受到通信信號的短持續時間、低功率和有限帶寬的限制,因此從ー組無線設備定位在視頻監視系統的視場中的特定無線設備可能是困難的。本文公開了用于將無線設備與視頻度量簽名進行匹配的方法。一旦使本地化的無線設備和視頻度量簽名相關,就可以對無線身份并且因此與無線設備相關聯的對象的公共身份進行恢復。 本文所描述的技術和概念可以應用于時分復用和頻分復用(TDMA/FDMA)無線通信系統,其包括廣泛使用的基于GSM和OFDM (例如,IEEE-802. 16 “WiMAN”、IEEE-802. 20“WIMAX”和 3GPP 長期演進(LTE))的無線系統以及諸如 CDMA(IS-95、IS-2000)和通用移動電信系統(UMTS)的碼分無線通信系統,后者也稱作W-CDMA。此外,諸如有源或無源射頻ID(RFID)標簽、藍牙無線技術和超寬帶(UWB)數據通信的短程通信系統也可以用于鄰近定位和識別的目的。全球移動通信系統(GSM)無線接入網和核心網用作示例性的無線通信系統,而不是本發明可以被實現的專門的環境。識別視頻和無線定位的不同傳感器網絡的組合可以提供經由對象和無線設備的協同定位來填充視頻度量簽名的聯合數據庫的非侵入性方法。例如在簽約的半永久用戶賬戶的情況下,無線設備身份通常附接于個人的公共身份。因此,無線設備身份及其無線位置與圖像化的或參數化的對象的估計的或已知的位置的相關可以允許在無需預先存在的視頻度量數據庫條目的情況下識別對象。對于廣域無線通信系統,無線設備包括設備和用戶(例如,電話號碼、電子序列號(ESN)、MIN(移動識別號)、國際移動設備標識符(IMEI)、國際移動臺標識符(IMSI)、移動臺標識符(MSI)、臨時移動臺標識符(MSI)、移動設備標識符(MEID)、移動臺綜合服務數字網絡號(MS-ISDN))的識別。根據所使用的無線通信技術(也稱作無線電接入網技術)而改變的這些標識符必須允許移動電話起作用。這些標準化的標識符在移動臺和無線通信網絡(WCN)之間的無線信令接口上是可用的,在來自WCN的無線信令接口上是可用的,或者在不同的WCN之間的信令中使用。無線標識符的改變或者在相關的無線標識符之間的改變可以用于觸發無線定位和識別系統。相關的標識符的實例包括識別移動設備的MEI和識別用戶模塊(SIM)的頂SI。新的SM的插入、SM的更換或者無線設備的更換均改變MEI和頂SI之間的關聯,并且因此可以由WLIS檢測到并且被用作定位觸發事件。當對象攜帶或者以其它方式極接近配備的設備時,諸如WiFi (IEEE802. 11)、RFID、藍牙和超寬帶的短程通信系統可以用于(經由鄰近)識別和定位。這種持久的且可讀的標識符可以允許位置確定,并且提供了持久的標識符來替代視頻度量和/或無線標識符,或者除了視頻度量和/或無線標識符以外,還提供了持久的標識符。RFID標簽通常被設計為由附近的讀者讀取。每個RFID標簽具有唯一的標識符,并且可以包含其它信息(例如,護照信息或產品信息)。該對象可以攜帶與無線通信設備相關聯的RFID標簽。可選地,對象可以攜帶或佩帶包括RFID標簽的物品。藍牙設備可以使用查詢過程來發現附近的設備或者由其位置處的其它設備發現。對于每個藍牙設備,藍牙標識符是持久的且唯一的。WiFi網絡接ロ設備通常提供其媒體存取控制(MAC)地址,其也更正式地稱作EUI (擴展的唯一標識符)。對于每個無線網絡接ロ控制器(NIC或WNIC),MAC/EUI是持久的且唯一的。超寬帶(UMB)設備可以響應于詢問信號來廣播其持久的標識符。提供詢問信號的UWB讀者可以接收標識符并且建立鄰近位置。在一些情況下,RFID標簽可以使用超寬帶無線電設備。各種所描述的系統和協議在頻譜和技術上可以具有不同的重疊程度。在非簽約的無線移動電話和設備的情況下,由移動設備發送的用于向網絡注冊并且撥打/接收電話的電子標識符然而可以與視頻度量簽名有關,允許對象的持久監視。擴展的監視一旦已經在視頻監視網絡中定位和識別出對象,就可以使用移動設備定位技術在視頻監視網絡的覆蓋區域外部或者之間實現連續的監視。這些技術包括基于網絡的定位系統、基于移動的定位技術和標準化控制功能例如移動終止定位請求(MTLR)或者在WCN基礎設施中的無線智能網絡(WIN)觸發器的設置。可以實時地執行該無縫監視,或者可以對該無縫的監視進行存檔用于將來的取證分析。除了擴展監視覆蓋區域以外,計算機化的視頻監視與無線位置確定的組合還可以允許經由現有的移動設備和在無線網絡中使用的用戶標識符來識別移動電話用戶。進入和退出地理柵欄(Geofencing) 可以在協調的視頻監視和無線定位網絡中擴展在題為“Geo-Fencing In AWireless Location System”的第11/198,996號美國專利申請中詳細描述的自動地理柵欄概念。在示例性的地理柵欄方法中,可以限定地理柵欄區域。可以監控無線通信系統的一組預定的信令鏈路。該方法還可以包括檢測移動設備已經執行了以下關于地理柵欄區域的動作中的任ー個(I)進入第一柵欄區域,(2)退出地理柵欄區域,以及(3)在接近地理柵欄區域的預定的鄰近范圍內移動。然后,可以觸發高準確度的定位功能,以便確定移動設備的地理位置。一旦對象由視頻度量/攝影系統加了標簽并且被識別出,移動標識符和視頻度量簽名就可被替換,允許不僅在無線邊界(例如,小區、扇區或尋呼區域邊界)上而且在視場邊界上建立自動的絆網地理柵欄邊界。對象的進入和退出可以由組合的視頻度量和WLS控制系統來確定。廣域定位和柱狀圖在于2005 年 6 月 10 日提交的、題為 “Advanced Triggers for Location-BasedService Applications in a Wireless Location System,,的第 11/150,414號美國專利申請中首次描述了也稱作區域中的移動識別的集合的廣域定位。公開了ー種示例性的方法,該方法包括監控無線通信系統的ー組信令鏈路,以及檢測在預定的信令鏈路中的至少ー個上發生的至少ー個預定的信令事務。響應于檢測到至少ー個預定的網絡事務,觸發至少一個預定的定位服務。視頻監視網絡和無線定位的組合通過允許創建諸如柱狀圖的統計數據集合而改善了廣域概念。統計數據集合可以基于對象的位置、運動、呼叫模式和與其它對象的協同定位。移動電話和設備可以根據在特定的時間或時間段內在扇區、一個小區或一組小區的無線覆蓋范圍下的預先界定的地理區域中的存在來識別和定位。可以通過將被定義為ー組小區標識符的區域裝入到無源覆蓋或集成鏈路監控系統(LMS)中來完成該歷史位置特征。然后,LMS可以發展在所關注的地理區域中發起網絡事務的一列移動標識符(例如,在GSM中的頂SI、MSISDN和相關的TMSI)。廣域定位還可以被配置為生成在預設的所關注的地理區域中發起將來的網絡事務的連續的一列移動標識符。通過添加光度測定或視頻度量快照數據的數據庫,可以通過允許在相關移動設備沒有正在發送時識別在所關注的地理區域中的對象來改善廣域定位技木。可選地,快照和無線定位能力的組合可以允許在視頻監視網絡的覆蓋區域外部的廣域定位。照相機和成像備選方案雖然很多現有的視頻監視網絡被設計來提供在可見頻譜中的圖像,但是使用紫外光或紅外光、毫米或太赫茲雷達成像或者其它無源(使用現有的照明)或有源(使用定向的照明或發射機)技術的視頻和靜 物照相機監視可以用于提供用于唯一地識別在監視下的對象的光度測定或視頻度量快照數據。在本公開中,術語“圖像捕獲系統”和“照相機”可以指使用有源或無源技術的所有類型的成像系統,例如視頻照相機、靜物照相機和無線電層析成像(RTI)系統。使用其它數據庫的身份關聯在一些實施方式中,可以使用可選的數據庫來増加視頻到移動設備的關聯的存儲數據庫的使用。例如,現有的視頻監視網絡可以使用諸如臉部照片、護照照片、駕駛執照或身份證的照片來建立視頻度量數據庫。類似地,所公開的無線定位/識別系統和視頻度量數據庫的組合可以裝有補充的視頻度量簽名和所關注的移動標識符。此外,當對數據庫記錄進行實時或時間延遲的取證分析時,通過多種方式獲得的視頻度量特征可以添加到識別過程。實例可以包括配備有照相機的自動取款機(ATM),在ATM中,視頻度量簽名和銀行賬戶信息可以相關聯。另ー個實例是來自配備有照相機的銷售點(POS)的數據,在POS中,可以使用信用卡信息和其它公共身份數據(例如,政府身份證)。如果對象攜帯著活動的或空閑的無線設備,則必須存在來自對象的識別的任何場景(例如,比賽票務處)提供了收集公共身份、視頻度量簽名和無線ID的機會。本領域技術人員將認識到,可以對可以攜帶移動設備或者以其它方式與移動設備相關聯的任何類型的對象執行所公開的主題。例如,在一個實施方式中,對象可以是交通エ具。在該實施方式中,不僅交通工具的視頻度量簽名可以用于識別交通工具的樣式、型號和顔色,而且自動車牌識別可以用于識別交通工具的登記處或當前的租用人。使用上述方法中的一個獲得的交通工具的乘員的移動身份可以與交通工具ID關聯。因為交通工具通常是由單個人例如擁有者來操作的,因此視頻度量過濾器的準確度可能很高。在一個實施方式中,交通工具ID與移動ID的關聯可以用于識別被盜交通工具。一些基于視頻的自動車牌號碼識別系統具有拍攝交通工具的乘員的照片或視頻的能力。然后,可以獲得視頻度量簽名,并且數據用于使交通工具與乘員關聯。—些交通工具可以配備或安裝有嵌入式無線通信和無線定位系統。此類安裝的系統也可以用于識別和定位交通工具。多間隔多照相機過濾在一些實施方式中,可以使用多個照相機。在視頻度量簽名用于識別對象的多照相機場景中,多個照相機可以在ー個實例或者在來自ー個或多個照相機的多個圖像捕獲中使用以識別對象。在一個實施方式中,可以定位和識別對象附近的所有移動設備。例如,視頻度量數據可以在不同的時間在多個照相機處識別同一個人。可以接收在照相機附近的所有移動設備的位置數據。與視頻度量簽名的多個實例強烈相關的無線設備ID可被認為是匹配。
因此,在一個實施方式中,如果所關注的對象與多個電話相關并且多個視頻度量輪廓在多個位置或者多次被收集到,則可以假設移動電話、視頻度量輪廓與所關注的對象之間的關聯。速率過濾用于使視頻度量ID與無線身份相關的另ー種過濾技術是使用速率(航向和速度)。可以通過使用無線定位技術來確定對象的速率,無線定位技術在確定位置時使用到達頻率差,檢測上行鏈路無線電信號中的多普勒頻移,或者跟蹤對象的一系列位置。當對象在照相機的視場中移動時,攝影或視頻系統可以確定加了標簽的對象的方向。可以通過所捕獲的圖像的投影尺寸的改變來檢測和測量對照相機的接近或遠離照相機的運動。在其它實施方式中,具有重疊的視場的多個照相機可以用于使用例如用于速率確定的經典視差解決方案來確定速率。可以通過關聯算法來完成視頻度量確定的速率與無線定位系統確定的速率的匹配。也可以使用該方法來完成可能的匹配的消除。阻塞點 在一些實施方式中,使用交通工具或行人阻塞點的近距離無線定位技術可以用于使視頻度量身份與移動身份相關聯。交通工具的阻塞點的實例可以包括交通信號、高速公路駛進匝道、駛出匝道、橋梁或收費亭。行人阻塞點的實例可以包括機場入口、體育場入口、建筑物入ロ、自動扶梯、樓梯和電梯。在一個實施方式中,無線設備可以用于在某些場景下例如在一天中有大量人通過較小的區域的公共阻塞點處識別攜帶設備的對象。實例可以是地鐵入口、體育場入口、到公共建筑物或機場的任何安全入口、人行道、商場入口和收費亭。一種或多種無線激勵和檢測技術可以用于確定無線設備是否正在通過阻塞點。通過與移動設備通信,可以確定設備的身份。設備的身份可以是移動電話的IMSI/MEI、WiFi設備的MAC/ΕΠ地址、可以被攜帯的或者在對象附近的任何RFID設備的RFID信息。例如,RFID標簽可以嵌入到所攜帶的產品中或者嵌入到個人攜帯的身份證上。該位置可以根據位于例如安全入口處或者人行道上的特定點處的傳感器和發射機的時間和位置來確定。傳感器和發射機可以例如被包含在金屬檢測器或RFID檢測器的傳感器中,或者被嵌入到不明顯的自然環境中(例如,在人行道中、沿著街道的桿或者在建筑物旁邊)。位置確定可以將個人與人群隔離,并且確定什么無線設備在這個人身上以及這樣的設備的ID。良好放置的照相機可以捕獲個人的圖像,并且然后該圖像可以與設備相關聯。所接收和分析的信息——包括照片、設備信息和ID、日期、時間、位置——可以存儲在數據庫中用于進一歩處理。捕獲的圖像可以由面部識別產品處理以進ー步確定對象的身份。在很多情況下,設備ID和相關的(具有時間戳的)圖像的可用性可以為安全和情報機構提供有價值的信息。然后,設備ID信息可以返回為所存儲的信息提供參考并且對象的圖像可以用于 使用設備的人的ID·同一設備的多次檢測的關聯,例如,確定設備是在不同的人之間傳遞還是始終在同一個人身上 來自其它源的多次檢測和照片可以用于增加正確的面部到ID匹配的概率
面部識別程序、身體和衣服標識符和步態識別技術可以用于使對象與視頻度量簽名匹配。然后,設備ID可以與視頻度量簽名相關聯。在頻繁地改變無線設備的對象的情況下,假如對象通過監控的阻塞點,與相關的無線標識符有關的信息將被不斷地更新,并且在使用中的最新的設備標識符可以被確定。此外,可以維持對象所使用的設備的歷史時間軸。
一旦視頻度量簽名與無線設備相關聯,公共安全機構就可以審查所收集的歷史信息來確定設備已經被定位在哪里,并且因此推斷出相關的對象存在于所記錄的位置處。在一個實施方式中,可以使用計算機化的視頻網絡來部署RF傳感器和發射機的鄰近的網絡,以覆蓋快速道路。快速道路可以被定位,使得增強的視頻度量簽名可以例如在交通信號或人行橫道中被獲取。一系列高度定向的天線可以用于在空間中創建ニ維陣列作為快速道路的橫截面(例如,行人的人行道或交通工具高速公路)。該陣列可以允許在快速道路上或者人行道上的特定點(例如,離角落或街道的期望距離)處的相對定位(左、中、右)。這種系統可以用于針對多個對象(例如,行人或交通工具)并排地或并肩地通過所關注的附近地區的情況提供用于使視頻度量簽名與相關無線標識符關聯的改進的解決方案。 通過阻塞點監控系統的預定選擇和構造,可以實現在阻塞點處的多個對象的定位和識別。公知的有源無線識別系統例如IMSI收集器、蜜罐技術BTS或者特殊地定位尋呼/定位區域邊界可以與阻塞點部署一起使用。圖I圖I示出了位于無線通信網絡(WCN)內的具有無線定位能力的示例性的視頻度量系統。通過無線基站103和核心網服務器111 (使用GSM術語,是基站控制器(BSC)和移動交換中心(MSC))來描繪該圖示中的WCN。在該圖中被描繪為移動電話的無線設備101可以被對象攜帯。該對象可以是人、動物或交通工具。無線設備101可以在至少ー個照相機(例如,靜物照片或視頻)106的視場102內,所述至少一個照相機106提供圖像數據以確定在連接的視頻度量服務器107處的視頻度量簽名。視頻度量簽名可以存儲在視頻度量數據庫108中。在存儲之前或之后,發展的視頻度量簽名可以由視頻度量服務器107分析以與視頻度量數據庫108中的其它先前的輸入進行匹配。如果在視頻度量簽名之間沒有發現匹配,則視頻度量服務器107可以查詢無線定位和識別系統(WLIS)服務器110以確定對象的位置與在照相機106的視場102內的地理附近區域內的無線設備101的位置之間是否存在匹配。可以針對與照相機106的視場102匹配的在地理區域上的所有移動標識來詢問無線定位和識別系統服務器110。可以通過無源方式(參見題目均為“Monitoring Of Call Information InA Wireless Location System” 的第 6,782,264 號和第 7,167,713 號美國專利以及題為“Advanced Triggers For Location-Based Service Applications In A WirelessLocation System”的第11/150414號美國專利申請)或有源方式(參見題為“NetworkAutonomous Wireless Location System” 的第 12/428,325 號美國專利申請)來觸發無線設備101的定位和識別。定位無線設備以及識別該設備的能力可以是基于網絡的覆蓋無線定位系統、(與WCN 111 104)集成的基于網絡的無線定位系統的功能或者作為WCN基礎設施111本身的一部分,作為在與WLIS 110進行通信的無線智能網絡(WIN)子系統中的軟件應用。雖然待識別、詢問和定位的可能數量的無線設備可能在WCN中引起容量問題,但是移動設備101的用戶面定位和識別可能是可能的。無線設備101自定位(基于移動的定位或移動輔助的定位)的機載能力可能限制任何用戶面定位技術的準確度。一旦針對無線設備發展了定位和識別,該信息就可以存儲在數據庫109中并且可以在任何時刻傳送到視頻度量服務器107。作為該示例性的網絡的一部分,短程通信接入點105被示為在視場102中。如果這樣的RF終端存在于視場中,則可以通過經由廣播提供到標記收發器的連接而與RFID、WiFi、藍牙、超寬帶或者其它信標標記收發器進行交互作用來獲取額外的持久標識符。雖然定向天線可以用于限定和/或擴大覆蓋區域,但是這樣的短程無線電收發器的位置通常通過接近終端來確定。
圖2參照圖2,示出了顯示蜂窩覆蓋和照相機覆蓋的示例性的實施方式。如所討論的,照相機系統在行人交通和交通工具交通的阻塞點上提供現場覆蓋的能力可以允許視頻度量簽名數據與從無線通信和定位系統獲得的數據的關聯。在附圖中示出了聯網照相機可以如何提供用于對地理柵欄的不同地理覆蓋區域的一個實施方式。在圖2中所示的都市景觀中,示出了具有廣域宏小區201和更短程的微小區202 (更小的小區例如微微小區和毫微微小區以及轉發器和分布式天線系統(DAS)由于復雜性而未示出)的無線網絡。該無線網絡可以配備有基于網絡的無線定位和識別能力。在一個實施方式中,安裝在附近的建筑物211上的聯網照相機217覆蓋人行橫道210。人行橫道210控制行人的流動并且通過照相機217的視場直接指導行人。控制本地道路203、209的交叉路ロ的交通信號220提供了行人和交通工具的計量流量,以便不過分
使用視頻度量系統的容量。在另ー實施方式中,聯網照相機218可以安裝在附近的建筑物204上以覆蓋到公共交通站205的入口 213。入口 213是提供視頻度量簽名發展的機會的行人集中器的另ー實例。此外,進入站205的對象的識別和定位可以允許對象在登上火車或公共汽車212之后的連續廣域定位的資源的調度。在另ー個實施方式中,聯網照相機215可以被定位以覆蓋碼頭221。登上渡船222的乘客在照相機215的視場內并且可以被識別。一旦在水223上,就可以在船仍然在無線通信網絡201、202的范圍內時經由無線定位系統來完成連續的廣域定位。在另ー實施方式中,聯網照相機219可以覆蓋到政府建筑物207的入口。具有無線標識符的視頻度量簽名可以用于維持到政府建筑物207的訪問者的記錄。在另ー個實施方式中,可以安裝照相機224以覆蓋到本地車道209上的進入坡道208。進入坡道208提供了交通工具的計量流量以發展交通工具和在交通工具內可見的個人的視頻度量簽名。進入坡道208還可以提供收集進入城市的對象的無線識別的機會。在另ー實施方式中,照相機216可以覆蓋協同定位在服務站206內的銷售點終端。銷售點終端可以允許交通工具的用戶使用信用卡和借記卡來在在油箱旁直接付費。視頻度量簽名可以在交通工具被填滿時發展。可以從無線設備和交通工具身份牌收集標識符。實時地或稍后使用事后分析,可以使標識符和簽名與在貸記或借記交易期間獲得的金融標識符匹配。
圖3A 和圖 3B圖3A不出了傳感器融合系統的過濾和關聯能力的實例。在一個實施方式中,本地無線通信系統(WCN)可以被配置為要求被服務的無線設備向WCN定期地重新注冊。由此產生的注冊流向WLIS系統提供了收集無線設備上的位置的機會。參照圖3A,第一照相機301可以給對象A、B和C加標簽。可以由無線定位和識別系統(WILS)為包含A、B和C的地理區域發展無線定位和識別,但是在該實施例中,由于WILS的不準確性,在第一注冊周期期間不能使緊密聚集的對象A、B和C匹配以區分視頻度量和移動設備身份。此外,由于照相機301和302之間的重疊的覆蓋區域307,對象A出現在第一照相機301的視場和第二照相機302的視場中。在第一注冊周期期間,對象A、B和C位于照相機301和302的附近。在第二注冊周期中,對象C仍然位于照相機301的附近,但是對象A現在在位照相機304的視場308中的新位置310處,而對象B位于任何聯網照相機的視場外的新位置312處。在隨后的注冊周期中,對象A位于另一新位置311處。對象D仍然在照相機303的視場309中被定位、標記和識別。對象B位于照相機304的附近,并且使用其視頻度量簽名被識別為在照相機的視場308內。對象C仍然位于照相機301的視場內。到上述注冊周期結束為止,已經獲得了足夠的定位和識別信息來積極地使視頻度量簽名與對象A、B、C和D的無線標識符關聯。圖3B以表格的形式示出了識別過程。在三個列“周期1”、“周期2”和“周期3”中示出了三個注冊周期。每個注冊周期列被再分為四列,一列對應于在該實例中被加了標簽的四個對象中的每ー個。四個照相機及其覆蓋區域被描繪為行。在行中,“O”用于指示被加了標簽的但未積極地識別的對象。“X”用于指示對象已經被加了標簽和積極地識別。圖4圖4示出了在多傳感器網絡的一個實施方式中結合視頻覆蓋與無線事件過濾的示例性的方法。在該所示的實施例中,三個對象402、403和404在第一照相機401的視場中時被分配視頻度量簽名(即,加標簽的)。第一對象402離開第一照相機401的視場并且越過(如箭頭409所指示的)小區邊界407前進而進入到第二照相機412的視場中。如從第二照相機412所拍攝的圖像發展的對象402的視頻度量簽名與第一照相機401發展的對象402的視頻度量簽名匹配。無線通信網絡413與相關的基于網絡的無線定位和識別系統(WLIS)408 一起提供了定位和識別無線設備的方式。如果對象參與活動通信會話,小區邊界交叉路ロ 407允許無線定位和識別系統(WLIS) 408捕獲任何網絡事件(例如,切換)。如果無線設備是空閑的并且尋呼區域邊界是交叉的,則重新注冊將出現,向WLIS提供定位和識別無線設備的機會。在該實施例中,只有一個對象402在照相機401和412之間移動時被檢測到。在該實施例中,在第一照相機401的視場中的加了標簽的對象403和404以及在第二照相機412的視場中的加了標簽的對象405和406還未提供可以用于提高定位和識別功能的網絡事務。
、
因為ー個對象402已經被積極地識別,因此當對象402移動到視頻度量覆蓋區域411外部的下ー個位置吋,連續跟蹤可以使用標準化的定位技術來完成。圖5
圖5中示出了阻塞點技術過濾方法的一個實施方式。在該實施例中,無線定位和識別系統被描繪為具有覆蓋阻塞點508的瓶頸的無線電覆蓋區504的無線收發器502。具有視場503的照相機系統501還覆蓋阻塞點508的瓶頸。照相機系統501可以通信地耦合到無線收發器502。由此產生的共享的覆蓋區域505允許確定基于接近度的定位,并且可以在同時接收到由照相機501捕獲的圖片或視頻時獲得移動設備識別。因為照相機的視場503以及無線收發器的無線電覆蓋區504都在對象通過阻塞點508的過程中被牢牢限制,移動識別、移動定位和視頻度量簽名的匹配可能被限制。在該實施例中,無線設備507穿過阻塞點508移動(507),允許照相機系統501捕獲面部或正面圖像。可以部署額外的照相機來捕獲對象的側面和背部視圖。在該實施例中,無線收發器502是有源定位和識別系統。在其它實施方式中,還可以使用WLS接收機與WCN毫微微小區基站成對的無源定位系統。在有源定位系統中,如首次在第 12/428,325 號美國專利申請“Network Autonomous Wireless Location System” 中教導的,無線設備506的機載定位系統可以用于生成所需的位置。圖6圖6示出了視頻監視覆蓋區域中的對象的定位促進定位/識別的一個實施方式,定位促進定位/識別使用視差(立體觀測)技術來估計對象的范圍和運動。視差系統是可以由聯網視頻系統使用以估計對象的位置和運動的光學到達角系統。如圖中所示,在一個實施方式中,至少ー對照相機6 OI、6 O 2與定向識別節點603(例如,有源MSI收集器或無源無線電網絡監控器)協同定位。照相機601、602經由有線或無線分組數據鏈路611、612被聯網到視頻網絡控制器/服務器608。視頻網絡控制器608可以發展攜帶無線設備615的對象的視頻度量簽名并且計算對象的范圍和運動。在該實施例中,有源識別節點603配備有定向天線,該定向天線被設計為提供覆蓋照相機的視場604、607的、限制詢問區域的覆蓋區域605。一旦對象被加了標簽并且對象的位置和運動由視頻網絡控制器608計算出,由識別節點603自主地收集并且通過鏈路606被發送到存儲器的帶時間戳的移動設備身份就可以通過分組數據鏈路614從識別數據庫609獲取。視頻網絡控制器/服務器608可以將視頻度量ID、身份信息和對象的范圍和運動關聯到單個記錄中。該記錄可以被發送用于進一歩分析或者被存儲在數據庫610中。實施方式現在參照圖7,示出了包括所公開的方法的各種方面的示例性過程。可以省略所示的操作中的ー個或多個,并且所示的操作并不暗示特定的順序。在一個示例性的方法中,對象可以通過視頻度量簽名來識別(702)。該簽名可以由外部數據庫發展或者在加標簽之后由視頻測量控制器(或者視頻度量系統運營商)識別(701)。使用所公開的定位、識別和過濾技術,移動設備可以與對象相關聯(703)。然后,基于網絡或者基于移動的移動定位技術可以用于跟蹤對象(704)。然后,執法人員可以使用更新的定位被引導到要逮捕的對象(705)。現在參照圖8,示出了用于跟蹤與移動設備相關聯的對象的示例性過程。可以省略所示的操作中的ー個或多個,并且所示的操作并不暗示特定的順序。在一個示例性的方法中,圖8示出了圖像數據集800和移動設備數據集820。圖像數據集800還可以包括圖像信息805、時間信息810和位置信息815。移動設備數據集820還可以包括移動設備識別825、時間信息830和位置信息835。過程840示出了對圖像數據集800和移動設備位置數據集820進行處理以確定匹配。在一個實施方式中,當來自圖像數據集和移動設備數據集的時間信息和位置信息滿足規定的相關程度時,可指示匹配。本領域技術人員將認識到,可以用很多公知的方式來規定相關程度。例如,可以根據成像源的位置與由位置確定系統提供的移動設備位置的接近程度和/或圖像數據的時間戳和移動設備數據的時間戳之間的相似程度來確定相關程度。相關程度可以是選擇性的并且基于多個因素被預先確定。這些因素可以包括例如成像源和移動設備信息源的時間戳函數的不確定性或誤差,或者由位置確定源提供的位置數據的期望的不確定性或誤差。如果使用多個成 像和/或移動設備信息源,則可以使用更復雜的過程來確定相關程度。當使用后處理時,可以分析存儲的圖像和移動設備的信息,并且統計方法可以用于確定相關的程度。任何數量的方法可以用于確定圖像信息與移動設備信息之間的相關和關聯程度。在過程850中,響應于確定圖像數據集800與移動設備數據集820之間的匹配,特定的移動設備可以與特定的圖像相關聯。該方法還可以包括分析由圖像數據集800表示的特定圖像以確定特定的個人身份與特定的圖像和特定的移動設備相關聯(860)。該方法還可以包括確定待跟蹤的對象對應于特定的個人身份(870)。在一些實施方式中,特定的移動設備的位置可以作為用于跟蹤對象的代替物被跟蹤。現在參照圖9,示出了用于跟蹤與移動設備相關聯的對象的另ー示例性的過程。可以省略所示的操作中的ー個或多個,并且所示的操作并不暗示特定的順序。在一個示例性的方法中,過程900示出了從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括表示對象的圖像的至少一部分。在過程950中,接收移動設備的識別信息和位置信息。在一個實施方式中,識別信息包括移動設備ID和與移動設備相關聯的公共ID。該方法還包括使移動設備與識別信息和位置信息相關聯(910)。在一個實施方式中,該方法還包括分析接收的圖像數據(912)并且基于所分析的圖像數據和先前存儲的圖像數據確定所接收的圖像數據與所述移動設備相關聯(915)。此外和可選地,所接收的圖像數據可以根據預定的相關水平與先前存儲的圖像數據相關(920)。在一個實施方式中,圖像數據包括視頻監視數據。位置信息可以從基于網絡的無線定位系統接收,基于網絡的無線定位系統被配置為使用來自無線設備的無線電發射來定位無線設備。在各種實施方式中,無線通信網絡可以是局域無線通信網絡,并且包括WiFi (802. 11)、RFID、藍牙或超寬帶網絡中的ー個。這些局域無線通信技術是例證性的,并且其它技術可以被使用。在其它實施方式中,無線通信網絡可以是廣域無線通信網絡,并且包括GSM、WiMAN、WIMAX、CDMA和W-CDMA中的ー個。這些廣域無線通信技術是例證性的,并且其它技術可以被使用。在一個實施方式中,對象可以是交通工具。在一個實施方式中,至少ー個圖像捕獲設備可以包括第一圖像捕獲設備和第二圖像捕獲設備,并且當對象從第一圖像捕獲設備的視場移動到第二圖像捕獲設備的視場吋,該對象可以被跟蹤。此外,來自第一圖像捕獲設備和第二圖像捕獲設備的圖像數據可以用于跟蹤對象。在一個實施方式中,可以存儲所分析的圖像數據、識別信息和位置信息,并且可以基于所存儲的圖像數據、識別信息和位置信息累積統計數據(925)。此外和可選地,所接收的數據可以用于在移動設備未被無線定位系統定位時跟蹤移動設備(930)。可選地,識別信息和位置信息可以用于在對象在圖像捕獲設備的視場之外時跟蹤移動設備(935)。在一個實施方式中,可以基于所接收的圖像數據來確定移動設備的移動方向。在方法的一個實施方式中,所述至少一個圖像捕獲設備可以包括具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備,并且移動設備的速度可以基于來自第一圖像捕獲設備和第二圖像捕獲設備的所接收的圖像數據來確定。結論可以在方法、系統、計算機可讀介質或任何類型的制成品中實現前面提到的方面中的任一個。本領域技術人員應當理解的是,本文所描述的各種技術可以與硬件或軟件或者二者的組合(在適當的場合)結合來實現。例如,本發明的方面可以在編程的計算機上實現。因此,本發明的方法和裝置或者其某些方面或部分可以采取體現在有形介質中的程序代碼(即,指令)的形式,所述有形介質例如是軟盤、CD-ROM、硬盤驅動器或任何其它機器 可讀的存儲介質,其中,當程度代碼被裝入到諸如計算機的機器中并且由機器執行時,該機器成為用于實踐本發明的裝置。在可編程計算機上執行程序代碼的情況下,計算設備通常包括處理器、由處理器可讀的存儲介質(其包括易失性存儲介質和非易失性存儲器和/或存儲元件)、至少一個輸入設備和至少一個輸出設備。一個或多個程序可以例如通過使用API、可再使用的控制等來實現或使用結合本發明所描述的過程。優選地,用高級程序或面向對象的編程語言來實現這些程序,以與計算機系統進行通信。然而,如果需要,可以用匯編或機器語言來實現這些程序。在任何情況下,該語言可以是編譯或解釋語言,并且與硬件實現相結合。在示例性的實施方式中,計算機可讀存儲介質可以包括例如隨機存取存儲器(RAM)、諸如機電硬盤驅動器、固態硬盤驅動器等的存儲設備、諸如FLASH RAM或ROM的固件以及諸如⑶-ROM、軟盤、DVD、FLASH驅動器、外部存儲設備等的可移動存儲設備。本領域技術人員應當認識到,可以使用其它類型的計算機可讀存儲介質,例如磁帶、閃存卡、數字視頻光盤、柏努利膠卷盒等。計算機可讀存儲介質可以提供處理器可執行指令、數據結構、程序模塊和計算機的其它數據的非易失性存儲器。最后,雖然已經結合優選的方面描述了本公開,但是如各個附圖中所示的,應當理解,可以使用其它類似的方面,或者可以對所描述的方面進行修改和添加以執行本公開的相同功能而不偏離本公開。例如,在本公開的各種方面中,公開了用于跟蹤與移動設備相關聯的對象的各種機制。然而,還可以通過本文的教導設想這些所描述的方面的其它等同機制。因此,本發明不應當限于任何單個方面,而更確切地被解釋為在根據所附權利要求的廣度和范圍內。
權利要求
1.一種跟蹤與移動設備相關聯的對象的方法,包括 處理圖像數據集和移動設備位置數據集以確定匹配,其中,所述圖像數據集包括圖像信息、時間信息和位置信息,并且所述移動設備位置數據集包括移動設備識別信息、時間信息和位置信息,并且其中,匹配在來自所述圖像數據集和所述移動設備數據集的所述時間信息和所述位置信息滿足規定的相關程度時被指示;以及 響應于確定所述圖像數據集和所述移動設備數據集之間的匹配,使具體的移動設備與具體的圖像相關聯。
2.根據權利要求I所述的方法,還包括分析所述具體的圖像以確定具體的個人身份,以使所述具體的圖像與所述具體的移動設備相關聯。
3.根據權利要求2所述的方法,還包括確定待跟蹤的所述對象對應于所述具體的個人身份,并且跟蹤所述具體的移動設備的位置作為用于跟蹤所述對象的代替物。
4.根據權利要求I所述的方法,其中,所述圖像數據集包括視頻監視數據。
5.根據權利要求I所述的方法,其中,所述位置數據集是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
6.根據權利要求I所述的方法,其中,所述移動設備包括用干與無線通信網絡進行通信的無線通信收發器。
7.根據權利要求6所述的方法,其中,所述無線通信網絡是局域無線通信網絡。
8.根據權利要求6所述的方法,其中,所述無線通信網絡是廣域無線通信網絡。
9.根據權利要求5所述的方法,還包括基于所述圖像數據集和移動設備位置數據集來監控所述對象相對于地理柵欄邊界的進入和退出。
10.根據權利要求2所述的方法,還包括存儲所分析的具體圖像、圖像數據集和移動設備位置數據集,并且基于所分析的具體圖像、圖像數據集和移動設備位置數據集來累積統計數據。
11.根據權利要求5所述的方法,還包括當所述移動設備未被所述無線定位系統定位吋,使用所述圖像數據集來跟蹤所述對象。
12.根據權利要求5所述的方法,還包括當所述圖像數據集是不可用的時,使用所述移動設備位置數據集來跟蹤所述對象。
13.根據權利要求3所述的方法,其中,所述對象是交通工具。
14.根據權利要求3所述的方法,其中,所述圖像數據集是從第一圖像捕獲設備和第二圖像捕獲設備接收的,所述方法還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第二圖像捕獲設備的視場時跟蹤所述對象,并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
15.根據權利要求I所述的方法,還包括基于所述圖像數據集來確定所述移動設備的移動方向。
16.根據權利要求I所述的方法,其中,所述圖像數據集是從具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備接收的。
17.根據權利要求16所述的方法,還包括基于從所述第一圖像捕獲設備和所述第二圖像捕獲設備接收的所述圖像數據集來確定所述移動設備的速度。
18.根據權利要求I所述的方法,其中,所述方法是在阻塞點處執行的。
19.一種跟蹤與移動設備相關聯的對象的計算機實現的方法,所述移動設備具有用于與無線通信網絡進行通信的無線通信收發器,所述方法包括 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括表示所述對象的圖像的至少一部分; 接收所述移動設備的識別信息和位置信息,其中,所述識別信息包括移動設備ID和與所述移動設備相關聯的公共ID ;以及 使所述移動設備與所述識別信息和所述位置信息相關聯。
20.根據權利要求19所述的方法,其中,所述關聯包括 分析所接收的圖像數據;以及 基于所分析的圖像數據和先前存儲的圖像數據確定所接收的圖像數據與所述移動設備相關聯。
21.根據權利要求20所述的方法,其中,所述確定包括根據預定的關聯水平來確定所接收的圖像數據與先前存儲的圖像數據相關。
22.根據權利要求19所述的方法,其中,所述圖像數據包括視頻監視數據。
23.根據權利要求19所述的方法,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
24.根據權利要求19所述的方法,其中,所述無線通信網絡是局域無線通信網絡。
25.根據權利要求19所述的方法,其中,所述無線通信網絡是廣域無線通信網絡。
26.根據權利要求19所述的方法,還包括基于所述位置信息和所述識別信息來監控所述對象相對于地理柵欄邊界的進入和退出。
27.根據權利要求21所述的方法,還包括存儲所分析的圖像數據、識別信息和位置信息,并且基于所存儲的圖像數據、識別信息和位置信息來累積統計數據。
28.根據權利要求23所述的方法,還包括當所述移動設備未被所述無線定位系統定位時,使用所接收的圖像數據來跟蹤所述移動設備。
29.根據權利要求23所述的方法,還包括當所述對象在所述圖像捕獲設備的視場之外時,使用所述識別信息和所述位置信息來跟蹤所述移動設備。
30.根據權利要求19所述的方法,其中,所述對象是交通工具。
31.根據權利要求19所述的方法,其中,所述至少一個圖像捕獲設備包括第一圖像捕獲設備和第二圖像捕獲設備,所述方法還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第二圖像捕獲設備的視場時跟蹤所述對象,并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
32.根據權利要求19所述的方法,還包括基于所接收的圖像數據來確定所述移動設備的移動方向。
33.根據權利要求19所述的方法,其中,所述至少一個圖像捕獲設備包括具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備。
34.根據權利要求33所述的方法,還包括基于從所述第一圖像捕獲設備和所述第二圖像捕獲設備接收的所述圖像數據來確定所述移動設備的速度。
35.根據權利要求19所述的方法,其中,所述方法是在阻塞點處執行的。
36.一種跟蹤對象的位置的計算機實現的方法,其中,所述對象與具有用干與無線通信網絡進行通信的無線通信收發器的移動設備相關聯,所述方法包括 從與地理位置相關聯的圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數據并且確定所接收的圖像數據與所述對象相關聯; 確定來自位置確定服務的位置信息對所述移動設備是不可用的;以及 使用所述圖像捕獲設備的地理位置作為所述對象的位置,直到所述位置信息變為可用的為止。
37.根據權利要求36所述的方法,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
38.一種使對象的位置與移動設備關聯的方法,所述移動設備具有用干與無線通信網絡進行通信的無線通信收發器,所述方法包括 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數據并且基于所分析的圖像數據來確定用于所述對象的簽名; 請求所述移動設備的識別信息和位置信息;以及 使所述簽名與所述識別信息和所述位置信息關聯。
39.ー種被配置為跟蹤與移動設備相關聯的對象的系統,所述系統包括至少ー個處理器和通信地耦合到所述至少一個處理器的至少ー個存儲介質,所述存儲介質具有存儲在其中的計算機可執行指令,所述計算機可執行指令用于指示所述處理器執行以下步驟 處理圖像數據集和移動設備位置數據集以確定匹配,其中,所述圖像數據集包括圖像信息、時間信息和位置信息,并且所述移動設備位置數據集包括移動設備識別信息、時間信息和位置信息,并且其中,匹配在來自所述圖像數據集和所述移動設備數據集的所述時間信息和所述位置信息滿足規定的相關程度時被指示;以及 響應于確定所述圖像數據集和所述移動設備數據集之間的匹配,使具體的移動設備與具體的圖像相關聯。
40.根據權利要求39所述的系統,還包括分析所述具體的圖像以確定具體的個人身份,從而使所述具體的圖像與所述具體的移動設備相關聯。
41.根據權利要求40所述的系統,還包括確定待跟蹤的所述對象對應于所述具體的個人身份,并且跟蹤所述具體的移動設備的位置作為用于跟蹤所述對象的代替物。
42.根據權利要求39所述的系統,其中,所述圖像數據集包括視頻監視數據。
43.根據權利要求39所述的系統,其中,所述位置數據集是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
44.根據權利要求39所述的系統,其中,所述移動設備包括用干與無線通信網絡進行通信的無線通信收發器。
45.根據權利要求44所述的系統,其中,所述無線通信網絡是局域無線通信網絡。
46.根據權利要求44所述的系統,其中,所述無線通信網絡是廣域無線通信網絡。
47.根據權利要求43所述的系統,還包括基于所述圖像數據集和移動設備位置數據集來監控所述對象相對于地理柵欄邊界的進入和退出。
48.根據權利要求40所述的系統,還包括存儲所分析的具體圖像、圖像數據集和移動設備位置數據集,并且基于所分析的具體圖像、圖像數據集和移動設備位置數據集來累積統計數據。
49.根據權利要求43所述的系統,還包括當所述移動設備未被所述無線定位系統定位吋,使用所述圖像數據集來跟蹤所述對象。
50.根據權利要求43所述的系統,還包括當所述圖像數據集是不可用的時,使用所述移動設備位置數據集來跟蹤所述對象。
51.根據權利要求41所述的系統,其中,所述對象是交通工具。
52.根據權利要求41所述的系統,其中,所述圖像數據集是從第一圖像捕獲設備和第ニ圖像捕獲設備接收的,還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第ニ圖像捕獲設備的視場時跟蹤所述對象,并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
53.根據權利要求39所述的系統,還包括基于所述圖像數據集來確定所述移動設備的移動方向。
54.根據權利要求39所述的系統,其中,所述圖像數據集是從具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備接收的。
55.根據權利要求54所述的系統,還包括基于從所述第一圖像捕獲設備和所述第二圖像捕獲設備接收的所述圖像數據集來確定所述移動設備的速度。
56.根據權利要求39所述的系統,其中,所述方法是在阻塞點處執行的。
57.ー種被配置為跟蹤與移動設備相關聯的對象的系統,所述移動設備具有用于與無線通信網絡進行通信的無線通信收發器,所述系統包括至少ー個處理器和通信地耦合到所述至少一個處理器的至少ー個存儲介質,所述存儲介質具有存儲在其中的計算機可執行指令,所述計算機可執行指令用于指示所述處理器執行以下步驟 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括表示所述對象的圖像的至少一部分; 接收所述移動設備的識別信息和位置信息,其中,所述識別信息包括移動設備ID和與所述移動設備相關聯的公共ID ;以及 使所述移動設備與所述識別信息和所述位置信息相關聯。
58.根據權利要求57所述的系統,其中,所述關聯包括 分析所接收的圖像數據;以及 基于所分析的圖像數據和先前存儲的圖像數據確定所接收的圖像數據與所述移動設備相關聯。
59.根據權利要求58所述的系統,其中,所述確定包括根據預定的關聯水平來確定所接收的圖像數據與先前存儲的圖像數據相關。
60.根據權利要求57所述的系統,其中,所述圖像數據包括視頻監視數據。
61.根據權利要求57所述的系統,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
62.根據權利要求57所述的系統,其中,所述無線通信網絡是局域無線通信網絡。
63.根據權利要求57所述的系統,其中,所述無線通信網絡是廣域無線通信網絡。
64.根據權利要求57所述的系統,還包括基于所述位置信息和所述識別信息來監控所述對象相對于地理柵欄邊界的進入和退出。
65.根據權利要求59所述的系統,還包括存儲所分析的圖像數據、識別信息和位置信息,并且基于所存儲的圖像數據、識別信息和位置信息來累積統計數據。
66.根據權利要求61所述的系統,還包括當所述移動設備未被所述無線定位系統定位時,使用所接收的圖像數據來跟蹤所述移動設備。
67.根據權利要求61所述的系統,還包括當所述對象在所述圖像捕獲設備的視場之外時,使用所述識別信息和所述位置信息來跟蹤所述移動設備。
68.根據權利要求57所述的系統,其中,所述對象是交通工具。
69.根據權利要求57所述的系統,其中,所述至少一個圖像捕獲設備包括第一圖像捕獲設備和第二圖像捕獲設備,還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第二圖像捕獲設備的視場時跟蹤所述對象,并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
70.根據權利要求57所述的系統,還包括基于所接收的圖像數據來確定所述移動設備的移動方向。
71.根據權利要求57所述的系統,其中,所述至少一個圖像捕獲設備包括具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備。
72.根據權利要求71所述的系統,還包括基于從所述第一圖像捕獲設備和所述第二圖像捕獲設備接收的所述圖像數據來確定所述移動設備的速度。
73.根據權利要求57所述的系統,其中,所述方法是在阻塞點處執行的。
74.—種被配置為跟蹤對象的位置的系統,其中,所述對象與具有用干與無線通信網絡進行通信的無線通信收發器的移動設備相關聯,所述系統包括至少ー個處理器和通信地耦合到所述至少一個處理器的至少ー個存儲介質,所述存儲介質具有存儲在其中的計算機可執行指令,所述計算機可執行指令用于指示所述處理器執行以下步驟 從圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數據并且確定所接收的圖像數據與所述對象相關聯; 確定來自位置確定服務的位置信息對所述移動設備是不可用的;以及 使用所述圖像捕獲設備的地理位置作為所述對象的位置,直到所述位置信息變為可用的為止。
75.根據權利要求74所述的系統,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
76.—種被配置為使對象的位置與移動設備相關的系統,所述移動設備具有用于與無線通信網絡進行通信的無線通信收發器,所述系統包括至少ー個處理器和通信地耦合到所述至少一個處理器的至少ー個存儲介質,所述存儲介質具有存儲在其中的計算機可執行指令,所述計算機可執行指令用于指示所述處理器執行以下步驟 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數 據并且基于所分析的圖像數據確定用于所述對象的簽名; 請求所述移動設備的識別信息和位置信息;以及 使所述簽名與所述識別信息和所述位置信息關聯。
77.一種存儲有計算機可執行指令的計算機可讀存儲介質,所述計算機可執行指令用于跟蹤與移動設備相關聯的對象,所述計算機可執行指令用于 處理圖像數據集和移動設備位置數據集以確定匹配,其中,所述圖像數據集包括圖像信息、時間信息和位置信息,并且所述移動設備位置數據集包括移動設備識別信息、時間信息和位置信息,并且其中,匹配在來自所述圖像數據集和所述移動設備數據集的所述時間信息和所述位置信息滿足規定的相關程度時被指示;以及 響應于確定所述圖像數據集和所述移動設備數據集之間的匹配,使具體的移動設備與具體的圖像相關聯。
78.根據權利要求77所述的計算機可讀存儲介質,還包括用于分析所述具體的圖像以確定具體的個人身份從而使所述具體的圖像與所述具體的移動設備相關聯的指令。
79.根據權利要求78所述的計算機可讀存儲介質,還包括用于確定待跟蹤的所述對象對應于所述具體的個人身份并且跟蹤所述具體的移動設備的位置作為用于跟蹤所述對象的代替物的指令。
80.根據權利要求77所述的計算機可讀存儲介質,其中,所述圖像數據集包括視頻監視數據。
81.根據權利要求77所述的計算機可讀存儲介質,其中,所述位置數據集是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
82.根據權利要求77所述的計算機可讀存儲介質,其中,所述移動設備包括用于與無線通信網絡進行通信的無線通信收發器。
83.根據權利要求82所述的計算機可讀存儲介質,其中,所述無線通信網絡是局域無線通信網絡。
84.根據權利要求82所述的計算機可讀存儲介質,其中,所述無線通信網絡是廣域無線通信網絡。
85.根據權利要求81所述的計算機可讀存儲介質,還包括用于基于所述圖像數據集和移動設備位置數據集來監控所述對象相對于地理柵欄邊界的進入和退出的指令。
86.根據權利要求78所述的計算機可讀存儲介質,還包括用于分析具體圖像、圖像數據集和移動設備位置數據集并且基于所分析的具體圖像、圖像數據集和移動設備位置數據集來累積統計數據的指令。
87.根據權利要求81所述的計算機可讀存儲介質,還包括用于當所述移動設備未被所述無線定位系統定位時使用所述圖像數據集來跟蹤所述移動設備的指令。
88.根據權利要求81所述的計算機可讀存儲介質,還包括用于當所述圖像數據集是不可用的時使用所述移動設備位置數據集來跟蹤所述移動設備的指令。
89.根據權利要求79所述的計算機可讀存儲介質,其中,所述對象是交通工具。
90.根據權利要求79所述的計算機可讀存儲介質,其中,所述圖像數據集是從第一圖像捕獲設備和第二圖像捕獲設備接收的,還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第二圖像捕獲設備的視場時跟蹤所述對象并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
91.根據權利要求77所述的計算機可讀存儲介質,還包括用于基于所述圖像數據集來確定所述移動設備的移動方向的指令。
92.根據權利要求77所述的計算機可讀存儲介質,其中,所述圖像數據集是從具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備接收的。
93.根據權利要求92所述的計算機可讀存儲介質,還包括用于基于從所述第一圖像捕獲設備和所述第二圖像捕獲設備接收的所述圖像數據集來確定所述移動設備的速度的指令。
94.根據權利要求77所述的計算機可讀存儲介質,其中,所述方法是在阻塞點處執行的。
95.一種存儲有計算機可執行指令的計算機可讀存儲介質,所述計算機可執行指令用于跟蹤與移動設備相關聯的對象,所述移動設備具有用干與無線通信網絡進行通信的無線通信收發器,所述計算機可執行指令用于 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括表示所述對象的圖像的至少一部分; 接收所述移動設備的識別信息和位置信息,其中,所述識別信息包括移動設備ID和與所述移動設備相關聯的公共ID ;以及 使所述移動設備與所述識別信息和所述位置信息相關聯。
96.根據權利要求95所述的計算機可讀存儲介質,其中,所述關聯包括 分析所接收的圖像數據;以及 基于所分析的圖像數據和先前存儲的圖像數據來確定所接收的圖像數據與所述移動設備相關聯。
97.根據權利要求96所述的計算機可讀存儲介質,其中,所述確定包括根據預定的關聯水平來確定所接收的圖像數據與先前存儲的圖像數據相關。
98.根據權利要求95所述的計算機可讀存儲介質,其中,所述圖像數據包括視頻監視數據。
99.根據權利要求95所述的計算機可讀存儲介質,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
100.根據權利要求95所述的計算機可讀存儲介質,其中,所述無線通信網絡是局域無線通信網絡。
101.根據權利要求95所述的計算機可讀存儲介質,其中,所述無線通信網絡是廣域無線通信網絡。
102.根據權利要求95所述的計算機可讀存儲介質,還包括用于基于所述位置信息和所述識別信息來監控所述對象相對于地理柵欄邊界的進入和退出的指令。
103.根據權利要求97所述的計算機可讀存儲介質,還包括用于存儲所分析的圖像數據、識別信息和位置信息并且基于所存儲的圖像數據、識別信息和位置信息來累積統計數據的指令。
104.根據權利要求99所述的計算機可讀存儲介質,還包括用于當所述移動設備未被所述無線定位系統定位時使用所接收的圖像數據來跟蹤所述移動設備的指令。
105.根據權利要求99所述的計算機可讀存儲介質,還包括用于當所述對象在所述圖像捕獲設備的視場之外時使用所述識別信息和所述位置信息來跟蹤所述移動設備的指令。
106.根據權利要求95所述的計算機可讀存儲介質,其中,所述對象是交通工具。
107.根據權利要求95所述的計算機可讀存儲介質,其中,所述至少一個圖像捕獲設備包括第一圖像捕獲設備和第二圖像捕獲設備,還包括當所述對象從所述第一圖像捕獲設備的視場移動到所述第二圖像捕獲設備的視場時跟蹤所述對象并且使用來自所述第一圖像捕獲設備和所述第二圖像捕獲設備的圖像數據來跟蹤所述對象。
108.根據權利要求95所述的計算機可讀存儲介質,還包括用于基于所接收的圖像數據來確定所述移動設備的移動方向的指令。
109.根據權利要求95所述的計算機可讀存儲介質,其中,所述至少一個圖像捕獲設備包括具有重疊的視場的第一圖像捕獲設備和第二圖像捕獲設備。
110.根據權利要求109所述的計算機可讀存儲介質,還包括用于基于從第一圖像捕獲設備和第二圖像捕獲設備接收的所述圖像數據來確定所述移動設備的速度的指令。
111.根據權利要求110所述的計算機可讀存儲介質,其中,所述方法是在阻塞點處執行的。
112.—種存儲有用于跟蹤對象的位置的計算機可執行指令的計算機可讀存儲介質,其中,所述對象與具有用干與無線通信網絡進行通信的無線通信收發器的移動設備相關聯,所述計算機可執行指令用于 從圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數據并且確定所接收的圖像數據與所述對象相關聯; 確定來自位置確定服務的位置信息對所述移動設備是不可用的;以及 使用所述圖像捕獲設備的地理位置作為所述對象的位置,直到所述位置信息變為可用的為止。
113.根據權利要求112所述的計算機可讀存儲介質,其中,所述位置信息是從基于網絡的無線定位系統接收的,所述基于網絡的無線定位系統被配置為使用來自所述無線設備的無線電發射來定位無線設備。
114.一種存儲有用于使對象的位置與移動設備相關的計算機可執行指令的計算機可讀存儲介質,所述移動設備具有用干與無線通信網絡進行通信的無線通信收發器,所述計算機可執行指令用于 從至少一個圖像捕獲設備接收圖像數據,其中,所述圖像數據包括捕獲所述對象的至少一部分的圖像; 分析所接收的圖像數據并且基于所分析的圖像數據來確定用于所述對象的簽名;請求所述移動設備的識別信息和位置信息;以及使所述簽名與 所述識別信息和所述位置信息關聯。
全文摘要
通過使成像系統與無線定位功能相結合,對象的視頻度量簽名可以與公共身份關聯,從而實現在視頻監視網絡的覆蓋區域外部或之間的連續監視。除了擴展監視覆蓋區域以外,計算機化的視頻監視與無線位置確定的結合還可以允許經由現有的移動設備和在無線網絡中使用的用戶標識符來識別移動設備用戶。
文檔編號G01S1/00GK102667518SQ201080052391
公開日2012年9月12日 申請日期2010年11月30日 優先權日2009年12月8日
發明者布萊恩·R·博隆, 羅伯特·J·安德森 申請人:真實定位公司