技術支持
來源:光虎
體育運動技術是靠商業驅動的。錯過一個電話動輒造成成百上千萬元的損失。誰不想在體育運動中勝者為王呢,而大多數老板和運動員認為,裁決賽事結果最公平公正的方法就是靠視覺技術。此外,娛樂也是一大驅動因素。
發展歷史簡介
在賽跑項目中用照片定勝負拉開了體育賽事中使用視覺技術的序幕。20世紀30年代,賽馬項目為判定勝負首次使用了用膠卷攝錄的膠帶攝像機,其他賽事也漸漸采用這項技術。
20世紀60年代,棒球運動中使用雷達來追蹤球速。很久以后,網球運動中也采用了這項技術來追蹤發球速度。當時這類應用更多的是為了娛樂。到了20世紀80年代,網球運動中首次采用了一個依托于光束的電腦系統,名為Cyclops。讓這個系統來當電子司線員,即使是像約翰·麥肯羅這樣的人也沒理由雞蛋里挑骨頭了。直到21世紀初期,數碼攝像機才在這個應用方向上發力,而且成為了改變賽事規則的重大革新,為各個體育運動領域和相應的娛樂領域打開了新世界的大門。
人們最早使用多臺相機,讓它們保持嚴格同步時使用的是三角測量法,來在視覺上實現全三維場景重建。后來這就構成了像虛擬現實、混合現實和增強現實這樣的容積捕獲類應用領域的基礎——似乎體育運動和這類應用領域之間的界線正在變得越來越模糊。憑借著這樣的3D場景,就沒什么想像空間可言,也幾乎不會有爭議了。
除了自動裁判這個應用方向以外,表現分析已經成為這類技術的一個重要應用方向。對運動員在比賽過程以及訓練過程中的追蹤會極大地提高其場上表現。在棒球練習中,可以全三維捕獲投球手、擊球手和球的運動,并對其進行大量分析,來確定場上取勝的訣竅,甚至可以以微秒級精度偵測到球速為90mph的變速球的旋轉運動。如今,追蹤姿勢、運動員速度、射門速度等現場表現都已成為體育運動的標準組成部分。
最后,如我們在一些NBA和NFL直播中看到的那樣,有人在將同樣的技術用于純娛樂用途,比如允許用戶繞著場上的物體自由旋轉,以獲得半虛擬現實體驗。
挑戰
歸根結底,所謂的挑戰基本上就在于生成精確的3D場景。為了獲得最佳精度,會要求從多臺相機采集到的圖像之間要實現嚴格的、微秒級的計時同步。會要求在各種光照環境下保證出色的圖像質量。有些應用方向要求圖像必須擁有高分辨率,幀率還得毫不遜色。會要求相機設置能橫跨一大片區域,把整個體育場包含進去,所以對于系統安裝和維護來說,最簡單的方案最受青睞。為了獲得最佳精度,一個完整的系統需要使用多臺相機。最后,在大多數應用中,成本會是一個重要因素。
10GigE和25GigE相機如何處理這個難題
Emergent在運用包括PTP和硬件觸發在內的各種方法來同步相機方面擁有極其豐富的經驗,可以輕而易舉地實現微秒級精度。
IEEE 1588精密時間協議(PTP)
Emergent相機只使用Sony、Gpixel和AMS這種一流供應商供應的最好的傳感器,想方設法將這些傳感器的性能發揮到極致。因此,動態范圍得以改進,而動態范圍對體育運動這個應用方向而言十分重要,因為經常需要處理不斷變化的光照條件。
目前Sony IMX253(12MP @ 80fps)和Sony IMX255(9MP @ 110fps)是最受體育運動領域歡迎的傳感器,不過像Sony IMX342(31MP @ 35fps)、Gpixel GMAX0505(25MP @ 75fps)和AMS CMV50000(50MP @ 30fps)這樣有更高分辨率的傳感器現在也逐漸興起了。
Emergent剛剛發布的六個新相機型號,使用了Sony第4代傳感器,像素從5MP到25MP,幀率從269fps到98fps。為了擁有絕高速度,這些傳感器使用了最高速的SLVS-EC接口(5GHz),而Emergent是第一家依托這些突破性傳感器的全力支持,走向市場的廠家。
更高的幀率和分辨率自然會要求使用更高的帶寬接口,這樣才能在無限次錄制中保持性能。Emergent還提供十分前沿的10GigE和25GigE相機接口支持。
廣播類應用正在向依托以太網技術轉變,取代過時、有諸多限制、成本上還不怎么合算的SDI技術。符合SMPTE ST 2110標準就是一種額外優勢,讓相機與新時代接軌。
通過使用低廉的SFP+和SFP28收發器,GigE線纜幾乎可以做到無限長。相較之下,與之最接近的CXP線纜中,CXP6和CXP12可以分別達到72m和30m長,若想再長些,就得使用昂貴的光纖適配器。
如前所述,使用膠卷攝錄的膠帶攝像機曾被用在由照片定勝負的比賽項目中。時至今日,通常是線掃相機取代了這一角色,比如Emergent的LR-8KG和LB-8KG。相機會被垂直定向放置,精確而持續不斷地掃描著終點線。當運動中的物體跨越終點線時,會對運動物體掃描,而且這個場景的靜態畫面不會發生改變。
有些人希望安裝牢固,那么網絡交換機會發揮出巨大的作用。在多相機設置中,由于跨行業使用,人們認為這種設備的成本很低而且還在不斷降低。使用交換機有以下三個主要原因:
PTP分配
如圖,可以輕松把一個高精度PTP主時鐘分配到通過交換機連接的所有設備上。
IEEE 1588精密時間協議(PTP)
相機/設備多路復用技術
10個像HR-12000-SC這樣的10GigE相機可以多路傳輸到一個單獨的100GigE鏈路,傳回到插著單接口100GigE網卡(NIC)的服務器。對于使用的服務器PCIe插槽(用來插網卡的)有限的系統來說,這是很有必要的。掂量一下,在10臺相機配1臺PC的應用中,要用5個雙口10GigE網卡,由于插槽數量更多導致服務器成本增加,而且5個雙口10G網卡比1個單口100G網卡成本要高。
冗余
考慮到多路復用,如果帶100G網卡的單獨服務器不能使用了,那么快速轉換到一個類似的冗余服務器幾乎可以實現停機時間為0。再者,用數量更少、速度更快的鏈路執行冗余,比如1個100G鏈路和10個10G鏈路相比,需要的交換端口要少很多。
10GigE和25GigE相機用于體育運動領域的優勢
>> 超高數據傳輸速率/幀率
>> 各種配件和線纜可供選擇,滿足不同的長度需求
>> 提供相機網絡支持以及包括PTP支持在內的多相機精確同步方法
>> 運用多播視頻技術
>> 低CPU開銷、低延遲、低抖動(利用Myricom公司的MVA技術和Mellanox公司的VMA技術)
>> 每臺PC可配相機數量最多
>> 性價比極具競爭力
>> 符合IEEE和AIA標準,行業認可度高
【來源:加拿大Emergent公司】