歐洲杯直播中的新科技：當(dāng)虹科技用AI“點(diǎn)亮球星”

歐洲杯激戰(zhàn)正酣。身邊人都在看球、說球,自己卻看不懂、分不清怎么辦?

近日,杭州當(dāng)虹科技股份有限公司支持中國移動咪咕公司推出了“AI點(diǎn)亮球星”功能,實(shí)現(xiàn)“哪里不會點(diǎn)哪里”。

在觀看直播過程中,任意點(diǎn)擊一名球員,你喜愛的或者是你不熟悉的,都能實(shí)時查看該球員的歷史戰(zhàn)績、本次比賽得分等信息,直觀了解球員的站位及跑動路線。

據(jù)了解,為了實(shí)現(xiàn)一鍵追蹤球星動態(tài),業(yè)界之前嘗試了很多種方式。比如,對回放畫面進(jìn)行智能分析+特效包裝。又或者通過在場館內(nèi)搭建特種全景攝像機(jī),讓球員在身上佩戴傳感器等方式,來獲取現(xiàn)場比賽數(shù)據(jù)。

對于“鐵桿球迷”來說,第一時間知道戰(zhàn)況,才能放下懸著的心,所以直播是首選。“AI點(diǎn)亮球星”功能的優(yōu)勢在于,不需要部署數(shù)據(jù)感知系統(tǒng),基于直播畫面分析,支持實(shí)時互動體驗(yàn)。

這對于分析奪冠形勢很好用。即使中途進(jìn)入直播,也可以根據(jù)比賽數(shù)據(jù)統(tǒng)計,掌握賽況。足球小白也表示期待已久,被“硬控”了整場直播,妥妥的知識科普。

然而,想要做到實(shí)時“點(diǎn)亮”,可不容易。在足球比賽的長鏡頭記錄中,這些因素都會給精準(zhǔn)識別與穩(wěn)定跟蹤帶來挑戰(zhàn)。

比如,變焦會放大或縮小球員的“尺寸”,不同機(jī)位也會影響球員在畫面中的輪廓和姿態(tài)。又如,高速運(yùn)動的時候球員會變得模糊。此外,當(dāng)球員“控球”時,可能會相互遮擋;陰影和光照變化也會遮擋球員的部分身體或面部特征。

當(dāng)虹科技的研發(fā)人員表示,只通過人體特征識別確定球員身份難度大,于是優(yōu)化了算法模型,融合人體特征識別、球衣顏色識別、球號識別、人物姿態(tài)等多維視覺算法,進(jìn)行實(shí)時定位和身份識別。

通過估計攝像機(jī)的運(yùn)動參數(shù),如平移、旋轉(zhuǎn)、縮放,對圖像進(jìn)行相應(yīng)的幾何變換,以補(bǔ)償由于相機(jī)運(yùn)動引起的圖像抖動和錯位。

舉個例子。假設(shè)在某一幀畫面中,一個球員正在快速奔跑,但由于相機(jī)的水平移動,球員的形象變得模糊,并且位置有一些偏移。此時算法就會根據(jù)相鄰幀的特征點(diǎn),對這一幀的圖像進(jìn)行“補(bǔ)償”。

現(xiàn)在還有一個問題,當(dāng)球員在畫面中相互遮擋時,算法如何準(zhǔn)確識別?

這就要用到多目標(biāo)跟蹤算法:在每一幀畫面中,檢測所有目標(biāo)球員,并標(biāo)記他們的位置和特征,建立每個球員的運(yùn)動軌跡。即使發(fā)生遮擋,也可以根據(jù)之前的運(yùn)動軌跡預(yù)測當(dāng)下位置,通過球衣顏色、球號等特征幫助識別和持續(xù)追蹤。