欧洲杯直播中的新科技:当虹科技用AI“点亮球星”
欧洲杯直播中的新科技:当虹科技用AI“点亮球星”
2024-06-20 15:42:57.0 来源:北国网
欧洲杯激战正酣。身边人都在看球、说球,自己却看不懂、分不清怎么办?
近日,当虹科技支持中国移动咪咕公司推出了“AI点亮球星”功能,实现“哪里不会点哪里”。
在观看直播过程中,任意点击一名球员,你喜爱的或者是你不熟悉的,都能实时查看该球员的历史战绩、本次比赛得分等信息,直观了解球员的站位及跑动路线。
据了解,为了实现一键追踪球星动态,业界之前尝试了很多种方式。比如,对回放画面进行智能分析+特效包装。又或者通过在场馆内搭建特种全景摄像机,让球员在身上佩戴传感器等方式,来获取现场比赛数据。
对于“铁杆球迷”来说,第一时间知道战况,才能放下悬着的心,所以直播是首选。“AI点亮球星”功能的优势在于,不需要部署数据感知系统,基于直播画面分析,支持实时互动体验。
这对于分析夺冠形势很好用。即使中途进入直播,也可以根据比赛数据统计,掌握赛况。足球小白也表示期待已久,被“硬控”了整场直播,妥妥的知识科普。
然而,想要做到实时“点亮”,可不容易。在足球比赛的长镜头记录中,这些因素都会给精准识别与稳定跟踪带来挑战。
比如,变焦会放大或缩小球员的“尺寸”,不同机位也会影响球员在画面中的轮廓和姿态。又如,高速运动的时候球员会变得模糊。此外,当球员“控球”时,可能会相互遮挡;阴影和光照变化也会遮挡球员的部分身体或面部特征。
当虹科技的研发人员表示,只通过人体特征识别确定球员身份难度大,于是优化了算法模型,融合人体特征识别、球衣颜色识别、球号识别、人物姿态等多维视觉算法,进行实时定位和身份识别。
通过估计摄像机的运动参数,如平移、旋转、缩放,对图像进行相应的几何变换,以补偿由于相机运动引起的图像抖动和错位。
举个例子。假设在某一帧画面中,一个球员正在快速奔跑,但由于相机的水平移动,球员的形象变得模糊,并且位置有一些偏移。此时算法就会根据相邻帧的特征点,对这一帧的图像进行“补偿”。
现在还有一个问题,当球员在画面中相互遮挡时,算法如何准确识别?
这就要用到多目标跟踪算法:在每一帧画面中,检测所有目标球员,并标记他们的位置和特征,建立每个球员的运动轨迹。即使发生遮挡,也可以根据之前的运动轨迹预测当下位置,通过球衣颜色、球号等特征帮助识别和持续追踪。
评论