早期项目 | 将工业级的算法用于消费级产品 「Blink Focos」一款体育摄像机器人
今天给大家普及一下早期项目 | 将工业级的算法用于消费级产品 「Blink Focos」一款体育摄像机器人相关知识,最近很多在问早期项目 | 将工业级的算法用于消费级产品 「Blink Focos」一款体育摄像机器人,希望能帮助到您。
在已经圆满结束的北京冬奥会上,除了备受瞩目的开幕式、各国选手的精彩表现、人见人爱的冰墩墩以外,各种融合了人工智能的视频黑科技也备受注目:超高清8K直播、让观众身临其境的全景VR现场、机器人摄像、还有赛场内外的各种智能安防、防疫、监控、AR指挥等等,前沿技术正在让更快更高更强的奥运精神更加生动。
顶级体育赛事向来是影像设备、图形技术领域头部公司比拼的舞台,当然这些设备和技术通常极其昂贵,很难惠及普通人和大众体育。不过目前一方面各种球类、及其他运动项目的发烧友群体日益壮大,青少年体育参与度日渐增高,从日常训练到各级业余赛事对于现场视频记录和直播的需求已经非常强劲;另一方面短视频、直播等平台也需要优质的体育竞技类视频资源。
当然,如果仅仅是一段短视频,任何人都可以用手机或者相机轻松完成。体育的魅力在于无法预见赛事的发展,为了捕捉到一个精彩的进球,常常需要把整场超过1个小时的球类比赛都记录下来,这单靠一个人长时间手动拍摄是无法持续的; 而使用支架固定拍摄的话,又无法随时准确对焦,跟踪全场。
不久前问世了一款可以自动拍摄团队比赛的手机跟拍系统 Blink Focos,它基于独特的人工智能算法,可以深度理解不同运动场景、智能识别并跟踪目标,实现实时场景分析以及自动拍摄。
Blink Focos 是由 Blink Tech 公司自主研发,其独创的“蛙眼跟踪”算法拥有多项中国和美国专利技术,可以让用户彻底解放双手,甚至全程不必人工介入,即可打造出高精度、低延迟的拍摄效果。
Blink Tech 创始人谈科峰在美国加州大学取得博士学位后在美国亚马逊尖端硬件实验室Lab 126、美国贝尔实验室和NEC中央实验室等有超过10年的智能硬件研发经验。公司的其他核心团队成员均为美国硕博士,曾任职于清华大学、苹果和摩根大通等机构,2021年 Blink Tech 中国公司 - 深眸科技(北京)有限公司于北京成立。
尽管目前市场上也有其他手机云台/稳定器类设备可以提供半自动或遥控拍摄,但一方面它们还是需要依靠操作者手动框选追踪目标,并只能据此来追踪单人的低速运动;另一方面这些产品也还无法做到对复杂运动场景的识别,因此无法完成对其的自动跟拍。
Blink Focos 则可以看作民用级的体育摄像机器人,如同扫地机器人等民用级自动控制设备,因为在机械系统等方面采用的是民用级的元器件和工艺,事实上在算法方面甚至需要比专业级的设备更复杂的人工智能算法。
Blink Focos 提供了可对标专业系统智能的解决方案,而拍摄篮球、足球等多人参与、快速攻防转换、强对抗的比赛对于一款自动化的产品在算法方面提出了非常高、也非常庞杂的要求,设备需要通过分析人和球的运动速度、移动方向、加速趋势,甚至人的具体动作和姿态变化情况,来同时选择追踪多个目标的位移变化、综合计算最优的画面,从而实现镜头的自动追踪拍摄。
并且,Blink Focos 进一步把比赛的规则融入算法,使得算法也能了解比赛规则,这样镜头的追踪就更加接近人的视角习惯,就可以达到没有人为操作也能拍摄出媲美摄影师的体育视频。Blink Focos 已经能做到多人同时追踪、动态识别人物动作特征、预判人的移动轨迹等人类才能具备的思考能力。
现在,Blink Focos 不仅可以提供多种模式的自动追踪拍摄,以及具有自动追踪能力的实时高清直播,还提供可以随时转发、下载的视频云存储。未来,精彩视频智能剪辑;多机位协同拍摄直播;单人、双人运动场景;更多新场景新功能等也正在不断开发完善中。
Blink Tech 表示:尽管市场还需进一步培育,但自身已经凭借先发优势构成了一定的壁垒,从2020年开始,经过数百个软件版本的优化,数千场比赛的实地测试,Blink Focos 迅速得以成熟并登上了应用市场。而且在同合作伙伴、用户共创中研究全球不同国家和地区的各类场馆环境、比赛模式、运动人群、甚至是年龄段的不同情况,来调整和优化算法结构。
市场方面,Blink Tech 在同步发力海外和国内市场,电商平台、渠道代理、线下直销并行。目前,在海外市场已经取得了不错的成绩,一方面中端的价位在海外更发达地区接受程度会更高,另一方面全民体育的理念在海外更深入人心。同时也应该看到,中国也在大力发展素质教育,体育运动本身、以及相关的教育,正在成为各个年龄段的刚需,未来,将衍生出更多的需求,而与体育相关的前沿科技产品或也将迎来更大的爆发。