长期以来,在有人物跟踪、画面构图需求的会议过程、现场节目制作、虚拟拍摄和制作等中高端应用场合,比如政府、国企、私企会议;影视综艺、演出活动、体育赛事、电视台、融媒体的现场节目制作;虚拟制作过程的虚拟拍摄和制作过程等,PTZ摄像机已经获得广泛采用。然而,过去的这些应用过程中,常常配有一个专门的摄像师或者控制人员。
随着卫生防控标准的提升、用人成本和摄像师培训成本的不断增加,同时也随着AI技术在各行各业的广泛、深入渗透,用户方越来越期望能有一种具有AI功能,以AI功能替代摄像师的PTZ摄像机,从而节省人工成本,同时也增强政府、国企、私企会议过程和现场拍摄的私密性。
前几年,索尼已经率先研发并推出AI智能构图PTZ摄像机,几年过去,AI智能构图PTZ摄像机产品、技术有什么进展?在近日的BIRTV 2024展会上,专业视听ProAVChina现场采访了索尼公司AI智能构图PTZ摄像机研发和销售团队,了解索尼在这一领域的最新进展。
索尼全球专业影像事业部部长田渕達人表示:索尼具备从影视创作端到内容端完整的生态链,这两年AI非常火热,索尼密切关注用户需求,不断地推陈出新。
在BIRTV 2024,索尼首次展示新一代AI智能构图旗舰PTZ摄像机BRC-AM7,并向用户展示其强大的AI智能构图功能。BRC-AM7采用了索尼堆栈式传感器,具有5K超采样4K的优异画质和索尼电影摄影机系统一贯优异的色彩表现。同时,可以更准确、稳定、流畅地对被拍摄主体进行PTZ(平移/俯仰/变焦)跟踪。满足广电、融媒体用户对稳定性、高画质的高要求。同时,新品还兼容各种专业接口、流媒体传输,适配影视制作用户对特殊机位、远程协作、无人拍摄等多样的场景需求。
索尼新一代AI智能构图旗舰PTZ摄像机BRC-AM7
BRC-AM7具有高画质、AI智能构图、强大的系统兼容性,可多设备协作。索尼全球专业影像事业部部长田渕達人表示:BRC-AM7的优势是小巧、轻便的外形,非常易于安装,还具有用途广泛的20倍光学变焦。我们相信AM7是一款功能更加全面的产品,除了内容创作外,它还可以胜任包括演唱会、赛事等现场直播在内的多种应用场景。
针对广播电视和泛视听领域的灵活制作,新一代AI智能构图旗舰PTZ摄像机BRC-AM7搭载了索尼AI芯片以及新研发的电机,其内置的新一代AI智能构图功能,简化PTZ摄像机的操作要求,自动调整PTZ运动,自然流畅地保持画面构图,从而节约时间、人力和系统搭建成本。同时,通过5K超采样技术以及全新的镜头,配合索尼统一的色彩科学,为获得广电级的高画质提供了保障。
在教育、演讲的场景下,演讲者需要跟听众互动,会走动,营造一些气氛,这是很正常的沟通、互动过程。这时,需要摄像机能够一直追踪演讲者,在同时有多人互动的时候,摄像机要能够识别到不同的人。
据索尼(中国)电子系统本部影像方案市场部高级总监李暾说:过去,人物跟踪和构图是用人工的方式去实现的,现在索尼智能构图旗舰PTZ摄像机能够实现完全用AI实现精准的跟踪,识别具体的人,而且还可以实现更多的互动,大大提升了效率。因此,在很多应用场景下,核心是能够提升效率的AI技术。
在8月20日的BIRTV2024主题报告会上,索尼BRC-AM7新一代智能构图旗舰PTZ摄像机入选BIRTV 2024推荐项目。
索尼BRC-AM7新一代智能构图旗舰PTZ摄像机获奖
BIRTV2024给出的推荐理由是:索尼BRC-AM7新一代智能构图旗舰PTZ摄像机,体积小、重量轻,搭载新一代AI智能构图功能,新一代电机使其可以准确自动跟踪运动目标,实现一人控多机,也能提供出色的兼容性和色彩表现。此外,BRC-AM7轻便的外型可以让使用者拥有更大的自由度,并且灵活的安装方式也能获得更多的拍摄角度。这款新型摄像机为广播、现场活动、体育节目和会议的高质量视频拍摄打造了更加简化的工作流程,方便从业者的日常工作。
索尼(中国)电子系统本部影像方案市场部高级总监李暾说:智能构图PTZ摄像机里面有一些AI的智能模块,通过对人体的一些特征进行识别,识别之后可以固定地进行追踪。同时我们还有一些新的变焦功能,可快速跟踪焦点的变化。
索尼BRC-AM7新一代智能构图旗舰PTZ摄像机的实际使用效果怎样?它在准确自动跟踪运动目标的抗干扰能力怎样?
在BIRTV展会第一天下午,索尼展台专门安排了体验环节。
第一个体验项目是拍摄模拟一位摇滚歌手原地不断摇晃的表演过程,BRC-AM7不仅在画面中间获得清晰的人脸图像,背景也稳定显示,如同观众现场直视效果。而另一台同样具备AI构图功能的比较摄影机,虽然也能获得清晰的人脸图像,但人脸偶尔会脱离中心位置甚至脱离画面,背景则出现摇摆、模糊,导致画面无法使用。
第二个体验项目是,拍摄过程中,有一个干扰人走过被跟踪拍摄对象,并且两人还一前一后跟着绕圈,BRC-AM7不仅没有被干扰而丢失跟踪对象,当干扰人离开拍摄范围后,BRC-AM7依然准确跟踪被拍摄对象并获取清晰的人脸图像。
这一切,完全验证了索尼BRC-AM7新一代智能构图旗舰PTZ摄像机入选BIRTV 2024推荐项目以及BIRTV2024给出的推荐理由。索尼BRC-AM7新一代智能构图旗舰PTZ摄像机获奖,理所当然。
AI自动构图是交给机器完成的,在影视拍摄中,场景多变且复杂,如果现场有两台、多台摄像机时,摄像机相互之间怎样配合和合作?
索尼(中国)影像方案市场部专业摄像机及影像分析产品经理温嘉玮补充说:针对多机位配合的场景,由于用户的需求不同,可能需要跟踪同一个对象,也有可能需要跟踪不同的对象,目前的AI还无法判断是哪种需求,现在有一个比较简单的解决方法,我们在UI上做一个很简单的操作,只要在屏幕上点选你需要跟踪的人就可以了。切换简单,锁定准确。未来,我们会持续研发,对AI能力做更多优化。
目前的人工智能,除了强大的硬件处理能力外,更重要的就是能不断升级的软件了。那么,未来,深度学习、自动化程度更高的智能拍摄解决方案等方面,索尼BRC-AM7在未来有哪些升级呢?是否有具体的研发方向或时间表?
索尼全球专业影像事业部总经理関口浩表示:AI技术的升级是一个非常有价值的部分,我们会持续倾听客户的声音,会根据实际的用户需求持续进行。
索尼(中国)影像方案市场部专业摄影机及影像分析产品部总监谭永鸿说:AM7不是一个最终的产品形态,AI智能构图功能也不会止步于此,我们会继续进行优化升级。关于AI智能构图的部分,目前是能跟踪一个人,我们9月将率先针对SRG-A40/A12发布一个新的固件升级,可以实现最多同时跟踪8个人,适合多人互动的场景。
索尼全球专业影像事业部部长田渕達人表示:AI是我们很重要的方向,我们会不断的改善,期待未来能够覆盖更多的应用场景。
附BRC-AM7产品主要特点:
1.0型Exmor RS CMOS,5K超采样4K 60P视频拍摄,4K 120P录制
75°广角,20倍变焦(等效24~480mm光学变焦),30倍/40倍清晰影像缩放
支持HDMI、12-SDI、3G-SDI、TC IN、GENLOCK、SFP+光纤等专业接口,同时支持视频流格式(RTSP、SRT、NDI)
支持RCP控制,VISCA协议控制,CGI网页控制,支持四色Tally
内置AI智能构图,支持PTZ轨迹循迹功能
体积更小,重量更轻
支持机内自定义LUT,内置多种场景文件,与索尼讯道/电影机一致的色彩科学
内置无级可变电子ND滤镜
0.004°/s~180°/s的运动速度,低于NC25的噪音
1、 核心信息:
高画质、AI智能构图、强大的系统兼容性(多设备协作)。
2、 应用领域
政府、国企/私企的会议跟踪需求。
影视综艺/演出活动/体育赛事、电视台/融媒体的现场节目制作需求。
虚拟制作的虚拟拍摄和制作需求。
更多精彩