企业官网建设流程全解析

网站如何做站内站,网站建设公司的服务,o2o商城分销网站开发,永久免费网站建设在今年的IEEE冬季计算机视觉应用会议上#xff0c;某中心的视频服务团队展示了两篇论文。一篇是关于体育场配准#xff0c;即理解体育视频中描绘物体之间的空间关系。另一篇是关于片头与剧情回顾检测#xff0c;即自动识别电视节目开头包含片头#xff08;如演职员表、主题…在今年的IEEE冬季计算机视觉应用会议上某中心的视频服务团队展示了两篇论文。一篇是关于体育场配准即理解体育视频中描绘物体之间的空间关系。另一篇是关于片头与剧情回顾检测即自动识别电视节目开头包含片头如演职员表、主题音乐和剧情回顾情节前情提要的片段以便观众在需要时跳过这些内容。体育场配准体育场配准涉及将视频图像映射到场地的地形模型上以增强视频流的观看体验。它是在美式足球转播中显示虚拟首攻线或在游泳转播中显示虚拟世界纪录线的技术基础。通常体育场配准需要配备传感器并对准场地参考点的现场摄像机。将传感器输出与摄像机视频结合可以产生非常精确的场地配准。我们解决的问题是在没有仪器设备的情况下仅使用能够进行平移、倾斜和变焦运动的单摄像头视频进行体育场配准。这可能为小联盟或业余体育赛事、冷门体育项目的转播甚至大型体育赛事中未配备仪器的辅助摄像机信号增添前沿图形效果。以往关于此问题的工作仅使用少数关键点通常是场地上划线交叉点对场地地形进行建模。而我们则使用密集的关键点网格对场地进行建模。使用根据我们建模方案标注的视频数据我们训练了一个神经网络将图像像素与场地模型中的特定关键点关联起来。密集网格提高了我们配准的精度前提是我们能正确识别关键点。当然不在场线交叉点上的关键点更难识别。因此我们使用第二个信息来源来改进我们的映射。这是一组密集的场地特征表示场地上标准线之间以及其他可识别区域之间的距离。例如在关键点表示绝对场地位置的同时密集特征集表示相对于场地重复视觉元素的相对位置。因此它是一个互补的特征集改善了视频帧与体育场之间的映射。然而使用密集特征来验证关键点会增加计算开销而我们的系统需要实时工作。因此我们的网络架构包含了几个旨在减少这种开销的特性。首先它是一个多任务网络从输入数据中它产生一个单一的向量表示该表示同时传递给关键点估计器和密集特征提取器。其次网络仅在认为关键点估计可能不准确时才使用密集特征进行验证。具体来说给定视频帧的初始关键点估计网络对关键点进行多次不同采样并确定它们是否彼此对齐。如果不对齐则使用密集特征来优化其估计。通过结合这些技术我们能够使体育场配准系统实时工作。在测试中我们将其与多个先进的体育场配准系统在五个数据集上进行了比较足球、美式足球、冰球、篮球和网球。在不同体育项目上我们系统的性能从与基线相当到远远优于基线。例如对于美式足球根据标准版本的交并比度量我们的系统比表现最佳的基线准确2.5倍。片头与剧情回顾检测某中心视频服务的热门节目例如《了不起的麦瑟尔夫人》的粉丝熟悉跳过每集开头片头通常包含演职员表和主题音乐和剧情回顾剧情快速摘要的选项。然而对于现有内容提供跳过片头和回顾的选项需要手动编码。我们希望通过对片头和剧情回顾的自动检测将此选项扩展到该中心视频服务的其他节目中。片头和剧情回顾都具有使其可被检测的显著特征。片头往往涉及屏幕上叠加的文字演职员表背景通常有较长的音乐表演而剧情回顾通常涉及场景之间异常快速的剪辑。通常它们也由文字引入。我们的检测器是一个神经网络其架构选择旨在最大化对片头和回顾中这些元素的响应。与需要整个视频系列来查找片头和回顾时间戳的替代方法不同我们的方法可以独立处理每一集这使其更加实用。在我们的系统中给定的视频帧首先传递到卷积神经网络。CNN被设计为逐步处理输入图像对连续的像素块应用相同的过滤器。因此无论文本出现在屏幕的哪个区域它都能学会识别文本。我们还将输入的音频传递给同一个CNN该网络学习音频和视频的融合表示。CNN的输出然后传递到双向长短期记忆网络。Bi-LSTM是一种按顺序处理序列输入的神经网络因此每个输出都反映了其之前的输入和输出。Bi-LSTM对同一序列同时进行前向和后向处理。这使得我们的网络能够识别更长期的依赖关系例如特定视频序列中的剪辑速率。最后LSTM的输出传递到条件随机场该场本质上执行曲线平滑。视频段内更平滑的轮廓使得段与段例如片头和剧情回顾之间或它们与剧集新内容之间的边界识别更清晰。在测试中我们将系统的性能与使用相同CNN但采用不同方法处理CNN输出的基线进行了比较单层LSTM两层LSTMBi-LSTM以及使用维特比解码而非CRF进行平滑的Bi-LSTM。我们发现我们的系统显著优于所有四个基线。更多精彩内容 请关注我的个人公众号 公众号办公AI智能小助手或者 我的个人博客 https://blog.qife122.com/对网络安全、黑客技术感兴趣的朋友可以关注我的安全公众号网络安全技术点滴分享