2017年10月24日
By 马克Alamares 首席执行官Mobeon
专题文章

人工智能将很快给直播视频制作带来巨大变化

人工智能(AI), 深度学习, 自然语言处理将是流媒体的下一个变革技术. 它们都将在制作的各个阶段对流媒体产生影响, 从内容创作到消费. 随着人工智能在许多不同行业的扩散, 毫无疑问，在不久的将来，它将在更大范围内被大量用于直播.

在这一领域取得进展的一些公司和技术包括谷歌云视频智能, Conviva的视频AI架构, 英伟达国防后勤局, IBM ' s的华生技术. 目前，所有这些技术都在不同程度上部署了人工智能，尤其是在云计算领域，但我们很快就会看到人工智能进入流媒体的其他方面.

人工智能可以帮助取代幕后的生产人员，甚至可以执行涉及劳动密集型内容/数据管理的平凡而耗时的任务. 目前, 人工智能被用于观众指标, 网络和技术故障排除, 广告服务, 但还有其他潜在的用途几乎尚未开发.

智能相机跟踪和视频帧组成

虽然目前有几个运动跟踪相机系统允许自动跟踪移动的对象在相机前面, 它们都需要生产者在物体上放置发射器或传感器. 人工智能将能够追踪扬声器, 运动员, 或娱乐，而不需要任何类型的额外硬件或传感器. 深度学习算法将分析视频并跟踪人们进行不同的活动, 无论是在舞台上还是在其他环境中, 同时在相机内保持完美的构图. 即使是现在, 这项技术使无人机能够跟踪在赛场上冲刺的运动员，并以毫不留情的精度跟踪目标.

此外，创造性视觉叙事与数学之间存在直接关联. 视频成像的关键组成部分——帧率, 焦距, 孔径, 而构图——则是基于比率，并且至少需要对其背后的数学有基本的了解才能有效地使用它们.

黄金分割(比例, 被艺术家们奉为千年珍宝, 架构师, 科学家也一样, 其中两个数的比率等于它们的和与两个量中较大的数的比率)可以编程到基于深度学习的视觉感知算法中. 因此, 人工智能摄像头可以进行优化，以捕捉人眼最美观的视频图像, 传统上由摄像师完成的任务. 在大多数情况下，人工智能最终将取代对摄像师的需求. 除了, 人工智能将被编程为以黄金比例和视觉层次原则为基础来跟踪对象.

实时视频切换

深度学习算法正在使编辑和视频制作过程自动化, 并将帮助将人工智能引入实时视频切换. 智能软件会根据流媒体的内容，通过面部识别来选择最佳的镜头或角度, 情感, 手势, 服装, body, 颜色识别, 以及其他成像数据和线索. 程序将确定流的每一帧中有什么内容，并确定它是否是宽的, 媒介, 或者特写角度, 以及选择它的主题或人物. 软件会分析音频, video, 和其他方面的流和切换一个完整的事件或显示通过识别面孔, 演讲, 运动, 或者基于许多其他因素的事件.

这些自动混合功能将包括在未来的视频切换，以允许一个完全的人工智能切换生产. 它最终将取代现场活动技术总监的角色.

基于计算机视觉的视频切换器可以在嵌入式系统或使用现有硬件的本地设备上独立工作. 如果需要，摄像头甚至可以利用联网的云服务器.

为实时图形、动画或CG角色创建自动动作和触发器

神经网络可以通过面部识别来识别目标物体或人, 哪些可以触发生产事件，例如在会议上为演示者生成较低的三分之一. 面部识别还可以生成球场上特定球员的图形统计数据, 甚至允许将CG角色的控制插入流中.

认知技术将在所有领域盛行——体育运动, 的电子竞技, 企业沟通, 教育, 现场活动. 这将集成数据驱动的资产和根据特定操作变化的可视化, 次, 位置, 或者与流相关的动态数据.

音频分析

自然语言处理(NLP)允许自动现场转录, 翻译, 解释, 字幕, 以及用于会议的音频描述, 讲座, 或事件. 这对于需要为市政厅提供实时字幕的跨国公司非常有用, 产品发布, 或以多种语言为全球受众提供一般通信.

用于数据管理的视频分析和元数据提取

随着公司越来越多地涉足流媒体, 视频产生的数据量正呈指数级增长. 从这些数据中获得的信息可以被利用，而不仅仅是人工提取的信息.

人工智能将通过生成描述性标签来解释流内容并提取元数据, 类别, 自动总结. 这将允许更智能的分析, 内容的见解, 更好的内容管理, 为通过定向广告实现视频货币化的有效方法铺平道路.

监测社交媒体情绪和汽车分享

社交媒体监控允许品牌衡量在线对话和情绪分析, 实时跟踪用户反应. 这允许对内容进行即时定制或调整，以适应观众所陈述的偏好. 自然语言算法将从流中提取数据并捕获主要主题和关键字, 然后编译截图, 视频脚本, 并突出可用于营销目的或自动上传到社交媒体的片段.

一旦能够充分释放人工智能的潜力，人工智能将成为流媒体行业公司利用的强大工具. 我们刚刚开始触及人工智能在智能流媒体方面的全部力量. 上面的例子只是人工智能如何通过使直播内容更吸引人、更高效来增强直播的一个小例子, 同时从生产到交付都可以节省成本. 人工智能将推动内容所有者, 媒体生产商, 广告客户也进入了一种新的创造性思维，即制作聪明而引人注目的内容.

[本文发表于2017年10月号。 流媒体杂志 “为自主流媒体做好准备。."]