点击关注变芯空间,置顶公众号
![]()
2018世界杯比赛 “带球轨迹分析”- 拖着彗星的行动轨迹
新华智云"MAGIC"生成

新华智云媒体大脑2.0"MAGIC":媒体大脑2.0“MAGIC”智能生产平台,“MGC”(机器生产内容)和“AI”(人工智能)的组合。
新华智云(新华社和阿里巴巴合资)团队认为,AI时代内容生产基础设施将以大数据处理、智能算法和人机协作技术为核心,包括四大智能系统:
智能数据工坊,即大数据处理平台,将新闻内容数据化,对大数据进行清晰和结构化,方便后续的数据抓取。
智能媒资平台,把结构化的数据进行颗粒化,切分成小单元存储起来,形成资源平台。以世界杯为例,一场球赛的实况视频内容,将被切分为进球、传球、带球过人等多组镜头,进行标签化存储。
智能生产引擎,主要功能是从媒资库调取内容、渲染、配音合成出一条视频内容,根据内容生产者的主题需求,将涉及到的所有关键要素,从智能媒资平台中抽取出来,按照动因关系、调度逻辑等,进行顺序排列。
基于k8s,智能生产功能的服务性和扩展性从1.0到2.0有了不小的提升,目前最大可调度节点有2千多个,形象得来说就是,一条3分钟的短视频,自动生成时间不会超过20秒,且MAGIC平台目前能同时生产1万条作品。
智能主题集市,更前端的一项产品,供内容生产者下任务、定制短视频。据徐常亮介绍,借助阿里云的弹性支持,媒体大脑从1.0到2.0算力扩大了几个数量级,当初只能处理10路视频,现在可同时处理2千个视频。
新华智云团队通过不断的训练机器进行视频追踪、深度学习、视频工程的二维三维映射,以及知识图谱的构建,目前MAGIC在命名实体识别(NER)的时候,CRF(随机场算法)做到93-94%准确率、基于深度学习的融合算法做到97%的准确率。也正是基于这些技术实现,才能够能够准确识别球队、球员、射门等动作和指令,当你在前端网页输入“梅西进球集锦”、“巴西队点球破门”字样,系统才能准确的从媒资库中抓取对应信息,按照一定顺序将片段化的数据合成为一条渲染过的、有配乐、有解说的短视频,而且产出速度足够快、可承载并行运算量足够大。

杜兰特拿到总决赛MVP。几乎同一时间,一支名为《杜兰特11年精彩回顾》的视频在腾讯视频上线。不同于以往媒体提前精心剪辑备稿,这支视频当场实时完成,且全程几乎没有人工参与。
《杜兰特11年精彩回顾》也并不是“篮球赛AI剪辑师”第一次出手。NBA2018赛季总决赛比赛前,腾讯体育在社区发起“有AI说出来, 票选你最欣赏的巨星特质”球迷互动投票。IBM AI视觉大脑以投票结果的关键词特质剪辑出7位巨星的比赛视频,从决赛日第一场开始播放,已经为亿万观众呈现相关内容。
杜兰特11年精彩回顾
仔细观看这条视频,不仅完整度高,而且过渡自然流畅,中间还穿插了多处文字评论及图片过渡,其剪辑效果并不亚于普通的视频剪辑师。你可能很难相信,这样一条视频是“Produced by AI ”。
但事实是,“IBM AI Vision视觉大脑”确实将其变成了现实,人工智能做腾讯NBA视频分分钟上线,将成为新常态。
《杜兰特11年精彩回顾》只是“IBMAI Vision视觉大脑”与腾讯体育合作的一小部分。
此次,IBM携手腾讯体育跨界合作,最直接的产品是“篮球赛AI剪辑师”。这款产品可以帮助腾讯体育在比赛直播过程中,实时完成视频的识别和剪切工作,比赛结束20秒之内就能按照人的灵感和要求组合成片。事实上,这也是中国首次将人工智能技术运用到体育视频内容编辑工作中。
来源:
千里之行始于“足”下

相关精彩:
送给父亲的礼物“千里之行始于足下”!
“水中神器”!助力“旱鸭子”
教育因“您”而“变”!

