习近平总书记在中央政治局第十二次集体学习时提出媒体需要探索将人工智能运用在新闻采集、生产、分发、接收、反馈中,全面提高舆论引导能力。"媒体大脑"的发布上线,正是对习总书记这一指示精神的贯彻落实。
"媒体大脑"的诞生和进化
过去几年,人工智能在内容分发、算法推荐等领域有了大量应用,但生产环节仍相对传统,缺少核心技术支撑和变革。2017年12月26日,中国第一个媒体人工智能平台"媒体大脑"对外发布,旨在用智能技术赋能媒体,探索和实践个性化生产、可视化呈现、互动化传播。"媒体大脑"由新华智云科技有限公司自主研发完成,新华智云是由新华社和阿里巴巴合资成立的一家媒体人工智能科技公司。
随着社交平台崛起和网速升级,内容消费尤其是视频消费已成为现代人大众化、高频次的刚需。然而内容"红海"竞争日益激烈,传统媒体机构面临用户流失和影响力下降的挑战。对媒体机构来说如何推进媒体融合,快速、高产、高效地提供优质内容吸引用户,做大做强影响力,对技术的需求日益凸显。
为应对媒体需求,2018年12月27日,"媒体大脑"发布新版本"MAGIC短视频智能生产平台"(magic.shuwen.com),MAGIC的名字由MGC(机器生产内容)和AI(人工智能)组成,平台集纳了自然语言处理、计算机视觉、音频语义理解等多项人工智能技术,将人工智能引入新闻全链路,着力采集、生产、分发端创新,帮助用户高效完成短视频内容创作。目前MAGIC平台已在2018世界杯、亚运会、世界人工智能大会、进博会等重大活动的内容生产中取得了一定成绩,正在为众多媒体机构的日常内容生产提供技术支持和服务。
新闻即数据,数据即新闻:一切业务数据化,一切数据业务化
海量新闻资源是智媒时代最有价值的数据。数据即信息内容,信息内容不断地被拆解、细分,接近无穷小的单位,机器智能挖掘分析,让信息产生价值。信息需要标记,只有可标记,才能被检索,只有可检索,信息才能被重新组织和组合,这一新的有机调用形式会呈现指数级增长。
新闻内容以文本、图片、视频为主,具有非结构化的特点,难以被机器所理解,无法满足内容生产者高效使用数据的需求。此外,不同媒介形态对信息的压缩程度不同,在信息量上文本<图片<视频,而在结构化的难度上视频>图片>文本,举例而言,用户在计算机上可以对一篇文章通过对关键词快速检索,而视频必须看完才能知道内容。
MAGIC平台结合对媒体场景的深度理解,利用大数据处理、人脸识别、语音识别等智能技术,对非结构化的文本、图片、视频等媒资数据进行处理,建立高度智能化、标签化的媒资平台。以MAGIC2018世界杯时生产的《圆满!本届世界杯1-23号球员都进球了》视频为例,视频将世界杯1号到23号球员的进球片段进行聚合,制作这样一个视频,传统模式下编辑至少要花费数小时寻找素材剪辑,而在MAGIC平台只需鼠标几步搜索整合包装即可完成。
用新闻算法计算新闻数据:"AI洞见"理解新闻场景
数据是算法发挥价值的基础原料,有了数据后需要更多"智力"对原材料进行加工。为此媒体大脑推出"AI洞见"系列方案,用新闻算法计算新闻数据。
"AI洞见"的实践源自2018世界杯,初衷是利用人工智能技术智能地理解内容,实时捕捉球场上的精彩瞬间,为受众提供有人工智能增强现实的实时回放体验。在世界杯期间,"AI洞见"近实时全自动识别并提取射门镜头,通过可视化效果剖析球场态势,大幅提高球场高光视频的制作效率和质量。
在球场上最具新闻价值和时效性的的高光时刻是射门瞬间,而在其他内容领域具有新闻性的内容又各有不同,比如突发新闻中是爆炸或者火灾抢救现场,会议新闻中是发言人的金句时刻。随着MAGIC平台应用场景的增加,在横向上"AI洞见"以体育领域为基础,将相关技术迁移、扩展至突发新闻、会议新闻、时尚娱乐等多个场景;在纵向上,"AI洞见"优化特定场景下模型的学习能力。通过对视觉、声音、文字等多维度分析,帮助内容生产者更好地获取、处理新闻资源,更快发现新闻角度和线索。
内容生产流水线:"好技术+好内容"模式
MAGIC平台通过智能化技术将生产流水线引入内容生产行业,力争成为智能时代内容行业的基础设施,推动媒体机构内容生产供给侧改革。目前平台通过人机结合和机器自动化进行短视频生产,覆盖体育、金融、时事、社会、数据可视化、娱乐、时尚等众多领域。以下是MAGIC平台部分应用案例。
体育高光视频。2018年6月13日,MAGIC平台上线内测,世界杯期间共生产世界杯短视频37581条,实现全网1.2亿次播放。赛事期间,MAGIC平台通过接入电视直播流信号,对比赛视频实时标注,自动追踪运动员和足球每秒25次。通过计算机视觉、自然语言分析等多模态结合,在比赛中自动识别包括进球、犯规等关键动作,封装成可供移动端分发的视频。
MAGIC平台生产的最快进球视频《俄罗斯2∶0领先埃及》耗时6秒完成,6秒内机器完成了对进球自动识别、片段剪切和封面封尾剪辑,并对优酷等多个平台进行推送,成为全网最快进球视频。
此外,"AI洞见"实时识别高光时刻中人眼难以实时处理标注的信息点,在射门瞬间判断、场上攻防判断、球和球员的检测跟踪、画面配准、2D坐标构建、跑动轨迹生成等方面有了较成熟的应用,能够为用户提供近实时、多维度的高光回放体验。
MAGIC平台在体育领域目前覆盖足球、篮球等团队协作性强的大球项目,并在进一步扩大应用范围。
会议视频报道。大型会议活动一般设置多个分论坛,记者分身乏术难以全部覆盖。MAGIC平台结合会议报道场景,通过接入大会实时直播流信号,对大会镜头画面、现场声音、发言人话术规律等进行分析和视频封装,提供智能化的会议报道解决方案。MAGIC编辑器的语音转字幕功能,允许一键添加字幕,编辑只需做简单的审核,节约了同期声转写的时间。
2018世界人工智能大会期间,MAGIC平台通过人机协作,4名编辑覆盖大会38场论坛,累计处理超过100小时的视频素材,开幕会首日生产40条视频新闻,两条稿件相隔不到1分钟,生产内容覆盖演讲高光时刻和行业解读数据分析。
MAGIC平台作为世界人工智能大会的AI新闻官24小时在线,秒级处理大量生成会议视频。
第六届中国新兴媒体产业融合发展大会上,MAGIC平台现场实时演示短视频智能生产过程,3个小时生产186条大会会议短视频,其中97条机器生产,89条为人机协作生产。
突发新闻和暖新闻。MAGIC平台通过深度学习,对媒资进行分类和标签化处理,判断新闻类别,对突发事件等具有高时效性的媒资高亮,提醒用户优先处理;同时对长视频片段中的突发画面进行定位,方便用户进行快速审阅编辑;对正能量新闻、暖新闻进行机器识别分析和判断。
以新华社现场云全国服务平台为例,现场云平台联合3100多家媒体,平台内逾70%的现场新闻报道有视频直播流,短视频占比超过30%,图片占比超过60%,其中既有高时效性的突发新闻,也有正能量、打动人心的暖新闻,MAGIC平台对媒资进行高亮和推荐,提升现场云编辑处理新闻的效率。
数据可视化新闻。数据可视化是数据新闻的重要形式之一,尤其是带有动态效果的可视化视频,相比静态图表提供了更丰富的数据维度和更强的表现力。然而数据可视化视频门槛比较高,往往需要设计或者代码知识。MAGIC平台为内容生产者提供了专业的数据可视化模板,涵盖饼图、柱状图、折线图等多种图表形态,搭配流畅的动画效果,零基础编辑只需几步就能制作出一个数据可视化视频。
在2019地方两会期间,山东章丘新闻中心的编辑利用MAGIC平台简单快速生成了关于本地的数据新闻,取得了良好的传播效果。
金融短视频。金融业务本身具有大量结构化数据,MAGIC平台通过对金融数据进行提炼,将相关金融业务能力以短视频为载体呈现和传播。目前MAGIC平台实时监测3500多支股票涨幅变化情况,覆盖盘前、盘中、盘后数据分析。如果某支股票5分钟内行情波动超过5%将自动触发生产一条该股行情的可视化短视频。基于MAGIC平台底层的极速渲染引擎和可视化模板,实现金融短视频的海量生产,秒级生成,受众喜欢,让金融数据价值发挥到最大。
对话机器人。为满足用户获取内容的个性化需求,强化交互性,MAGIC平台推出对话机器人服务,用户可以像与人聊天一样,与机器进行问答,从而获取最感兴趣的内容信息。
2018世界杯期间MAGIC推出"MAGIC进球机器人"入驻新华社公众号,为用户提供世界杯进球视频,用户点击菜单栏的"进球机器人",提问如"我想看梅西的最新进球",机器人将自动回复相关视频。亚运会期间,对话机器人升级为微信小程序"金牌MAGIC",结合新华社前方体育记者照片和实时金牌榜,提供最全金牌推送信息。
"媒体大脑"MAGIC平台是人工智能技术首次在媒体领域集成化、产品化、商业化的应用,为个性化生产、可视化呈现、互动化传播开辟了新渠道。同时,MAGIC平台还在不断升级迭代,在算法、数据、工程、产品、设计、内容、运营等多个部门协同下,填补多项技术空白。在智媒时代,无论是媒体机构还是互联网公司都缺少成熟的经验去借鉴,正因如此我们才有空间去开拓创新。
随着内容行业竞争进入下半场,将更多智能化技术引入内容生产已是大势所趋。许多人问人工智能是否会取代人类记者,我们认为答案是否定的。MAGIC平台的本质是人的智慧和机器的智能相结合,形成一种相互协作的关系,而不是相互替代的关系。
我们通过人工智能技术将更多创新的手段和工具引入内容生产,进行流程再塑造,帮助媒体融合转型为智媒,帮助媒体打造核心竞争力,持续产出优质内容,提升影响力和收获经济效益。
我们相信,只有加强AI技术与内容行业的创新融合,才能迎来行业更持久的共振。
作者傅丕毅系新华智云科技有限公司CEO
商艳青系新华智云科技有限公司副总裁
张宁宁系新华智云科技有限公司高级运营经理
沒有留言:
張貼留言