猫晚的这些黑科技,将颠覆传统娱乐行业
在天猫双十一晚会(简称“猫晚”)开始前,天猫放出消息,今年,他们要办一场“向世界展示中国互联网技术肌肉的晚会”。
究竟,今年的猫晚上,阿里将会秀出怎样的“技术肌肉”?《天下网商》记者去探了探他们的口风。
晚会技术总负责人崔西表示:“我们是用十年二十年后的技术在做这场晚会,这可能对传统的娱乐行业是一场颠覆。”
AR+VR,助你在家中和女神合影
“今年,如果明星们一如既往地待在电视机里,那就太没有新意了。”“能不能让电视机里的明星走下舞台,甚至是进到每一个观众的家里去,和观众实现零距离互动呢?”晚会策划团队开完脑洞,崔西和技术团队有的忙了,不过“把明星送到观众家里去”并没有难住他们。
崔西透露,“我们首次把真人三维建模和动作捕捉技术运用到了国内的手机平台,把明星的动作甚至表情细节都进行了逼真的还原。同时,将AR技术与VR全景技术结合,实现了将明星通过AR技术投射到真实场景,达到和观众面对面、多角度、零距离接触的效果。”
崔西说,晚会现场,当主持人提示“明星到你家”时,观众只需打开手机淘宝,点一下按钮,通过手机摄像头找到家中任何一个平面,就可以将真人大小的明星接到家里,还能够与其互动,比如,合影、比心。
除了“把明星送到观众家里去”,崔西及其团队还做到了“把观众带到明星家里去”。
他们开发出了“任意门”,当“任意门”出现在家里后,观众首先可以看到门内的大张伟或者郑恺,进而还可以跟随大张伟或者郑恺,走进他的家,进行参观。
任意门截图
可是,今晚将被送到观众家的明星会是谁?崔西选择保持神秘,“是很多人心中的女神范冰冰、卢靖姗……非常值得期待!”
动动嘴皮子就能晚会现场追星
除了能看到明星,与明星进行跨屏互动,猫晚还能怎么玩?
为了让场外观众更好参与体验,天猫晚会技术团队在晚会现场开辟了“虚拟观众席位”,欲让观众有“仿若置身晚会现场”般的体验。
虚拟观众席示意图
“观众打开手机淘宝就可以随时看晚会直播,还能享受到由CG动画+AR虚拟技术实现的专属开幕式收看视角以及真实的入场仪式。”天猫晚会技术负责人崔西告诉《天下网商》。
技术团队在晚会现场布置了6个机位。
除了观看舞台上的节目,观众还能到舞台正前方、明星化妆间、明星走道等地方去“捕捉idol”。而这一切,除了通过手动点击切换之外,观众还能通过与AliGenie进行语音交互的方式,让它主动切换到自己想要看的机位。“比如说,你的idol吴亦凡在远处出现,你可以直接说,‘我要去看吴亦凡’,它就会自动切换到距离最近角度最佳的那个机位。”崔西说。
AliGenie是阿里巴巴自主研发的第一代中文人机交流系统,生活在云端。但此次双十一晚会上,它除了被嵌入直播平台系统中,以虚拟的形态出现;它还将“幻化成形”,以实体的形象出现在大家面前。
天猫精灵机器人客串主持人
阿里巴巴人工智能实验室专为双十一打造了一个“天猫精灵机器人”。
天猫精灵机器人的大脑是AliGenie,肢体由一家专业的机器人制造公司制作。据悉,此次,它将在双十一晚会上客串助理主持人,不仅能听会说,还能看会动。
“天猫精灵机器人身高1米左右,它不仅能够通过识别用户的声纹,来分辨对方性别以及对方是否为自己的主人,也可以通过它的“大眼睛”——猫头上的摄像头来识别对方身份。”天猫精灵产品经理梓沄告诉《天下网商》。
“它还可以根据对方的姿态、说话语气来预期对方的行为、口令,并做出反馈,比如心心眼,晕晕表情等。”梓沄说。
此外,天猫精灵机器人的四肢还装有不同数量的舵机,可以满足基本的关节驱动,能够与人进行基本的肢体互动。
据悉,天猫精灵智能音箱也将出现在猫晚现场,并且它还要把自己送出去。这听起来似乎是一件蛮“诡异”的事。事情真相究竟如何?可能就得从今晚7点40分开始的猫晚中去寻找答案了。
置身于手机淘宝直播系统中的AliGenie还有“购物助手”的功能。
“比如,你说‘给我推荐一款最便宜的羽绒服’,它就会通过算法给你推荐一款最适合你的羽绒服。”崔西说。
在崔西看来,这颠覆了以前经过图文搜索进行选择的一个购物链路,直接由智能机器人来推荐单品。所有的交互都是通过图形化的、对话式的方式出现的,整个交互会更加自然,交互体验也会变得更好。
史上地域跨度最大的互动导播
“我们的晚会定位为向世界展示我们中国互联网企业的技术能力。今年,我们不仅要解决晚会怎么样更好玩的问题,还要解决史上地域跨度最大的全程实时互动导播挑战。”崔西说。
为了“向世界展示中国互联网的技术肌肉”,今年的猫晚除了会在在北京卫视、浙江卫视、深圳卫视三台联播,在手机淘宝和优酷上直播,还会在全球最大的视频网站YouTube上同步直播。
“我们做全平台直播,直播信号会从三个台跟几个直播频道去推出,各个平台的延迟会有差异。因此,可能A城市延迟一秒,B城市延迟十秒。而我们的互联网导播根据节目流程发送一个互动指令,告诉所有手机淘宝用户可以进行某个互动环节时,可能A城市和B城市的用户还没有在电视上看到这个互动环节,相应的互动内容就已经显现在手机上了。”崔西说。
为了规避这个问题,崔西及其团队花了半年时间,首创了远程同步码技术,实现手机上的互动与电视上的内容能够保持同步。
崔西表示,用户在观看晚会时,只要摇一摇手机淘宝,就会自动监测电视信号中是否存在同步码,一旦识别到特定互动环节对应的同步码,手机淘宝将会自动打开对应的互动内容。简单理解就是,若A城市节目内容延迟1秒,A城市用户手机上的互动也会相应地延迟1秒再出现。
“为了保障用户权益,像‘整点红包雨’等互动环节,采取的则是整点概念。”崔西补充道。
编辑丨翁菲
文/天下网商记者 孙茜茜