案例|深度学习×综艺直播秀,还引起了尖叫狂潮?

原创
2018/08/27 23:26
阅读数 49

继上一次充当控烟侠后,大屏幕侠备受赞誉

【案例】You Smoke, You Up!西二旗“控烟侠”搞事情

最近它竟然跑进综艺节目悄悄地搞事,

并且所到之处,围观小伙伴们都疯狂尖叫!

640?wx_fmt=jpeg


——原来它加盟央视的《超级乐队》栏目,让台下看演出的观众也成为全场焦点


640?wx_fmt=gif


和上次不同,这次大屏幕侠识别现场观众的表情,将笑容热力值排名,pick前10位笑容灿烂的小伙伴上榜


640?wx_fmt=jpeg


除了现场的小伙伴,上传自拍照的场外观众,也在大屏幕侠的“捕捉”范围内,只要摇滚手势足够标准,也可以被选中~


大屏幕侠背后的“黑科技”

那么,大屏幕侠这次神一般的操作,又是借助啥AI技术呢?

跟随它的工作原理逐一来看~

亮点1 大屏幕侠使用人脸检测技术,准确定位观众人群。人脸检测是一种在任意数字图像中找到人脸的位置和大小的AI技术。AI智能系统检测到人脸后,去掉背景和无关区域,得到人脸边界框确认面部区域。比如这次项目就根据裁剪算法,在检测到人脸后,根据五官位置计算合适的裁剪区域,使得屏幕上头像尺寸保持一致。

应用方面,目前很多智能数码相机都用人脸检测实现自动对焦;商场根据人脸检测统计客流量;未来电脑显示屏根据人脸检测结果调节屏幕亮度节能等等。


640?wx_fmt=png


亮点2 在人脸检测技术基础上,大屏幕侠使用表情识别技术定位笑脸。表情识别技术从给定的静态图像或动态视频序列中,分离出特定的表情状态 ,从而确定被识别对象的心理情绪,实现计算机对人脸表情的理解与识别。

目前,微笑识别现在已广泛用于数码相机的微笑拍摄、智能手机的微笑或表情开锁。表情识别也用于检测司机的情绪及精神状态,并做出相应的报警。


640?wx_fmt=gif


亮点3 这次大屏幕侠也使用了手势识别技术,和上次现场识别手势不同,这次是让场外观众摆出经典摇滚手势,经系统检测标准程度最高的观众将入围榜单。这样做能够节省人工筛选的时间,且增强互动和趣味性。

目前手势识别技术较多应用于AR/VR行业,未来也将在智能驾驶、智能家居行业有更多的应用场景。如果手势识别技术加持驾驶系统,驾驶员可使用手势来控制汽车内部的各种功能,一定程度上提高驾驶的安全性。而根据定制手势可以控制家电开关,甚至在黑暗环境中也可以进行,实现智能控制。


640?wx_fmt=jpeg

(附场外参加活动方式:百度APP搜索“超级乐队”→CCTV超级乐队熊掌号,点击“拍照ROCK”→如图示,点击“上传图片”,即可显示出评分→高分照片有机会入围现场榜单,获得惊喜奖品哦!)


炼成大屏幕侠的“幕后”工具


通过如下途径,小伙伴们可以尝试做一些类似的事情,没有技术基础也可以尝试~


1)人脸检测、表情识别:人脸检测接口

https://ai.baidu.com/docs#/Face-Detect-V3/top

2)手势识别:百度AI开放平台的Easydl 工具

http://ai.baidu.com/easydl/ 


借助上述工具,大屏幕侠掌握AI技能,而这些工具底层支撑则是PaddlePaddle——适合中国开发者和企业的深度学习框架~

这次和《超级乐队》的合作,也是深度学习在综艺直播行业的一次探索,未来或许会有更多深度学习技术在娱乐行业的应用出现~

想要借助PaddlePaddle解锁更多的行为识别模型,可参考官方文档

 (http://www.paddlepaddle.org/documentation/docs/zh/0.14.0/new_docs/user_guides/models/index.html)


本周五20:00第一季最后一期《超级乐队》火热开播,感兴趣的小伙伴,一起来围观吧~



640?wx_fmt=png

本文分享 CSDN - 飞桨PaddlePaddle。
如有侵权,请联系 support@oschina.cn 删除。
本文参与“OSC源创计划”,欢迎正在阅读的你也加入,一起分享。

展开阅读全文
加载中

作者的其它热门文章

打赏
0
0 收藏
分享
打赏
0 评论
0 收藏
0
分享
返回顶部
顶部