近日,抖音对外推出一个全新功能“尬舞机”,这一功能能够让用户随时随地打开抖音就可以体验线下跳舞机的玩法。抖音也成为国内首个将“人体关键点检测”技术应用于全身的产品。
打开抖音可以发现,在平时拍摄视频的界面入口多了一个尬舞机模式。点击尬舞机选项,用户会进入一个全新的界面,在选定背景音乐后,用户就可以用抖音开启手机“蹦迪”。
就像玩真实的跳舞机一样,屏幕里伴随着音乐会不断出现不同动作图形,用户需要及时摆出对应的动作才能得分,随着动作的进程系统会发出perfect 、good以及连击音效。
在游戏结束后会生成你的得分和排名,同时用户玩的全程会被地拍摄下来,作为抖音视频发布。
肢体识别技术的深度应用
据悉,“尬舞机”主要应用了今日头条 AI Lab 自主开发的“人体关键点检测技术”,依靠这项技术,抖音能够检测到图像中所包含人体的各个关键点的位置,从而实现从用户姿态到目标姿态的准确匹配。
实际上体感类游戏早已有之,从大家所熟悉的线下跳舞机,到微软的kinect,再到近来任天堂switch,体感类游戏一直受到大量人群的喜爱,成为休闲娱乐的一大利器。
然而,受限于技术条件的限制,此前只有微软、任天堂少数平台,借助特定硬件设备的支持,才能享受体感游戏的乐趣。
如今,抖音凭借今日头条先进的深度学习技术的支持,把体感游戏搬到了身边,使用手机就可以精准地“读懂”人体的姿态和动作通过手机就能完成。
抖音尬舞机功能的开发负责人表示,由于人体的姿态复杂多变,衣着丰富多彩,如何在不受限制的日常场景下,准确地检测人体关键点一直是计算机视觉领域中的一个热点问题。
该名负责人表示,这一功能的实现难度要显著地高于人脸关键点检测等已广泛实用化的计算机视觉技术。
从“尬舞机”的实现效果来看,今日头条的 AI Lab 完全自主研发了这一技术,并且目前来看,在业内处于领先水平。
抖音的黑科技
这已经不是抖音第一次应用黑科技了。一年来抖音的爆红离不开大量黑科技的加持。抖音在互动上大量运用了领先的人工智能技术,如支持人脸关键点检测的表情贴纸、将人与背景分割实现的虚拟背景更换技术等。
例如“憨厚脸”、“甩狗头”等这些近来流行全网的贴纸特效,最开始都来源于抖音,其背后也正是应用了今日头条先进的图像识别技术。
今年7月,鹿晗发布新歌《零界点(On fire)》,抖音作为合作伙伴,发布了两个15秒的鹿晗MV视频。值得一提的事,抖音获得了独家MV贴纸授权,应用“背景分割”技术把MV做成背景贴纸,粉丝可以使用动态背景贴纸拍摄,与鹿晗一起尬舞。