成为VIP会员查看完整内容
VIP会员码认证
首页
主题
发现
会员
服务
注册
·
登录
0
凭一普通摄像头即可出道,「云舶科技」从游戏思路入局虚拟偶像
2022 年 2 月 11 日
创业邦杂志
包饺子、放鞭炮、看春晚……这是我们传统过春节的方式,同时也有越来越多年轻人选择参加线上演唱会、线上轰趴馆等新潮的方式过春节。
今年1月27日,
云舶科技在bilibili上线首个UGC虚拟主播互动玩法——小K轰趴馆
,虚拟主播以演唱者和舞台DJ的身份出现在虚拟演唱会和轰趴馆的场景中,粉丝通过发送弹幕即可生成和操控自己的虚拟形象,和虚拟主播进行互动应援。
小K直播姬此次推出的互动玩法打破了传统直播只能“看”的单一内容展现,让粉丝和虚拟主播之间“互动”起来,吸引了数万人同时观看直播,同时通过弹幕的方式进入虚拟场景进行活动。
春节期间,数百位主播已经使用小K直播姬,在B站等平台上开播了1000多场虚拟轰趴馆、虚拟演唱会,其中更多的是个人势的虚拟直播。
参与测试的虚拟主播,在虚拟互动场景下的观众弹幕数量同比增加4280%,加入电池礼物激活DJ打碟等互动玩法,单场电池礼物的收益增加了5倍。
熟悉B站的朋友不难注意到,近年来B站上的虚拟主播越来越多。数据统计,B站的虚拟主播快速增长,2020年达到32000人,其中以个人虚拟主播为主。
目前个人虚拟主播主要由“虚拟形象”和“中之人”组成,由真人去演绎,以虚拟形象来呈现。
中之人是虚拟形象的真人,通过面部捕捉等技术,实现真人与虚拟形象的动态同步。
虚拟形象的表情、动作直接影响直播与互动的效果,因此动作捕捉既是虚拟直播的基础也是决定一次直播成不成功的关键因素。
传统的动作捕捉在影视行业有着广泛应用,例如《阿凡达》《指环王》等影片在角色设计和特效上都采用了动捕技术,其方式为光学动作捕捉和惯性动作捕捉。这些方式都需要通过传感器来记录演员的动作,因此在片场,需要动捕的演员身上往往佩戴很多设备。
而传统的穿戴式设备的动作捕捉有两个问题:第一,成本高。便宜的至少也需要几万,贵的则需要几十万至几百万不等。第二,使用不方便,穿戴设备与动作捕捉需要团队多人配合。
对此,云舶科技推出全球首款免费3D虚拟直播产品小K直播姬。
视频动捕采用计算机视觉技术
,用户无需佩戴任何设备,只需一台电脑和一个摄像头,就能实现实时动作捕捉。
普通的RGB摄像头如何实现动作捕捉?
这是通过其中的卷积神经网络
(CNN)
来识别图像中人体的骨骼关键点。其中,特征提取器会通过分辨率由高到低的过程来提取高级特征,姿势解码器则可以基于检测或回归的方式来估计目标输出、2D/3D关键点位置或3D网络。
通俗来说,在计算机眼里,用户像是一个木偶,骨骼关键点就是木偶的关节,识别的点越多,木偶的关节越多,也就更灵活生动。
小K直播姬的视频动作捕捉技术,识别位点超过100个,覆盖面部、手部、双臂等位置,因此,
用户可以随意摆出各种动作,即便是用手指做很复杂的动作,也能被准确捕捉
。
除此之外,小K直播姬还能帮助用户捏制属于自己个人的专属虚拟3D形象,并且支持模型第三方导入,让主播的形象不再千篇一律。
市面上面向C端用户的商业化视频动捕技术少之又少,且小K直播姬还不向用户收费,大大降低虚拟主播的门槛。因此,小K直播姬公测3个月后,虚拟主播注册数就已经破2万。
其创始人梅嵩分析,“短视频和直播是最近3到5年蓬勃发展的两个行业,其核心是门槛低,大量的用户可以参与进来,因此,虚拟人、虚拟偶像市场想要快速发展,也需要参与者足够多。”降低门槛,人人都可以当虚拟主播,是小K直播姬对行业发展的推动,也是其免费的原因之一。
不向用户收费,小K直播姬如何持续发展?云舶科技给出的答案是创作者经济,具体而言即
采用游戏化的互动方式,从内容层面获利
。
实际上,小K直播姬强调的是游戏化的互动,即将直播的交互变成一种游戏化的行为。传统的直播盈利模式主要是打赏特效、“双击666”、直播带货等。而虚拟直播里,主播与观众互动,后者给虚拟主播打赏虚拟物品,例如给使用小K直播姬的虚拟主播换一套衣服,那么小K直播姬就能从中分成。
云舶科技认为,游戏化的互动会极大地提升观众的参与和付费欲望。游戏玩家为什么在游戏里面愿意付费?这是由于游戏的互动行为参与感很强烈。
例如,传统的RPG游戏为什么会吸引大量游戏玩家购买装备,主要是因为武器属性变得更强,PK胜利产生的实时正向反馈非常直接。因此从这个角度来看,用游戏化的方式切入虚拟直播前景可观。
用做游戏的思路布局虚拟技术行业,这与其团队背后资深游戏背景有关。2017年,出身游戏行业的梅嵩和陈敏联合创立了云舶科技。其中,梅嵩是原蓝港互动SVP,《王者之剑》系列手游制作人;陈敏是原蓝港互动CTO,核心团队有着17年的游戏和AI的研发经验。
从创业之初,云舶科技就专注于视频动捕技术。小K直播姬所采用的视频动捕技术,都是由云舶科技自主研发,并已获得多项国家专利。
实际上,
云舶科技的定位不局限于提供虚拟技术,而是技术+内容服务商
。“行业的发展壁垒最后一定是互动和内容。得做出好的内容观众才会买账,主播才会有多的收入,我们相信加入游戏化的互动会带来更好的内容。”梅嵩分析道。
未来云舶科技还将在内容上有更多尝试,例如“虚拟宠物”,主播养宠物,观众可以一起帮助喂宠物;“沉浸式连麦”,几个主播在同一个虚拟空间内互动。在主播层面,小K直播姬将推出主播定制化的工具——小K编辑器,主播能够通过编辑器自定义主播形象、背景、道具等。
点击小程序,查看项目详情
↓
图片来源:
云舶科技
本文作者:胡晓倩,关注新消费和创新科技领域。一切采访合作需求欢迎联系,邮箱:chenxi.lan@cyzone.cn,请注明来意。
快鲤鱼 l ID:akuailiyu
长 按 二 维 码 ,一 键 关 注
MORE | 更多精彩文章
点赞、在看点这里
登录查看更多
点赞并收藏
0
暂时没有读者
0
权益说明
本文档仅做收录索引使用,若发现您的权益受到侵害,请立即联系客服(微信: zhuanzhi02,邮箱:bd@zhuanzhi.ai),我们会尽快为您处理
相关内容
科技
关注
65
科学技术
《5G 毫米波赋能 8K 视频制作》未来移动通信论坛
专知会员服务
11+阅读 · 2022年4月15日
中银国际《虚拟人行业研究》报告,40页pdf
专知会员服务
53+阅读 · 2022年3月18日
2021-2022中国自动驾驶产业年度总结报告(附下载),48页pdf
专知会员服务
51+阅读 · 2022年3月10日
201页ppt,2022年「元宇宙」全球年度报告--北大&安信
专知会员服务
55+阅读 · 2022年3月8日
【AAAI2022】一种基于状态扰动的鲁棒强化学习算法
专知会员服务
34+阅读 · 2022年1月31日
德勤《2022科技、传媒和电信行业预测》,142页pdf
专知会员服务
30+阅读 · 2021年12月21日
虚拟数字人应用技术与发展路径
专知会员服务
99+阅读 · 2021年11月3日
ICCV 2021 Oral | 基于点云的类级别刚体与带关节物体位姿追踪
专知会员服务
10+阅读 · 2021年9月23日
2021科技、传媒和电信行业预测,124页pdf
专知会员服务
27+阅读 · 2021年1月4日
【浙江大学】人脸反欺诈活体检测综述
专知会员服务
31+阅读 · 2020年4月15日
元宇宙投资操盘手冯铮:虚拟人的价值,绝不是“不塌房的偶像”
创业邦杂志
0+阅读 · 2022年4月7日
VR看房、虚拟实景购物、数字化文旅……「众趣科技」让3D技术结合互联网落地到更多场景
创业邦杂志
3+阅读 · 2022年3月28日
资本围猎虚拟人:腰缠万贯,无家可归|36氪新风向
36氪
1+阅读 · 2022年2月27日
养一个“虚拟人”要花多少钱?它又能为你赚多少?
人人都是产品经理
0+阅读 · 2022年2月6日
虚拟人春节搞事情!先在央视《对话》,又跟李玉刚组团除夕出道
量子位
0+阅读 · 2022年1月31日
虚拟偶像风云变幻,只有洛天依火了十年
36氪
0+阅读 · 2022年1月30日
00后都盯上的创业赛道,虚拟人是不是一门好生意?
人人都是产品经理
0+阅读 · 2022年1月27日
HMI设计岛:车载语音之形象设计别有洞天
人人都是产品经理
0+阅读 · 2022年1月20日
2021年十大虚拟偶像盘点
人人都是产品经理
0+阅读 · 2022年1月9日
别吵吵内卷了,看看人家虚拟人:连续直播70天都没工资
量子位
0+阅读 · 2021年12月22日
行车安全辅助系统中车载3D虚拟全景成像研究
国家自然科学基金
0+阅读 · 2013年12月31日
基于石墨烯涂层的电喷雾解吸电离质谱技术研究及其在复杂样品分析中的应用
国家自然科学基金
0+阅读 · 2013年12月31日
逼真稳定的服装动画方法研究
国家自然科学基金
0+阅读 · 2013年12月31日
视频监控中基于云台可控制摄像机的目标追踪技术研究
国家自然科学基金
0+阅读 · 2013年12月31日
面向虚拟座舱仿真的虚拟现实头盔伺服系统关键技术研究
国家自然科学基金
0+阅读 · 2012年12月31日
虚拟人的连续运动控制研究
国家自然科学基金
2+阅读 · 2011年12月31日
沙尘暴虚拟体验中心
国家自然科学基金
0+阅读 · 2010年12月31日
GPU加速的视频抽象化和卡通化
国家自然科学基金
0+阅读 · 2009年12月31日
面向虚拟维修的人体行为建模方法研究
国家自然科学基金
0+阅读 · 2009年12月31日
AVR虚拟人几何与运动重建的研究
国家自然科学基金
3+阅读 · 2008年12月31日
Online Capacity Scaling Augmented With Unreliable Machine Learning Predictions
Arxiv
0+阅读 · 2022年4月20日
Anomaly Awareness
Arxiv
0+阅读 · 2022年4月18日
Interaction Design of Dwell Selection Toward Gaze-based AR/VR Interaction
Arxiv
0+阅读 · 2022年4月18日
Anomaly Detection in Autonomous Driving: A Survey
Arxiv
0+阅读 · 2022年4月17日
The Node-wise Pseudo-marginal Method
Arxiv
0+阅读 · 2022年4月17日
Deep Surrogate Assisted MAP-Elites for Automated Hearthstone Deckbuilding
Arxiv
0+阅读 · 2022年4月16日
INSTA-BNN: Binary Neural Network with INSTAnce-aware Threshold
Arxiv
0+阅读 · 2022年4月15日
Ear Wearable (Earable) User Authentication via Acoustic Toothprint
Arxiv
0+阅读 · 2022年4月14日
Artificial Intelligence for the Metaverse: A Survey
Arxiv
31+阅读 · 2022年2月15日
Decentralized and Communication-Free Multi-Robot Navigation through Distributed Games
Arxiv
40+阅读 · 2021年9月15日
VIP会员
自助开通(推荐)
客服开通
详情
相关主题
科技
3D
卷积神经网络
特征提取器
特征提取
CVPR 2022
相关VIP内容
《5G 毫米波赋能 8K 视频制作》未来移动通信论坛
专知会员服务
11+阅读 · 2022年4月15日
中银国际《虚拟人行业研究》报告,40页pdf
专知会员服务
53+阅读 · 2022年3月18日
2021-2022中国自动驾驶产业年度总结报告(附下载),48页pdf
专知会员服务
51+阅读 · 2022年3月10日
201页ppt,2022年「元宇宙」全球年度报告--北大&安信
专知会员服务
55+阅读 · 2022年3月8日
【AAAI2022】一种基于状态扰动的鲁棒强化学习算法
专知会员服务
34+阅读 · 2022年1月31日
德勤《2022科技、传媒和电信行业预测》,142页pdf
专知会员服务
30+阅读 · 2021年12月21日
虚拟数字人应用技术与发展路径
专知会员服务
99+阅读 · 2021年11月3日
ICCV 2021 Oral | 基于点云的类级别刚体与带关节物体位姿追踪
专知会员服务
10+阅读 · 2021年9月23日
2021科技、传媒和电信行业预测,124页pdf
专知会员服务
27+阅读 · 2021年1月4日
【浙江大学】人脸反欺诈活体检测综述
专知会员服务
31+阅读 · 2020年4月15日
热门VIP内容
开通专知VIP会员 享更多权益服务
OpenAI十二天总结与Agent新范式
【伯克利博士论文】高效深度学习推理的全栈方法
【AAAI2025】多层次最优传输用于语言模型中的通用跨标记器知识蒸馏
大规模语言模型增强推荐系统:分类、趋势、应用与未来
相关资讯
元宇宙投资操盘手冯铮:虚拟人的价值,绝不是“不塌房的偶像”
创业邦杂志
0+阅读 · 2022年4月7日
VR看房、虚拟实景购物、数字化文旅……「众趣科技」让3D技术结合互联网落地到更多场景
创业邦杂志
3+阅读 · 2022年3月28日
资本围猎虚拟人:腰缠万贯,无家可归|36氪新风向
36氪
1+阅读 · 2022年2月27日
养一个“虚拟人”要花多少钱?它又能为你赚多少?
人人都是产品经理
0+阅读 · 2022年2月6日
虚拟人春节搞事情!先在央视《对话》,又跟李玉刚组团除夕出道
量子位
0+阅读 · 2022年1月31日
虚拟偶像风云变幻,只有洛天依火了十年
36氪
0+阅读 · 2022年1月30日
00后都盯上的创业赛道,虚拟人是不是一门好生意?
人人都是产品经理
0+阅读 · 2022年1月27日
HMI设计岛:车载语音之形象设计别有洞天
人人都是产品经理
0+阅读 · 2022年1月20日
2021年十大虚拟偶像盘点
人人都是产品经理
0+阅读 · 2022年1月9日
别吵吵内卷了,看看人家虚拟人:连续直播70天都没工资
量子位
0+阅读 · 2021年12月22日
相关基金
行车安全辅助系统中车载3D虚拟全景成像研究
国家自然科学基金
0+阅读 · 2013年12月31日
基于石墨烯涂层的电喷雾解吸电离质谱技术研究及其在复杂样品分析中的应用
国家自然科学基金
0+阅读 · 2013年12月31日
逼真稳定的服装动画方法研究
国家自然科学基金
0+阅读 · 2013年12月31日
视频监控中基于云台可控制摄像机的目标追踪技术研究
国家自然科学基金
0+阅读 · 2013年12月31日
面向虚拟座舱仿真的虚拟现实头盔伺服系统关键技术研究
国家自然科学基金
0+阅读 · 2012年12月31日
虚拟人的连续运动控制研究
国家自然科学基金
2+阅读 · 2011年12月31日
沙尘暴虚拟体验中心
国家自然科学基金
0+阅读 · 2010年12月31日
GPU加速的视频抽象化和卡通化
国家自然科学基金
0+阅读 · 2009年12月31日
面向虚拟维修的人体行为建模方法研究
国家自然科学基金
0+阅读 · 2009年12月31日
AVR虚拟人几何与运动重建的研究
国家自然科学基金
3+阅读 · 2008年12月31日
相关论文
Online Capacity Scaling Augmented With Unreliable Machine Learning Predictions
Arxiv
0+阅读 · 2022年4月20日
Anomaly Awareness
Arxiv
0+阅读 · 2022年4月18日
Interaction Design of Dwell Selection Toward Gaze-based AR/VR Interaction
Arxiv
0+阅读 · 2022年4月18日
Anomaly Detection in Autonomous Driving: A Survey
Arxiv
0+阅读 · 2022年4月17日
The Node-wise Pseudo-marginal Method
Arxiv
0+阅读 · 2022年4月17日
Deep Surrogate Assisted MAP-Elites for Automated Hearthstone Deckbuilding
Arxiv
0+阅读 · 2022年4月16日
INSTA-BNN: Binary Neural Network with INSTAnce-aware Threshold
Arxiv
0+阅读 · 2022年4月15日
Ear Wearable (Earable) User Authentication via Acoustic Toothprint
Arxiv
0+阅读 · 2022年4月14日
Artificial Intelligence for the Metaverse: A Survey
Arxiv
31+阅读 · 2022年2月15日
Decentralized and Communication-Free Multi-Robot Navigation through Distributed Games
Arxiv
40+阅读 · 2021年9月15日
大家都在搜
自主可控
无人艇
大规模语言模型
CMU博士论文
俄乌战争
洛克菲勒
palantir
情感计算
笛卡尔
GANLab 将GA
Top
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top