突破次元壁垒,让身边的玩偶手办在屏幕上动起来!
因为喜爱,人们会将二次元形象制作成玩偶手办,然而没有生命气息的冰冷模型并不能满足人们互动性的情感需求。如何能让带有情感寄托的玩偶手办更具表现力和感染力呢?
近日,HMS Core 3D建模服务上线自动骨骼绑定能力,可以让已建成模型的二足人形物体根据自定义动作活动起来,甚至与用户产生互动,不再只是冰冷僵硬的玩偶手办。
那么,通过自动骨骼绑定能力动起来的 3D 模型,可以用来干什么呢?
比如,使用音视频编辑能力,可以将小朋友喜欢的玩偶建成 3D 模型,并加上舞蹈动作、配音和儿歌故事,剪辑成较为完整的儿童教学视频,帮助孩子更快更好的接收知识;
又比如,结合3D Engine的动作制作能力,通过实时骨骼动画、面部表情驱动、全身 IK、多重动画状态机融合等功能,可实现流畅的 3D 动画效果,再加上 3D Engine 的高清渲染与视觉特效、智能寻路导航等功能,即可制作一款成熟的动画游戏;
再比如,借助AR Engine的运动跟踪、人体和人脸跟踪、环境跟踪等 AR 能力,可以在镜头下将 3D 模型置入真实的场景中,并与用户产生互动。该场景可应用于 AR 游戏领域,实现游戏中自定义 3D 模型及模型动作的功能,让 AR 互动游戏更具趣味性。
除此之外,我们还可以突破想象,在建模过程中将生活中的瓶瓶罐罐、随用物件加上两条“腿”,让自动骨骼绑定能力不再局限于特定模型类别,万物皆可活动起来,真正实现“万物复苏”的有趣景象。
实现原理
自动骨骼绑定服务面向的是有 3D 游戏、3D 动画制作等需求的开发者,通过输入一个二足人形物体的静态 3D 模型,即可基于 AI 算法进行肢体绑定,并自动生成模型的骨骼和蒙皮权重,完成自动骨骼绑定,然后通过改变骨骼的朝向和位置,动态驱动模型完成行走、跳跃、跳舞等自定义动作,以此赋予 3D 模型运动的能力。
能力优势
1、 无需人工干预,即可实现一键绑定蒙皮。
骨骼绑定分为手动绑定和自动绑定,目前多数高精度的自动骨骼绑定方法,除了要求模型处于标准姿态外,还需要手动放置七八个关键点才可绑定。而华为的自动骨骼绑定能力基于 AI 智能算法,只需要让模型处于一个大致正确的位置,甚至都不要求模型绝对的直立、朝前,即可对模型完成精确的绑定,无需手动放置关键点。
2、 基于海量数据,提高 AI 绑定算法的准确性和泛化性。
那么,华为自动骨骼绑定能力是如何进行 3D 模型数据制作,确保 AI 绑定算法准确性的呢?不同于耗时耗力的传统 3D 模型数据制作方法,华为自动骨骼绑定能力的 3D 模型数据制作仅需要用普通手机拍摄采集物体图像,通过华为自研算法自动化生成 3D 角色数据。在针对大规模生成的数十万 3D 模型绑定数据进行算法训练时,只需要在少量的真实数据上进行微调,即可得到高准确性、高泛化性的 AI 模型。
输入模型约束
考虑到 3D 世界模型的多样化,为了保证自动骨骼绑定能力算法的精准性,我们对绑定算法的输入模型作出以下建议:
来源:使用双足人形手办(不含手持物体)、毛绒玩具的照片扫描建模;
外观:从视觉上看,网格无分离,四肢与身体无粘连,无大块的附属物,尽量双腿站立,双臂张开;
姿态:整体姿态为 z 轴朝前,y 轴朝上,各关节可有不超过 15°的扰动,不对对称性作要求;
Mesh:Mesh 为三角面或四边面,顶点数量不应超过 80k,模型整体没有大规模面片缺失;
其他:身体和四肢比例符合大部分玩具风格,肢体不应过细、过短(手臂和腿宽度比例不能小于模型最长边的 8%),模型姿态整体竖直朝前。
华为 HMS Core 3D建模服务自动骨骼绑定能力,通过智能化技术牵引,大大降低了 3D 模型动画的制作门槛,动画制作不再是需要复杂设备的高难度的技术能力,即便非专业人士使用普通手机也能轻松完成动画制作,实现日常生活中更多的创意作品制作。
了解更多详情>>
获取开发指导文档
关注我们,第一时间了解 HMS Core 最新技术资讯~
版权声明: 本文为 InfoQ 作者【HMS Core】的原创文章。
原文链接:【http://xie.infoq.cn/article/ba601e919cf2e9f46e24e6966】。文章转载请联系作者。
评论