原创?冬去?淘系技术??2023年09月03日

本文根据2023年09月03日淘系技术前端团队出品的「阿里淘系用户体验优化前端实战系列直播」――《淘宝人生里的虚拟人像渲染技术》整理而成。

点击查看直播回放

行业背景

?总览

首先大家可以回想一下，无论是你们看过的电影，还是玩过的游戏，有没有主角不是人类的？不光主角，NPC、敌人、故事、等也统统和人类没有关系，有没有这种作品？我相信多少也是有的，比如《动物世界》或者《探索宇宙》等之类的题材，但毕竟还是少数。大部分还是以人类题材为主。

今天游戏和影视领域都已经是非常成熟和发达的产业了，而它们在创作的时候，都不可避免地要研发有关“人体渲染”的技术，比如毛发、衣服、皮肤的渲染，又比如喜怒哀乐、摸爬滚打等各种人类表情和动作等等，都会频繁被用到。比如，《阿丽塔-战斗天使》花费 14 亿在虚拟女主上。

再举一个例子，2023年09月03日，由腾讯和Epic联合开发的高仿真虚拟人Siren在当年的GDC上亮相，由一名演员在背后做动作和表情，虚拟人就能跟着被高质量且实时地渲染出来。效果十分惊艳。因此可以看到，整个行业是逐渐表现出对这一块垂直领域技术的研究兴趣。

???跨界典型应用

“虚拟偶像”这个话题真要说起来还是蛮大的，我这边准备了一个案例简单给大家分享下。和大家想到的“纯粹的二次元偶像”不太一样，她其实是一位真实网红的“替身”。

这个美丽的小姐姐叫Pokimane，是来自加拿大的【【微信】】达人，她是Twith和Youtbue上的知名女主播，坐拥300万粉丝，去年（2023年09月03日）9月的时候使用了一个虚拟形象代替自己进行了一次直播。大家可以感受一下效果。不过这个事件当时还引发了一些争议，这个我们今天就不提了。

根据Hyprsense的调查，从2023年09月03日3月至2023年09月03日5月，【【微信】】上日本地区的”虚拟主播(VTuber)“数量逐月稳步上升，预估全球有超过1w位这样的VTuber。

说了这么多，大家可能比较好奇，这些东西和淘宝有什么关系？难道淘宝里也有虚拟偶像么？我的回答是“可以有”，而且这位“偶像”不是别人，就是你自己。

关于我们

?淘宝人生

也许有一些朋友已经知道淘宝人生了。不知道的也没关系，你只要打开手淘，按这个步骤做一次，就能分分钟创建自己的虚拟形象。

你在里面有各种各样的玩法，比如说去拍照，走格子，抽套装，捏脸，换装，美颜，等等。大家可以自己探索下。

淘宝人生这个业务，主打的是情感向的互动方式，希望能吸引年轻新生代在手淘的粘性，让这个地方成为连接品牌与消费群体的活跃阵地。

?淘系互动团队

“淘宝人生”这个产品是一个很大的项目，涉及到不少兄弟团队的协作。而我们淘系游戏互动团队从去年开始支撑这一块的前端业务，并重点研发基于淘宝人生的虚拟人像渲染相关方面的技术。当然我们这方面的建设也借鉴了不少业界的做法和前人的经验积累。

除此之外，我们团队还有“芭芭农场、“淘金币”、“省钱消消消”等更多的淘内互动游戏产品，以及各种营销大促的业务场景。欢迎大家都去体验一下。欢迎大家都去体验一下。我们也在一直长期招募优秀的人才，有兴趣的小伙伴可以扫这个二维码加关注，并发简历给我们。

技术内幕

?引子

• 渲染基本流程

在技术这个环节，我们再展开讲四个方面内容，分别是“基础流程和管线”、“换装和美颜是如何做到”、“捏脸是如何做的”以及“如何与AR互动结合”的。

首先讲一下基本的流程。当用户进入淘宝人生的时候，程序会先加载全部的模型、纹理和材质等资源。然后读取基础的数据，这些数据对所有用户都是相同的，可以理解成是一个公共的人像模板。

然后再读取用户个性化的数据。刚才我们提到，用户在淘宝人生可以换装、美颜和捏脸，那么这些用户个性化定制的数据也会作为”人像像配置“存放在服务端。程序根据这些配置会动态加载个性化的道具、装扮、骨骼和表情等各种模型资产。所以这部分数据就是差异化的部分。

加载好后，就需要将这些个性化的模型数据应用到公共的人像模板上，该替换的替换，该合成的合成，该修改的修改。这些细节我们等下会展开说。最后进行渲染，讲到渲染的话，先普及一点实时渲染的基础，就是渲染管线。

• 渲染管线基础

人像渲染技术，归根到底还是“3D实时渲染技术”的一个子领域应用，说到“实时渲染技术”，就离不开对“渲染管线”的理解，什么是“渲染管线”呢？其实“管线”这个词已经很精妙地描绘出它的含义了，就是把上一个环节处理的数据丢给下一个环节去处理，当中CPU和GPU都会参与，但GPU参与的部分更多更重一点。一环扣一环，数据就像在一根管子里流动一样，是不是很形象？

经由这条管线绘制一次以后，就能画出一点东西，它被存放在显卡的帧缓冲区里。在实际应用中，实际上只花一次是远远不够的，因为这样只画出了一部分内容。每次画完后，我们或多或少都要调整管线，比如切换材质、切换模型顶点等等，再画一次，如此往复。每多画一次，帧缓冲区里就多点内容。那么经过很多次这样的绘制后，一副完整的图像就被画出来了。

我们淘宝人生也是类似这么一个重复绘制的过程。比如说这位漂亮的人偶，她有脑袋、头发、眼睛、还戴着眼镜，配饰，这些模型的网格顶点、材质纹理、渲染状态都是不一样的，所以要一步步地画。从分解图中可以看出，至少要画9次，才能将她的头完整地绘制出来。

当然啦，由于时间关系，这里关于“渲染管线”的讲解还是很粗糙的，目的只是给大家提供一个比较直观的体验。而且业界基本也都是这么做的，并没什么特别的地方。大家可能也更关心，“淘宝人生”在开发的时候有什么特别的地方吗？接下来我们就来谈一谈。

?换装美颜技术实现

• 引子

之前介绍过，淘宝人生的一大特色是“换装和美颜”，玩家也会更容易注意到这部分，比如换衣服裤子鞋子、换眼影睫毛唇彩等等。因为这些入口更加显眼。玩家能换这么多元素，可以想见不可能每针对一组变化，我们都提前准备一套完整的模型用于渲染，这是不现实的。那我们是怎么解决的呢？其实”换装“与”美颜“的实现方式也不太一样，所以我们分开来说。

• 道具动态加载

“换装”的思路比较简单，其实就是预先制作好各种道具本身的模型，当读取到用户的个性化配置数据后，就获取到对应道具的ID，然后加载这些模型资源，包括上衣、裤子（包括裙子）、鞋子、眼镜、耳环、项链、头饰等等。它们都是独立的模型，有各自的材质、纹理等配套资源。

小米手机京东商城是正品吗（小米手机京东商城是正品吗知乎）

1、京东卖的小米手机是真的。京东自营只卖正品行货，即使是入驻的商家也有非常严格的审查制度，一般没有假货。如果不相信京东，可以在小米官网下单购买，可以完全保证是正品。

2、一般来讲都是正品的。*都是过去的事情了，现在很少了，只要认准牌子，住一间价格，一般买的都是正品。正品归正品，但是不排除商家售卖别人开封后又退回来的二手机，这个得注意辨别。

3、是的。小米的官方旗舰店就是小米官方直销，小米也跟京东签订了相应的合作计划，统一售卖小米的产品，质量以及数量都由小米官方负责。京东自营的小米官网旗舰店是真的，是授权了的。

4、是的。小米的官方旗舰店就是小米官方直销，小米也跟京东签订了相应的合作计划，统一售卖小米的产品，质量以及数量都由小米官方负责。

5、所有购买小米产品首选小米官网，其次是京东天猫上的旗舰店，实体店的话首选小米之家，其次是国美，苏宁等大的购物店，记住一点，小米没有实体专卖店，那些挂着小米专卖店牌子的都是假的，并没有经过小米公司授权。

6、应该是真的。既然是授权。这还能有假的吗？不可能会有假。如果担心。那就京东自营买。这就是没有假的了。

1、是的。小米的官方旗舰店就是小米官方直销，小米也跟京东签订了相应的合作计划，统一售卖小米的产品，质量以及数量都由小米官方负责。

2、是正品。京东是非常可靠的电商平台。京东对于商品的管理是很严格的，京东的老板刘强东就说过京东对于假货的打击力度之大。

3、京东小米甄选是正品。京东自营店是小米官方授权的，都是正品，它们的商品可能是同一家代工厂生产，且可能在同一条流水线上，所以，在质量方面，毋庸置疑，都属于小米产品，不用担心。

4、在京东上88元小米6是真的，但是要附带很多活动内容，比如 *** 卡，比如搭配购买等。

5、是正品。京东小米智选专卖店是从小米的工厂直接进货，并且有授权售卖证书，支持7天内无理由退款退货。

6、xiaomi为小米手机非合约机唯一销售渠道，您也可以在当地营业厅购买合约版小米。小米电脑数码官方旗舰店是小米官方的线上销售渠道之一，销售的产品都应该是正品。小米官网出的，都是正品。有保障的。

1、京东自营的小米官网旗舰店是真的，是授权了的。京东的货物渠道就是从小米公司进行购买的，所以你可以进行购买的。京东商城的小米旗舰店不是小米官方授权的，只是京东自营店买小米的产品。

2、你肯定会觉得，买小米手机，小米官网和京东自营店买应该是一个样的；甚至有人觉得，小米商城购买更靠谱点，肯定是正品保证。 实际上，事实可能和你想象的不一样。

3、京东买手机可靠，放心的买吧！选择京东自营的，进行购买，。但是注意尽量不要选择第三方卖家，质量没有保障。只要是从京东自营购买的都可以完全无理由退换，而且售后有保障。

1、是的。小米的官方旗舰店就是小米官方直销，小米也跟京东签订了相应的合作计划，统一售卖小米的产品，质量以及数量都由小米官方负责。

2、你好，很高兴可以回答你的问题，京东和淘宝上面卖的小米10是真的哦，因为在京东和淘宝上面也是有小米旗舰店的，如果你在旗舰店里面购买的话，肯定就是真的哦，如果是在其他店铺上购买的话就要注意了，有可能是翻新机。

3、京东小米甄选是正品。京东自营店是小米官方授权的，都是正品，它们的商品可能是同一家代工厂生产，且可能在同一条流水线上，所以，在质量方面，毋庸置疑，都属于小米产品，不用担心。

4、是正品。京东是非常可靠的电商平台。京东对于商品的管理是很严格的，京东的老板刘强东就说过京东对于假货的打击力度之大。

1、看个人的消费习惯，无论是京东还是淘宝，都可以购买手机，因为都是有保证的购物平台。如果想以优惠的价格买入手机，可以选择在2个平台有活动的时候入手，比如：京东的购物节或者淘宝双十一，都是很好的时间点。

2、买手机建议你去实体店买比较好，售后什么的比较方便，也能接触到真机。如果没有时间出门的话，可以去京东官方旗舰店买手机，正品保证，口碑比较好。淘宝的话也要去天猫旗舰店，不建议淘宝小店，会有假货。

3、这两个都是一样的，都是小米的旗舰店。买小米手机三种途径，京东，淘宝和小米商城，如果急用就京东，发货快。

4、某宝假货多，京东翻新机多。想买到靠谱的，最好去小米官网或者天猫小米旗舰店购买。

5、从所售商品的丰富程度对比来看，都说淘宝是万能的。除了按照国家规定不能卖的东西，其他东西都可以在淘宝上买到，而且京东自营购买渠道非常严格。京东的第三方卖家也是有企业资质的，所以在所售商品的丰富程度上，淘宝胜于京东。