如今，虛擬人遍布直播間、電商平臺，在同行的夾擊下，淘寶搞AI虛擬人的目的是什么？本文對此進行探討，一起來看看吧。

從各大直播間的虛擬人，到雙十一時各種大大小小的元宇宙空間，自元宇宙興起時，淘寶就一直在入局元宇宙的邊緣瘋狂試探。

雖然如今復盤，在眾多大平臺中淘寶并不是元宇宙聲量最大的那個，但在元宇宙浪潮消退后，淘寶人生這個一直不溫不火的虛擬分身板塊卻成為了為數不多堅持到如今的元宇宙陣地。

而隨著這個誕生于2019年的應用借助AIGC的興起迭代到2.0版本，關于AI虛擬人可能存在的另一條發(fā)展路徑，也在淘寶的探索下變得越來越清晰。

在同行夾擊下依舊在“不務正業(yè)”的淘寶，搞AI虛擬人的目的究竟是什么？

一、迭代中前進，穩(wěn)穩(wěn)的幸福

自2019年中上線以來，淘寶人生先后推出了兩個版本，淘寶人生1和淘寶人生2。

淘寶人生2作為淘寶人生1的延續(xù)，相比于之前的卡通風格更偏向于超寫實風格，同時淘寶人生2也是市面上少有的將超寫實風格落地到移動端的裝扮類應用，這與市面上QQ秀等同類產品從2D到3D的發(fā)展路徑如出一轍。

雖然在主流視野中淘寶人生的存在感一直有限，但依托淘寶4億用戶的淘寶人生依舊是目前國內用戶規(guī)模較大的虛擬人裝扮類應用，圍繞淘寶人生已形成了具有一定規(guī)模的活躍圈層：

淘寶人生的微博超話目前有3.9萬粉絲，相關話題在小紅書上的瀏覽量也達到近1500萬，許多網民自發(fā)分享著自己在淘寶人生中關于穿搭、關于捏臉的心得體會；官方在不同社交媒體上的賬號也在定期更新著上新公告與版本介紹等內容。

同時作為一款內置在淘寶中最初為用戶提供虛擬分身的應用，淘寶人生經過多年的發(fā)展已經在捏臉、換裝的基礎上衍生出許多其他功能。其中與AI強相關的首先虛擬人NPC等功能，內置的“涂山赫言”“海夢學姐”等虛擬人NPC，前者可以為用戶計算每日運勢，后者可以進行日常交流。

同時基于淘寶作為購物平臺的特點，淘寶人生還提供了許多基于購物的AI相關的玩法：

比如購買淘寶實體服裝后，可以為用戶生成一套該樣式的虛擬服飾資產并穿搭到自己捏好的虛擬形象中；照片風格化可以將捏好的形象二次創(chuàng)作，實現類似妙鴨相機的功能；此外，用戶也可以通過AI服飾涂鴉的方式自制服裝。

隨著一步步探索淘寶人生背后應用的AI技術，關于“不務正業(yè)”的淘寶在元宇宙領域的野心，也變得越來越清晰。

二、AI服飾涂鴉，方向對了

在淘寶人生的諸多AI功能中，最能引起元宇宙新聲好奇的就是AI服飾涂鴉功能。

這項功能允許用戶通過自由涂鴉或輸入文本描述，在選定的底圖上創(chuàng)作服飾，隨后利用AIGC算法技術轉化為高質量的圖像，實現用戶創(chuàng)意的可視化——可以說確確實實滿足了一把為虛擬分身穿上心儀服飾的癮。

作為當前虛擬人領域較為少見的定制化功能，AI服飾涂鴉背后依托的是一系列先進技術，包括Stable Diffusion、ControlNet和LoRA等。

Stable Diffusion技術通過變分自編碼器和擴散模型結合，基于文本描述生成高質量圖像，為AI服飾涂鴉提供了強大的圖像生成能力。ControlNet技術進一步增強了圖像生成的精確性，允許更細致地控制生成圖像的結構和布局，確保用戶涂鴉的細節(jié)得以精準呈現。LoRA技術則通過對模型進行微調，優(yōu)化了特定風格化任務的處理效率，減少了對算力和數據的需求。

此外，AI服飾涂鴉項目采用了基于diffusers庫的SD生圖框架，提高了圖像生成的效率，并通過模型管理和服務部署的優(yōu)化，提供了穩(wěn)定高效的在線服務體驗。中心化的請求服務器策略優(yōu)化了負載均衡，確保了服務的快速響應和穩(wěn)定性。

通過這些關鍵技術的集成和優(yōu)化，AI服飾涂鴉功能可以在保證用戶創(chuàng)作出高質量且具有個性化的服飾圖像的同時，確保用戶體驗的穩(wěn)定性和高效性。正是這一功能，在最初引起了元宇宙新聲對于淘寶人生的關注。

而除了AI服飾涂鴉這一功能外，在傳統的捏臉與換裝領域，AI對淘寶人生的介入同樣越來越深入。

做交互设计10年，我为何转岗到产品经理？

真正转岗之后，我发现很多工作还是超出了自己的想象。产品经理的工作确实比较杂。理论上，产品经理的工作包括了产品的方方面面，从市场研究、用户调研、数据分析...

查看详情 >

作為幾乎所有元宇宙應用都躲不開的功能，捏臉功能的質量決定了應用能否在第一時刻就吸引用戶——在淘寶人生，用戶可以通過上傳一張照片快速生成專屬于自己的3D數字人形象。

在預處理階段，系統首先確保上傳的圖片符合要求，排除不合格和敏感內容。接著，通過五官關鍵點檢測為后續(xù)的3D建模提供必要的數據支持。利用3D Morphable Model（3DMM）技術，將2D照片中的人臉特征轉換到3D模型上，這一步驟不僅重建了用戶的3D人臉，還能將真實人臉特征遷移到淘寶人生2的3D卡通形象上，實現風格化同時保留用戶的獨特特征。

此外，非面部屬性模塊通過細粒度分類，如眼鏡、發(fā)型和眉型，進一步提高個性化和整體相似度。最后，所有這些數據和素材ID結合起來，通過渲染引擎生成最終的3D數字人形象。

為了評估技術成果，淘寶人生采用了Normal Mean Error（NME）指標并結合主觀評價進行打分，以此衡量3D數字人形象與原始圖片的相似度。

如何將真實人臉特征與風格化3D模型融合的問題，一直是虛擬人捏臉領域的挑戰(zhàn)，但淘寶人生通過采用3DMM和圖形學變形技術以及MLP映射模型，讓這一難題得到了一定解決。

而在去年妙鴨相機掀起一波AI寫真熱潮后，淘寶人生也開始在相關功能上精進：

在當前，AI寫真主要依賴兩種策略：一是基于角色的LoRA訓練，通過收集和訓練定制人物的大量圖像來表達角色身份；二是基于圖像特征的注入，這種方法可以避免復雜的訓練過程，快速生成所需圖像，適合迅速獲得結果的應用場景。

而淘寶人生的AI寫真算法實施過程分為三個核心步驟。首先，圖像預處理階段包括美膚和人臉增強處理，以及對人臉和頭發(fā)區(qū)域的分割和裁剪，為圖像生成做好準備。

接下來，在圖像生成模型階段，通過LoRA訓練和圖像特征的注入控制生成圖像的身份信息，特別是改進的參考圖注入技術，優(yōu)化了生成過程，確保了圖像質量和身份一致性。

最后，在模型后處理階段，從生成的圖像中篩選出質量最高的圖片，并利用人臉融合算法和圖像超分辨率技術進一步優(yōu)化結果，保證了最終圖像的高質量和身份一致性。

目前淘寶人生已構建起約50種不同風格的模板庫和LoRA模型庫，使用戶能夠根據特殊節(jié)日或活動選擇獨特風格。

分析到這里其實不難看出，隨著元宇宙與AI技術進步與應用普及，過去困擾個人虛擬人發(fā)展的種種挑戰(zhàn)，如用戶接受度、社交互動的真實感以及對于個性化、多樣性的需求等正逐步得到解決。

從AI服飾涂鴉再到AI捏臉與AI寫真，依托平臺優(yōu)勢，淘寶人生已經為虛擬人的發(fā)展做出了許多具有現實意義的探索。

三、淘寶人生雖強，但社交之路漫長

在迭代到2.0版本后，淘寶人生的超寫實風格設計，提高虛擬形象的逼真度的同時增強了用戶在社交互動中的情感共鳴。此外虛擬服飾資產生成、AI NPC互動等功能的加入也增加了用戶間的互動性和趣味性，進一步提升了用戶在與虛擬人社交互動時的真實感。

淘寶人生在個性化和多樣性方面做出的嘗試，可以說對當下虛擬人的發(fā)展最具有借鑒意義：

通過AI涂鴉等功能，用戶就可以高度定制化自己的虛擬形象；同時將真實商品的虛擬版本融入虛擬形象中的設定，更是讓淘寶人生在虛擬與現實兩個維度實現了交融。

可以說這是目前淘寶人生虛擬人最大的優(yōu)勢，亦是其他個人虛擬人平臺最大的短板。而虛實交融間，隱藏在淘寶人生之下淘寶對于社交的野心已經無需多言。

不過淘寶人生雖在個人虛擬人發(fā)展領域已經算是優(yōu)秀的存在，但距離可以引領淘寶轉型社交還有很長的路要走。

近年來，淘寶一直想努力突破其作為購物平臺的角色，向更加豐富的社交和娛樂功能擴展——畢竟即便是極為成功的購物App，也難以確保消費者的每日訪問，但增加游戲和社交功能能有效提高用戶活躍度和對平臺的依賴。

從每年雙11的好友PK到曾經風靡一時的“疊貓貓”活動，再到更早之前引進旅行青蛙的國內版本，淘寶一直想通過團隊合作和游戲化設定，提高用戶間的社交聯系和對平臺的忠誠。

但在被某多多和某東前后夾擊的當下，淘寶真的是因為社交屬性的匱乏才缺乏逆轉局勢之力的嗎？

與此同時，在SOUL等提供類似功能的應用熱度逐漸消退后，淘寶人生自身能在多大程度上保持現狀，保證平臺具有一定活力也是一個不得不面臨的問題。

雖然官方并沒有披露淘寶人生較新的日活數據，但目前已經形成的穩(wěn)定圈層，不論在影響力還是知名度上，較之淘寶龐大的用戶數量未免還是有些太小。

不過好消息是，在淘寶人生社交平臺官方賬號的評論區(qū)許多用戶都在積極與官方交流，表達想法、傳遞意見，這樣一個已經形成的穩(wěn)定圈層就是淘寶繼續(xù)耕耘社交領域的底氣。

同時，已經在AI虛擬人領域做出大量技術探索的淘寶人生只要可以保持迭代，對元宇宙可能迎來的復興，就也是一個不錯的消息。