Itsme关停、网易入局，动态捕捉社交的风到底往哪吹？热评聚

　　有人来，有人走，是世间常态。Itsme走了，但没完全走；网易来了，但没完全来。
　　近两年，乘着元宇宙和全真互联网的东风，动态捕捉音视频社交模式获得了更多开发者的关注，也走入了更多用户的视野。
　　YallaGroup旗下元宇宙概念社交平台Waha、日本虚拟直播应用Reality，都将动态捕捉实时音视频社交作为应用的主要模式。
　　而网易也伴随这股浪潮，逐渐向动捕社交领域靠近。除了2022年4月在国际计算机视觉和模式识别会议上，网易互娱推出的视觉动捕工具iCap，8月网易又面向泰国用户推出了动态捕捉vTuber虚拟派对应用Fancy。
　　本来想借着Fancy上线的契机，看看我们之前比较早观察到的动态捕捉社交AppItsme近两个月的发展情况，可这一查，却发现Itsme已经于2022年8月10日关站了。。。
　　因而，我们下文将从两个部分分析这两种截然不同的选择。前半部分主要包括NaturalSyntheticsInc关停Itsme、以及旗下新产品Codename拆解、Itsme模仿者Orbit等3部分内容；后半部分，包括Fancy产品拆解以及虚拟直播的可行性探讨。
　　动态捕捉虚拟社交的尽头是TikTok？
　　在很长一段时间，Itsme都是笔者心里Z世代社交的“白月光”。几乎虚拟社交文章必提Itsme，逢人就安利。
　　尽管我们曾在多篇文章中将Itsme称之为“有趣的Z世代实时社交产品”，但不可否认的是，Itsme确实从这个世界消失了。。。
　　在宣布于8月10日关停后，曾经每天有将近100万分钟视频时长的Itsme，在AppStore和GooglePlay已经查无此App，已经下载的应用已经无法打开、甚至就连Twitter账户内容也被全部清空，好像从没来过。。。
　　除了在社交媒体上的全力呼喊，甚至有用户尝试发起“请愿书”，要求开发者停止关停Itsme，不过结果显示只有14名用户参与请愿。总之，Itsme还是难抵消失在历史洪流中的结局。
　　而通过笔者过往观察以及用户反馈情况来看，“不赚钱，且费钱”应该是关停的主要原因，在笔者与一些虚拟社交开发者的交流过程中发现，做好捕捉与社交的融合，不仅需要先进的技术，也需要大量的资金，甚至月成本可能要以百万为单位。。。而且，Itsme可能还是这其中相对头部的存在，因而研发费用可能要更加惊人。
　　不过好消息，Itsme的研发团队虽然放弃了Itsme，但并没有放弃动态捕捉Avatar社交。经查阅发现，NaturalSyntheticsInc上线了新的虚拟社交产品Codename。
　　不过用户对此并不买账。目前Codename在AppStore仅有67条评论，用户评分2。2分。从用户评论来看，低分的原因主要集中在1、Codename的产品模式在某种程度与TikTok有些相似，Itsme用户无法接受自己正在使用一个仿款；2、Itsme上的好友关系无法迁移，导致用户与不少好友失联”等两点原因。
　　但从笔者的体验和观察来看，Codename在做的事是有趣的。
　　Avatar创建
　　Codename会要求用户在正式进入之前，先创建一个Avatar形象，并且提供了“Avatar模版创建”和“人脸创建”两种模式。
　　在模版模式下，用户可以在Codename提供的12种不同风格的Avatar模版中选择自己心仪的形象。在选择完成后，用户可以自由调整Avatar的肤色、体型、服装、五官、配饰和背景，这与Itsme一脉相承。
　　而在人脸模式下，Codename在取得相机权限后，会根据拍摄的用户照片抓取用户面部特点，为用户生成“独一无二”的五官。Codename认为这种模式可以让Avatar与用户更加相似，但通过笔者与同事的实际体验来看，人脸扫描生成的人像与真人的相似度无限趋近于零，非要说哪里像的话，就是完全不像。五官捕捉很垃圾，不过表情捕捉依然很精准，且模式也算得上有趣。
　　影片创作
　　为了方便影片创作，Codename支持用户创建多个Avatar形象。而在这之后，用户可以利用自己的Avatar形象，创建有趣的虚拟影片。
　　目前来看，除了基础的动态捕捉，在录制影片过程中，Codename支持用户调整Avatar的角度和动作、运镜方式、切换Avatar、编辑Avatar形象、切换背景、添加3D文字、保留原声、添加音乐、依照模板创作内容。我们选取其中有趣的几个功能，进行详细介绍。
　　动作。Codename将动作分为休闲、反应、舞蹈、运动和走路等5个类别，覆盖多种日常场景。
　　以运动动作为例，Coedname提供滑板、仰卧起坐、打篮球、俯卧撑、开合跳、原地纵跳、后空翻、深蹲、高尔夫、跨步跳等10个动作，比健身半年的笔者会得还多。。。在舞蹈、反应和休闲类别下，Avatar动作则更加丰富。
　　背景。Codename将背景分为场景、用户自定义图片和纯色背景等三种类别。在场景选项下，覆盖少女卧室、日常卧室、客厅、迪厅、舞台、影院、篮球场、厕所、教室、更衣室、走廊等11种场景。从场景功能来看，Codename目前用户群体依然是学生和Z世代年轻用户。
　　而从另一个视角来看，Codename的动作、场景和服装有完整的适配逻辑。在电影院吃爆米花、在篮球场打球、在舞台弹吉他都可以轻松实现。因而Codename虽然是一款虚拟社交产品，但场景却来源于生活。
　　另外，Codename在运镜方式的处理也非常专业，提供的歌曲配乐选择也十分丰富，感兴趣的朋友可以自行下载体验。
　　社区互动
　　在影片创作完成后，系统会将内容自动发布至Codename平台，不过如果用户愿意的话，也可以将内容分享至TikTok、Instagram、Snapchat等站外社交媒体平台，或者也可以保存视频链接或下载视频。
　　用户可以在Codename主页查看用户创作的Avatar影片，而浏览影片的方式为TikTok的上下滑动模式。
　　在内容展现形式和内容互动上与TikTok过分相似，也是Codename被诟病的主要原因。用户可以在主页查看影片创作者主页、点赞评论转发影片内容、查看影片使用的音乐。
　　从用户浏览视角来看，目前不少创作者发布的内容为技术流内容，卡点换脸、小剧场都是受欢迎的内容；而从互动结果来看，不少视频的点赞量已经超过了200次，多数视频的点赞量在20150之间，部分创作者在Codename的粉丝数量已经超过了7000个；而从创作情况来看，不少创作者主页的影片内容都超过了10个。用户似乎有些口嫌体正直的嫌疑。
　　不过，从笔者的视角来看，Codename确实还挺有趣的，和我们此前在《终于找到了跑来跑去之外的元宇宙App，逛街、旅行、选美都是基础操作》一文中分析的ICON也有些共通之处。
　　虽然大家对Codename高度借鉴TikTok有所不齿，但社恐友好型创作平台出色的创作工具高超的动态捕捉，很难让人不心动。笔者和同事开玩笑，以创始人的技术背景，可能做ToB工具，“钱景”更好。
　　另外，一个有趣的现象是，Itsme下线了，但Itsme模式还在。
　　Orbit：Itsme不在了，但没完全不在
　　Orbit是中国香港DHNAmor公司于2021年12月30日推出的3DAvatar社交应用，截至目前，已经登上东欧、南美、中东等12个国家和地区的AppStore社交分类下载榜Top100。
　　尽管不论是从产品设计、主要功能还是产品画风来看，Orbit都与此前曾在北美等流行的Itsme差别不大，但对于出海开发者而言也算得上一次突破。
　　不知道Itsme的继任者，Orbit能否打破魔咒。
　　Orbit尝试将动态捕捉、Avatar编辑与实时互动结合在一起。
　　在正式开始使用之前，用户需要先创建自己的Avatar形象。Avatar形象创建分为摄像头动态捕捉和个性化调整两部分。
　　首先，当用户开放摄像头权限后，系统将通过主要捕捉用户眼睛、嘴巴和眉毛的形态生成初始Avatar形象，整体属于美式写实风，Avatar表情会随用户表情实时变化。在这之后，用户可以跟自己的需求和偏好选择Avatar的肤色、发型、瞳孔颜色、睫毛、耳饰、眼镜以及背景颜色等，从而打造出更具个性化的虚拟形象。
　　从笔者的个人体验来看，Orbit在这方面做得并不好。
　　1、表情捕捉有很大的误差。仅可准确捕捉眉眼动态，嘴巴捕捉有很大的误差，经常会出现下嘴唇完全包裹上嘴唇的情况，舌头和鼻子的动态变化无法被识别。由于可调用的五官相对较少，因而也会限制情绪表达的多样性，发呆、生气、开心等常规表情也不能精准表达。
　　2、用户无法自定义调整Avatar的五官和脸型，这就导致所有用户的Avatar形象都大差不差，缺乏多元性。
　　不过客观来说，对于一家创业公司而言能做到Orbit的程度也并不容易，而要想达到拥有核心技术且聘请了皮克斯工作室人才的Itsme水平也绝非一蹴而就之事。
　　目前Orbit内设有Meet、Moments、Create、Friends以及Profile等5个Tab，共提供随机视频匹配、信息流、群聊等3个交互场景。
　　视频匹配
　　在注册账户时，Orbit会要求用户填写性别、年龄等信息并选择符合自己的兴趣标签。当用户点击打开“Gravity”按钮时，系统将会根据用户填写内容为其匹配潜在合适用户。匹配成功时用户双方将以Avatar的形象出现在聊天室，双方可以进行实时语音视频聊天。
　　为了缓解尴尬，Orbit还设置了“问答”和“绘画”两种破冰游戏。在选择破冰问答模式时，用户可以就破冰问题互相提问，或者也可以通过左右滑动切换问题，以此来找到彼此感兴趣的话题。从体验来看，破冰问题主要围绕“在交往时最看重对方哪些特质、曾做过最浪漫的事儿、与家庭成员的关系”等亲密关系话题。
　　而在绘画游戏模式时，用户需要根据系统提示词汇进行绘画，而对方则需要根据绘画内容猜出关键词，从而提升双方默契度。
　　当用户双方中任意一方在通话结束前表达了对对方的喜欢时，系统都会建立临时会话窗口。在对方同意之前，用户也可以通过绘画窗口向对方发送消息，只不过消息会被折叠至“NewChatRequests”。
　　而除了随机匹配，用户还可以在MeetTab下向热门推荐用户发送打招呼信息，对方通过后则可进行进一步的交互。
　　信息流
　　用户可以用系统编辑器自由调整想要发布内容的背景、配图、字体、文字颜色以及文字排列，并以图片或视频的形式上传到“ForYou”。Orbit会按照时间顺序展示用户们发布的内容。
　　用户可以为自己喜欢的内容点赞或者直接向内容创作者发送消息，而不论哪种方式系统都将为双方创建临时对话窗口，并同样折叠至NewChatRequests。
　　从观察来看，平均每小时会有5条左右的内容被推荐至主页，多数女性用户的信息流内容为“自拍打招呼信息”，而男性用户露脸更少、发布内容类别更加复杂，女性用户发布信息流内容的比例要大于男性用户，内容获赞量大多在520区间，10比较常见。
　　Groups
　　目前Orbit正在内测群聊功能，目前共有爱情故事、日常激励、宠物、少数群体、动漫爱好者、游戏玩家、搞笑故事、情绪角落、美丽文字等9个不同的群组，艺术、KPop、Rap、原创视频、GirlsOnly等5个群组正在筹备中。
　　目前现有的群组中，群组成员在57369不等，而群组内发布的信息流内容也在66398个不等。用户加入群组并发布至少一条内容后，便可查看群组内容创作者的个人信息并向对方打招呼。在交互模式上与信息流没有明显差异。
　　整体来看，Orbit在交互模式上没有太多创新，不过却也为陌生用户间的交互打开了一条更加便捷的通道，无需对方同意即可向对方发送消息，而为了保护用户体验，这部分来自陌生用户的打招呼信息将会被折叠。通过好友申请后，才会出现在好友消息页。但Orbit似乎还欠缺更近一步的交互模式，成为好友后除了视频互动和图文消息并无其他交互场景。在3天的测试期间，加了超过20位好友，但超过3轮以上对话的好友不超过3个。如何让用户更加珍惜和在意自己的好友，可能也是Orbit下个阶段需要解决的问题。
　　以上来看，Orbit目前仍在寻着Itsme的老路向前，不知道每月3更的频率能不能帮助Orbit成长得更好。
　　Fancy：动态捕捉语音房Avatar，二次元VTuber进入增长期
　　Fancy是网易2022年8月2日推出的Avatar虚拟派对应用，主要提供中文、英文和泰文三种语言服务，从测试结果来看产品稳定性还不太强，偶尔会出现报错和闪退的情况。
　　Fancy选择泰国市场作为出海首站也是个有趣现象。
　　在此之前，网易云已经先后面向东南亚市场推出HeatUp和KayaLive两款社交产品，旗下互动小说应用Dokific也有在东南亚市场发力。
　　在过去，网易更倾向于在日本测试新产品，而近几次动作能隐隐感觉到网易有一些提升东南亚市场重要等级的意味。另外，网易近两年频繁推出社交虚拟应用游戏，似乎也在表达自己探索元宇宙的野心。
　　从功能来看，Fancy作为一款虚拟直播互动应用，与日本Vtuber直播平台Reality高度相似，都是以Avatar、语音互动和动态捕捉为基础提供实时互动的可能性。
　　而Reality正是日本社交网络巨头GREE的元宇宙重点部署之一。在GREE的构思中，REALITY将成为一个高自由度的元宇宙。用户可以制作自己的虚拟空间和虚拟物品，还可以通过参与元宇宙中的游戏和出售原创虚拟商品获得经济收入。
　　GREE相关负责人认为，Vtuber的流行，意味着未来全人类都会拥有自己的虚拟形象，但这还不够。好的元宇宙应该向用户提供有助于构建人际关系、长时间停留在虚拟世界的机制。并不是只有3D画面才能叫虚拟世界，让用户感受到社会性更为重要。
　　目前Fancy有“chat、party和me”三个Tab。
　　在正式开始使用之前，用户需要先根据性别选择自己的Avatar形象，
　　Fancy虚拟形象整体定位为二次元风格，用户可以从Fancy提供的素材库中选择素材对Avatar的五官、头发、服饰、鞋履装饰进行调整。
　　从素材供给来看，Fancy提供的选项相对丰富，多数为免费使用但也有部分需要通过爱心购买，标价30300爱心不等，而爱心需要完成系统任务获得。
　　在设定完成后，用户可以选择自己感兴趣的动作以及喜欢的Avatar背景墙进行“合影留念”，照片可以分享至平台好友、用作头像或者保存到手机。
　　Fancy也保留了传统社交的“标签”功能，用户可自由选择符合自身特点的标签，丰富的标签让用户在Fancy上的身份更加立体和饱满。另外，用户也可以邀请好友评价对自己的印象，有点像同学录。
　　目前，Fancy主要提供提供扩列、群聊和语音派对等3个社交场景。
　　（1）扩列。用户可通过扩列功能，关注陌生用户并与其进行图文聊天。无需双方同意即可开始对话，确实降低了用户社交的门槛，但也有面临骚扰的可能性。
　　（2）群聊。当双方互相关注后，即可成为好友。用户可以邀请好友组建群聊，既可以在群聊中社交，也可以加入彼此的派对房间。
　　（3）派对。用户可自由加入或创建语音派对房，和大家一起实时Party。房间主人可以自由更改房间的名称、主题、公开范围以及房间背景和地板图案，Fancy在尝试对现实派对环节进行轻度还原。
　　用户以2DAvatar的形象出现在派对，在派对房内用户除了可以进行文字、语音聊天，还可以通过更换不同的动作，或使用庆祝、害羞等互动道具来进行更深度的交互。
　　如用户愿意，也可以在房间内开启AI人脸识别功能，AI会自动识别头部动作、眨眼、说话等状态，Avatar表情也会随之实时同步。用户也可以直接将派对房推流到YouTube平台，进行派对直播。
　　2021年以来，除了海外产品Reality，实际上BigoLive、Uplive、Yumy等中国出海产品也一直积极布局于此。对于用户而言，虚拟实时动态捕捉已经不是一件新鲜事儿，而面捕的表情灵活度、延时Avatar的可编辑度、适用vTuber的虚拟场景正成为角力重点。
　　尽管Fancy仍处于十分早期的阶段，但Fancy的上线时间、尝试方向似乎又有些耐人寻味，至于发展成果，我们也将持续追踪。