AI数字员工核心技术解析与应用案例

　　导读：随着虚拟现实、数字孪生、区块链等新兴技术的日趋成熟，元宇宙相关产业正迎来井喷式的发展机遇，当前已在文旅、教育、社交等各领域不断丰富应用场景。而数字人作为真人在元宇宙中的虚拟分身（Avatar），通过AIAR等核心技术深度融合，快速完成数据人构建并应用到元宇宙场景中，实现分身有术和万物有灵，结合NFT数字资产挖掘产业机遇整合数字资源搭建元宇宙生态闭环，能够大力推动数字经济的发展。数字员工作为企业元宇宙的核心要素和关键载体，其重要性不言而喻。虚实科技CEO张金玉老师通过身临其境的虚拟Office体验，别开生面地为大家带来元宇宙专题分享，分享的主题是：AI数字员工企业元宇宙生存之本。
　　本专题介绍围绕下面五个部分展开：数字人基本概念Avatar数字员工核心技术MetaH文旅元宇宙生态系统数字员工场景应用举例元宇宙未来畅想
　　分享嘉宾张金玉北京虚实科技创始人CEO
　　编辑整理吴靖楠厦门国际银行
　　出品社区DataFun
　　01hr数字人基本概念介绍
　　首先和大家分享下数字人的定义、发展背景及数字人分类。
　　数字人，严格来讲，应该分为虚拟数字人（虚拟的）和实体数字人（有实体外形的，比如机器人）。在虚拟世界里，物体、规则、技能、环境等，都将拟人化存在；在现实世界中，可以真人远程操控、与虚拟世界同步数据智能设备直接交互，也为了对抗外部环境，所有人都将拟物化存在。通过数字人，无论是真人还是AI，都可以驱动虚拟和现实中的数字人承载体，实现个人的分身有术、物体的万物有灵，最终让人类可以长生有望。
　　虚拟数字人，也称虚拟人，是指建模、动作捕捉、AI等科技手段，制作出具有人或类人的外貌特征和行为模式并通过显示设备呈现出来的虚拟形象。数字人从20世纪80年代开始，经历了萌芽、探索、初级及成长各个发展阶段，由2D手绘、CG合成、动作捕捉驱动、再到AI驱动、平台化生成，技术路线日趋成熟，逐步走入大众视野。
　　数字人根据切入角度的不同，有如下分类：视觉呈现上，数字人可分为2D型和3D型；2D主要为平面图片或视频合成；而3D需要额外使用三维建模技术生成，信息维度有所增加。交互形式上，数字人可分为展现型和交互型；展现型如抖音美妆博主柳叶熙，重要通过图片、视频方式呈现；交互型则可与真人进行互动。技术实现上，数字人可分为CG渲染型、真人驱动型和AI驱动型；CG渲染指通过计算机技术进行动画合成；真人驱动指通过惯性、光学或计算机视觉等动捕技术完成表情、动作捕捉，实现中之人驱动。而通过多模态和深度学习等技术实现AI驱动为当前技术发展趋势。应用场景上，数字人可分为IP型、功能型、个人Avatar。IP型如数字偶像，其具备身份性且传播力强；功能型如AI数字员工，替代真人为企业提供便捷化服务；个人Avatar如个人数字替身，便于构造沉浸式体验。本体模式上，主要关注数字人的权利义务。数字人可分为原生人、个人Avatar、数字永生体。原生人无对应本体，完全在虚拟世界中创造出来；个人Avatar为由真人创造出来的数字孪生体，数字永生体为真人本体同步，如通过脑机接口、大脑扫描等学习、记录或数据同步。
　　下面，重点分享下虚实科技的Avatar数字核心技术和MetaH文旅元宇宙生态系统。
　　02hrAvatar数字员工核心技术
　　1。Avatar虚拟生命系统
　　数字人VirtualLife虚拟生命技术框架如下图所示。首先通过建模、渲染、换装捏脸等成熟化技术方案快速实现数字人模型构建，并通过中之人动补驱动或AI驱动完成数字人动作表情的生成，在具体场景中，结合场景感知和位姿计算进行场景融合，辅以声音、语义、人脸、手势、姿态等多模态AI智能感知及识别，完成数字人与真实世界的交互及呈现。通过自然语言处理、快速知识图谱构建数字人认知能力图谱，以情绪、性格表现形成数字人人格，最终形态是搭建数字人生命数据库。从元宇宙生存能力等级上，划分了5个Level，最高等级的元人，将在元宇宙中数字永生的存在。
　　以数字人VirtualLife虚拟生命技术框架搭建全球首创的Avatar虚拟生命系统，可以让每个真实世界的人和物体都快速构建出自己在的数字生命，拥有自己的形象、表情、动作及知识图谱，并在真实世界中呈现和互动，实现分身有术万物有灵。这是一个ARAI深度融合的SaaS平台，系统分成了5个层面，平台层是系统的核心框架，提供虚拟生命构建、管理和基础能力，AI算法层通过机器学习、深度学习等让虚拟生命可以通过AR、位置、语音等多种技术相互辅助，清晰定位每一物体的唯一性并进行交互，3D算法层实现多样化元宇宙场景的快速结合及渲染适配，高度解耦的功能中台层是各种功能服务的沉淀，如互动问答、前台接待、工作汇报、RPA操作等功能，方便用户直接调用；展现层主要实现工程化和终端适配，支持手机Pad大屏AR和VR眼镜以及3D全息等多场景应用。
　　2。Avatar快速知识图谱
　　虚实科技认为，在整个虚拟生命系统的技术栈中，其核心技术为知识图谱快速构建的能力。通过手工导入、系统生成、API接口对接等多种形式实现原始知识的快速获取，形成结构化、非结构化或半结构化数据，通过多种技术手段完成信息过滤及抽取，进行知识融合、知识优化，进而形成意图知识图谱，再调用惯常用语、动作表情、性格情绪等功能实现用户的意图识别和情绪理解，并和与之相对应的动作表情相结合，灵活运用图片、文字、视频、附件等多种方式，通过Avatar交互界面最终呈现给用户。此外，知识图谱还可以对收集以及生成的信息进行数据分析，通过深度学习、模型训练等不断增加知识内容，丰富知识结构。
　　03hrMetaH文旅元宇宙生态系统
　　1。元素NFT
　　NFT（非同质化代币NonFungibleToken）是一种区块链上的技术标准，它将区块链技术的特性赋予数字产品，让这些虚拟物品拥有了不可篡改的唯一凭证。元素NFT并非图片数字藏品售卖平台，而是以3D内容和AI能力为主，将元宇宙中的各种物品打造为真正具有价值的3D数字资产，从而实现数字版权的合法保护、快速授权和数字产品的有效交易、快速应用。
　　2。MetaH文旅生态系统
　　任何虚拟世界的要素都可以打造为NFT数字产品，以AI赋能的NFT为基础，通过编剧、作家实现剧本创作和剧本关联，并匹配相应的实地教育内容，以故事化、内容化的方式，运用ARVR技术打造沉浸式场景体验，打通线下实体商家服务，通过优惠券活动完成导流获客，最终在前端通过社交游戏APP或小程序完成虚实联动，打造完整的文旅元宇宙生态系统闭环。
　　04hr数字员工场景应用举例
　　1。发布虚拟Office，实现分身有术
　　虚拟Office是虚实科技将于近期发布（2022年世界机器人大会，8月21日）的新产品。本次分享开篇张金玉老师便带领观众进入元宇宙世界，体验虚拟会议室、虚拟展厅、虚拟吧台、虚拟讲座等核心功能，用户除了可以以数字分身身份在虚拟Office中和同事进行交流互动，还能召唤服务于大众的NPC（所有人可见）和服务于个人的Angel（只有个人可见），724小时为主人提供便捷化服务。在虚拟Office中，用户可以在真人驱动、AI驱动两种方式随意切换，驱使数字员工展开与虚拟世界的交互，快速换装，真正实现分身有术。
　　2。结合知识图谱，助力北京中轴线申遗
　　京宝儿是虚实科技打造的AI数字虚拟人，它从2万多名参赛选手中脱颖而出，成为30名北京中轴线申遗助力团中唯一的AI虚拟人。正在结合知识图谱面向中轴跟实景结合，打造完整、生动的剧本故事。
　　通过操作演示，搜索万宁桥关键词带来相关知识关联，如万宁桥下的镇水神兽，中国的象征等，点击镇水神兽进入词条再进行搜索关联，进而引出火烧潭柘寺，水淹北京城典故，通过地标、视频、互动问答、二十四节气元宇宙展厅等多种方式呈现老北京故事，传播中国传统文化知识，构建一整串完整故事路线。
　　3。构建NFT及作家虚拟分身，打造元宇宙书房
　　如下通过PDF电子书导入的方式快速构建知识图谱并形成的NFT数字资产，在新书发售时当读者购买该书的时候，同时也购买了书本的NFT。通过书本作者的Avatar虚拟分身打造了元宇宙数字书房，可以跟读者进行智能互动服务，讲解、交流书籍相关的知识，让读者能够身临其境地感受作者的思想内涵和创作思路。
　　4。基于MetaH交互叙事引擎，打造AR元宇宙剧本游戏
　　基于MetaH文旅生态系统，打造元主角AR实景剧本杀游戏，面向动画师、艺术家开展合作，打造AR元素NFT，面向编剧、作家等生成智能剧本，在智能剧本中，AIDM（剧本杀主持人）NPC（剧本杀道具人）能够实现多角色互动社交，并通过与实地景区等开展场地合作，打造极具故事感和线索性、虚实联动的元宇宙社交游戏。
　　05hr元宇宙未来畅想
　　虚实科技认为，元宇宙将由三部分组成。第一是数字孪生世界的智能操作台，无论是生产生活，都将搬入元宇宙中，实现效率的提升；第二是兴趣爱好的实现承载体，包含游戏、娱乐等，满足各种奇思妙想的实现；第三是星辰大海梦想的模拟仿真试验地，在元宇宙中集合爱好者，构建虚拟组织进行探讨交流，实现原型设计，并进行验证，未来实际投产，就可以用于真正的宇宙开发。
　　虚实科技正在与著名科幻作家郑军老师开展合作，即将发售宇宙开发计划NFT，通过多场景、多装备等模拟合成试验，打造高度沉淀、趋于未来的高度协作平台。这是人类迈向更高端科技研发应用的途径，也是最高效组织人员、最好利用资源、最低成本研发、最快速验证调整的方法。宇宙的宏大叙事，不能只在故事层面展开，更应在工程层面构建！而元宇宙，是其实现的最好承载体。而人，也只能以不受物理环境和心理影响的AI数字人方式，才能飞向星辰大海。
　　今天的分享就到这里，谢谢大家。
　　分享嘉宾
　　张金玉
　　北京虚实科技创始人CEO
　　北京虚实科技有限公司，创始人CEO；
　　中国科技新闻学会大数据专委会专家；
　　北京信息产业协会元宇宙专委会专家；
　　《中国元宇宙白皮书》编委（主笔技术篇虚拟人，产业篇文旅）；
　　《元宇宙赋能文旅：理念、路径及方法》作者；
　　个人曾获得第一财经年度菁英人物，产品曾获得工业APP大赛一等奖、虚拟现实大赛优秀奖、VRAR创新奖、国家旅游科技创新奖、技术创业协会卓越成果奖、1024开发者节多模态AI数字人冠军等多个奖项。
　　DataFun新媒体矩阵
　　关于DataFun
　　专注于大数据、人工智能技术应用的分享与交流。发起于2017年，在北京、上海、深圳、杭州等城市举办超过100线下和100线上沙龙、论坛及峰会，已邀请超过2000位专家和学者参与分享。其公众号DataFunTalk累计生产原创文章800，百万阅读，15万精准粉丝。