高通在ChinaJoy上的AI元素，让我看到泛娱乐时代的美丽图景

　　泛娱乐，是基于互联网和移动互联网多领域共生而形成的，泛娱乐时代，人们消费的是娱乐内容，但有一个领域同样不容忽视，那就是承载丰富娱乐内容的智能终端。
　　泛娱乐时代，人们娱乐的形式、内容、时间地点变得丰富而多样，对于智能硬件的要求也更多，不仅要求强大的性能，更要有良好的交互，丰富的功能…… 为了满足这些需求，有一项技术受到各行各业的普遍关注，那就是 AI。
　　当智能终端融入了出色的 AI 能力，就能为广大消费者提供更加丰富有趣的智能泛娱乐体验。这一点在今年刚刚举行的 ChinaJoy 上也有深刻体现，作为移动连接技术提供商的高通，就通过丰富的 AI 技术演示，为我们展现了 AI 驱动的精彩的智能泛娱乐生活。
　　骁龙主题馆，随处可见的 AI 与娱乐
　　今年的 ChinaJoy 上，高通再次联合众多生态合作伙伴打造骁龙主题馆。在巨大的骁龙主题馆里，从智能手机到移动电竞，从 Wi-Fi 路由器到极具沉浸感的 AR 设备，高通为广大硬核玩家、游戏发烧友和骁龙粉丝打造了一个充满科技感、智慧感、新鲜感的数字娱乐嘉年华，这其中就有很多基于 AI 技术实现的娱乐方式。
　　比如，作为高通长期合作伙伴的虹软，就在骁龙主题馆现场展示了 3D 纸片人总动员的技术，在演示中，我们看到，智能手机只需要拍摄平面上的一处绘画内容，这个二维图像就可以快速化身 3D＂纸片人＂，并且以 AR 的形式呈现，用户还可以与之互动，非常有趣。
　　3D 纸片人总动员利用智能手机摄像头的 AI 视觉技术识别平面中的图案，然后通过算法将这个图案转换成 3D 模型，最后输出 3D 立体的＂纸片人＂，这种创新的交互方式，可以让我们使用智能手机增添许多乐趣，比如未来你就可以和小伙伴各自快速创建一个＂纸片人＂，然后用 AR 的形式彼此互动，妙趣横生。
　　除了纸片人总动员，虹软在现场还演示了单摄 3D 建模的黑科技，这个技术可以让智能手机随时随地对现实对象进行扫描，无论是人还是物体，都可以立刻生成同比例、高精度、高逼真度的 3D 虚拟模型。IT之家在现场能够发现，这个生成的虚拟模型具有精细的纹理和图像采集，真实还原了原来物体的色彩和细节，整体效果还是很出色的。
　　并且，针对生成的人物、动物或者卡通 3D 模型，再结合 AR 算法和 AI 技术，这个模型能够观察用户的肢体动作或者手势，和用户进行互动。这个技术将 AI 与建模、AR 结合在一起，形成虚拟的立体形象，相信在未来数字娱乐领域会有很广泛的应用，比如利用很多个这种快速建模的形象进行的游戏等等，可以大大丰富人们的娱乐生活。
　　更重要的是，完成 3D 建模的手机哪怕只有单摄像头也能完成，这其中涉及到很强的 AI 识别能力，均是在于高通合作的基础上实现的。
　　除了虹软，在 ChinaJoy 骁龙主题馆的现场，还有很多与 AI 相关的技术演示，都可以在智能泛娱乐领域发挥重要作用。比如下面这个来自相芯科技的 AI 虚拟形象技术，你只需要站在摄像头面前等待 3 秒，就可以在屏幕上看到卡通版的自己，这个卡通的虚拟形象会和你的外貌很相似，你的面部特征、头发类型、胡子类型等等，都可以变成可爱又有趣的卡通形象，你的表情变化，卡通形象的表情动作也会随之变化，看起来惟妙惟肖。这个技术在现场吸引了很多人驻足观望，大家都很想知道自己在卡通世界里会是什么样子，也觉得自己有一个虚拟版的形象是一件很酷的事情。
　　现场的相关技术人员告诉小编，这个虚拟形象是通过云服务器在云端形成的，同时客户端的 SDK 也会用于进一步对虚拟形象进行个性化定制和互动，这个过程借助了高通骁龙移动平台的 AI 能力以及 XR 技术，结合相芯科技自己的虚拟化身相关技术，共同呈现了有趣的二次元风格虚拟形象。
　　目前这个技术已经有了实际的应用，比如小米上半年发布的小米 11 Ultra 内置的萌拍 Mimoji 3.0 版本，就使用了相芯科技技术。骁龙 888 为萌拍 Mimoji 3.0 提供了强劲的 AI 算力和图像信息处理技术的支撑，从而让萌拍 Mimoji 3.0 能够在较低功耗水平下的完成高质量的面部二次元虚拟渲染。
　　说到 AI 驱动摄像头实现的趣味玩法，IT之家在骁龙主题馆现场还看到了更多由骁龙 888 带来的丰富的 AI 影像演示。
　　比如中兴手机就在现场展示了搭载骁龙 888 移动平台的三主摄影像旗舰 Axon 30 Ultra，这款手机搭载了三颗同样 6400 万的超感光主摄、超人文主摄、超广角主摄，巨大的像素量在进行 AI 运算时是一个巨大的考验，骁龙 888 移动平台搭载的第 6 代高通 AI 引擎则可以轻松应对。
　　在骁龙 888 AI 能力的加持下，Axon 30 Ultra 可以实现有趣的影像玩法，例如在现场你就可以体验一键拍摄全焦段照片的功能，照片在不同焦距间自由缩放，实现＂先拍照、后变焦＂，此外我们还看到了多摄同拍同录、超级月亮 Ultra 模式、希区柯克变焦等创新影像玩法。无疑，这些由强大 AI 能力带来的新鲜影像玩法，能够让消费者们的娱乐生活更加多彩。
　　还有更高阶的 AI 应用，比如小编在现场还看到了创屹科技 Future Mind 专业机器人与现场体验者进行＂AI 乒乓球电竞＂对战，让参与者领略数字竞技体育的别样魅力。
　　Future Mind 专业机器人采用高通 Cloud AI 100 平台，利用强大的的人工智能技术识别并捕捉、分析高速运动状态下乒乓球的位置，更与引入了高通的边缘侧运算平台进行快速的 AI 运算，最终能够在于人类的较量中不落下风。
　　总之，今年 ChinaJoy 的骁龙主题馆中，你可以处处感受到 AI 技术是如何极大丰富广大消费者的泛娱乐生活的，它通过在过去很难想象的智慧化能力，结合各种硬件终端，为我们娱乐生活开拓出很多新的场景，新的玩法。
　　而这些 AI 技术和能力的来源，大部分都来自高通骁龙移动平台的 AI 引擎，特别是本届 ChinaJoy 上随处可见的骁龙 888 移动平台，其第 6 代高通 AI 引擎正是一众创新玩法的背后功臣。
　　应用落地，不止于骁龙 888 的第 6 代高通 AI 引擎
　　在 AI 技术炙手可热的今天，我们已经听过太多遍关于 AI 的美好畅想。但是将 AI 落地到实际应用中却并不是容易的事，不仅需要强大的算力、技术支撑，还需要有完整的解决方案，有终端承载，有联动产业上下游的能力。而这些，对于骁龙 888 的第 6 代高通 AI 引擎而言，对于高通而言，都不是困难，而是优势。
　　高通很早就开始了对 AI 的研究，在终端侧专门引入 AI 技术也是从骁龙 820 移动平台这一代就开始了，到骁龙 888，AI 引擎已经经历了 6 代的积累和发展，为智能手机向＂智慧化＂发展作出了重要的贡献。
　　在第 6 代高通 AI 引擎上，高通将人工智能引擎的整体算力提高到了 26TOPS，相比上一代的 15TOPS 有巨大的提升，如此强大的算力为终端在各种场景下的广泛应用提供了保障。
　　而第 6 代高通 AI 引擎算力提升的背后，包含了高通的众多技术创新。首先我们知道，AI 引擎并不是一个单独的 NPU 单元，而是整合了 CPU、GPU、Hexagon 处理器等 SoC 的内部运算资源，并通过合理的实时调配机制实现的统一的 AI 框架。
　　在骁龙 888 移动平台上，Kryo 680 CPU 和 Adreno 660 GPU 都有显著的升级。Kryo 680 CPU 用上了全新 CPU 架构，是行业首个采用 Arm Cortex-X1 架构的移动平台，这令 CPU 整体性能提高 25%，同时整个 CPU 丛集的整体功效也提高了 25%。而 Adreno 660 GPU 的图形性能相比上一代 Adreno 650 提升了 35%，能耗相比于上一代则降低了 20%。在参与 AI 运算时，Adreno 660 GPU 的 AI 性能也有 43% 的提升。
　　更重要的是骁龙 888 移动平台采用的 Hexagon 780 处理器。这款张量处理器采用了融合 AI 加速器架构。所谓的融合 AI 加速器架构，意思就是在之前骁龙 865 的 Hexagon 处理器中，有标量、张量和向量加速器，但他们是分开的，而在骁龙 888 的 Hexagon 780 处理器中，这些加速器之间的物理距离几乎消失了。
　　同时，高通还在这三个不同加速器之间添加了很大的共享内存，从而让他们更快、更高效地共享和移动数据。高通称，专用共享内存的加入让 Hexagon 780 在单一应用中的性能提升 16 倍，在某些应用中，数据交互时效最多可提高上千倍。
　　再具体到这些加速器自身，性能也得到了提升，标量加速器的性能提升了 50%，而张量加速器的处理速度是前代的 2 倍，更重要的是，在性能上涨的同时，它们还提升了每瓦特性能，能效相比前代提升 3 倍之多。由此可见，全新的 Hexagon 780 处理器对第 6 代高通 AI 引擎性能跃迁贡献极大。
　　除了这些提升算力的升级，在第 6 代高通 AI 引擎架构中，高通还整合了第 2 代高通传感器中枢。第 2 代高通传感器中枢中，高通增加了一颗专用的、始终开启的、低功耗的 AI 处理器，令传感器中枢 AI 性能提升达 5 倍。这种额外的 AI 处理能力使 Hexagon 处理器可以将高达 80% 的工作负载分担给传感器中枢，从而做到更加省电。高通传感器中枢进行所有处理所需的功耗仅仅不到 1 毫瓦。
　　全新第 2 代高通传感器中枢的存在，让搭载骁龙 888 移动平台的终端能够时刻保持 AI 处理能力的待命，让智慧化的能力始终在线。
　　总之，骁龙 888 移动平台搭载的第 6 代高通 AI 引擎已经拥有顶尖的 AI 处理能力和完善的 AI 功能。当然，只有这些还不够，AI 技术的落地还需要有承载它的终端。而根据高通中国区董事长孟樸的透露，到今年 7 月，全球已经有 130 多款基于骁龙 888 的终端，终端厂商们充分利用了骁龙 888 旗舰平台的领先 AI 特性，将他们应用在智能手机的各个体验环节中，包括影像、游戏、音效等等，例如我们前面提到的小米 11 Ultra 内置的萌拍 Mimoji 3.0，还有红魔游戏手机 6R 的 TC 游戏补帧技术等等，都通过 AI 技术为用户的娱乐生活带来了诸多乐趣。
　　除了与终端厂商的合作，高通还采取了更多措施方便开发者调用第 6 代高通 AI 引擎的能力，更积极与应用软件的开发商合作，推动更多 AI 娱乐应用的落地。
　　比如说，在第 6 代高通 AI 引擎中，高通扩展了用于 AI 加速器的开源编译器 TVM，支持 Hexagon。现在，开发者可以用几行简短的 Python 代码编写自定义算子，为 Hexagon 编译，并直接插入高通 AI 引擎 Direct 框架。这无疑可以帮助开发者更方便、更全面地调用骁龙 888 第 6 代高通 AI 引擎的能力，创造出更多智能且实用的娱乐应用。
　　再比如，高通还一直在和全球知名的社交应用 Snapchat 合作，而 Snapchat 目前正在使用骁龙 888 的 AI 模型增效工具包，量化他们的一系列 AI 镜头模型，以提高人脸识别的准确性和性能。这样，用户就可以即时应用最新的滤镜，在社交娱乐中获得更多的乐趣。
　　通过第 6 代高通 AI 引擎的强大性能，高通以骁龙 888 为整体解决方案，并借助智能手机等移动终端，将这种 AI 能力应用于多样化的泛娱乐场景中，并于产业上下游合作，真正将 AI 服务于普罗大众的娱乐生活，令现实因为有了 AI 的存在而更加五彩纷呈。
　　结语
　　如果把泛娱乐时代海量创新、好玩、丰富的娱乐场景比作春天土壤里开出的满山坡的花朵，那么 AI，就相当于一场场春雨，润物细无声，将万紫千红争奇斗艳的繁荣景象带到人们面前。
　　而云聚成雨，高通就像催动春雷萌动的的云层，他们用自我在技术上的探索努力和广泛的合作推动了 AI 的落地和应用，让技术真正能够普惠大众，让泛娱乐时代的花园更加艳丽多姿，美不胜收。