童话说说技术创业美文职业
投稿投诉
职业母婴
职场个人
历史治疗
笔记技能
美文纠纷
幽默家庭
范文作文
乐趣解密
创业案例
社会工作
新闻家居
心理安全
技术八卦
仲裁思考
生活时事
运势奇闻
说说企业
魅力社交
安好健康
传统笑话
童话初中
男女饮食
周易阅读
爱好两性

AI产品分析(一):抖音黑科技背后的计算机视觉技术

1月1日 圆通道投稿
  此次准备专门写一系列的文章介绍AI产品,以人工智能技术相关的产品体验为主,指明其后背的核心技术关键词,这是一个更加贴近工业实践的尝试。
  首先选取爆红大佬抖音作为第一个代表,为了更具针对性,我们只体验抖音基于计算机视觉技术实现的几项高大上功能,主要从该项功能点使用的基本流程、满足的用户需求、技术关键点及体验的整体感受进行分析,希望可以加深大众对计算机视觉技术及人工智能产品进程的认知。
  抖音提供的功能很多,照片视频都不在话下,搞笑如各式贴纸、妆容术、换头换脸、图像风格迁移等,浪漫如“吹蒲公英”,严肃如后台的“鉴黄”,话不多说,开始我们的体验吧
  1。美丑胖瘦收放自如
  不管有没有玩过抖音,大家或多或少都在朋友圈或微博看见过如下类似的搞笑照片。所以,大家应该就更加能理解,为什么这么多人每天活在抖音里“醉生梦死”,因为比起苦难的生活,这里真的比较轻松有趣对吧?
  这些看似搞怪的图片,在抖音里实现起来其实很简单。
  其基本流程如下:打开抖音app,点击屏幕正中间的“”按钮,进入照片视频模块,选择道具图标,然后在图标工具库中选中自己想要的效果,则人在画面中的成像,就可以开始各种作妖。尤其是眼睛、眉毛、嘴巴、鼻子等脸部主要关键部位,可发生明显变形,打造出各种连亲妈都难以辨认的形象。
  同时,在录制小视频的过程中,除了可以感受到脸部发生变形,同时可能还会相应地配备一些配饰,比如:在头顶配合灵活的“蝴蝶结小辫儿”,画面十分生动、形象。简言之,体验的流程简单且充满乐趣,对于很多抖音用户而言,他们十分乐意去探索这样多面搞怪的自己。
  如图,是抖音道具图标的极小部分截图,从中可以感受到整体功能设计呈现出多样性、娱乐性、趣味性的效果。任何产品的功能设计,其定调都紧紧围绕着产品的目标用户,抖音主要的目标用户群体定位为90后追求潮流个性的年轻人,而这类人群喜欢刺激、渴望表达,但又相对情绪化,所以他们具有观看或发布新鲜内容以打发无聊时光及获得表达自我价值的需求。
  为了更好地满足用户的上述需求,抖音提供变美、变丑、变瘦、变胖等功能,使得年轻人的互动被极大地多元化,且整个操作的过程成本极其低廉、步骤也十分简单。
  同时,由于抖音平台本身的算法优势,功能的实时响应性能也很优秀,基本只要脸一进入画面,立马就能实现拉伸和变形,用户基本感受不到延时,体验十分流畅。这进一步体现,抖音的成功,更多的是因为他们擅长于结合技术,以更轻松的方式解决年轻人的需求痛点,抓住大部分用户的心。
  上述脸部变换的功能主要基于人脸关键点检测技术实现,该技术通过定位脸部关键部位,并在关键部位上对像素点进行变换,达成各种不同的效果。人脸关键点检测技术也被广泛地应用于直播及短视频,如网易的游戏直播、YY直播等,基于该技术衍生出了很多有趣的功能,带给用户越来越新奇刺激的体验。
  技术关键词:人脸关键点检测。
  2。换头不是梦
  上一项功能只是变形,抖音里还有更神奇的技能。如图,为了实现“换头”效果,同样地其制作流程操作为:启动抖音来到拍摄页面,选中“狗头”或“猪头”图标,则画面中自己的脸部就会被完全遮蔽。同时,如果用户眨眼或张嘴,会看到画面中的相同部位同步变换,录制小视频时眨眼的猪头十分憨萌,用来撒娇应该百试百灵吧,整体体验十分新奇。
  该项功能进一步提升了对年轻用户的刺激感,因为对某些用户而言,他们一方面想要寻求刺激、内心具有有强烈的表达自我的意愿,但同时又不可避免地想要制造一定的神秘感,或用户本身略带羞涩感,而这一功能正好满足了这部分的需求。
  那么,到底是基于什么样的计算机视觉技术,可如此精准地定位并恰到好处地实现“偷梁换柱”呢?
  实质上,该项功能的实现主要应用了图像语义分割技术。具体地,抖音通过对人体进行语义分割,获得人体各个部位如头、脸、手、脚的位置及标签,并通过用户选定的工具模板,将对应部位替换,实现最终的“换头”。
  相比目标检测而言,图像语义分割是精确到像素点的分类,因而替换的过程看起来也更加地智能和精准,用户体验更佳。但体验中发现不足的是,或许是算法分割准确率的问题,尝试张开嘴巴时,随之张开的却不是头像里狗的嘴巴,而是自己的血盆大口,而有些道具在使用中就不会出现类似情况,这可能也是当前产品的一个小Bug。
  技术关键词:图像语义分割。
  3。想要的风格全都有
  计算机视觉里比较热门的图像风格迁移技术,在抖音里也有所体现。
  如图所示,上述功能实现的流程为:启动抖音app进入拍摄页面后,在道具库中选中白色的素描花朵图标,随后对输入的键盘画面即可进行风格的实时变换。原来低调科技风的键盘,瞬间变成了漫画素描式风格。
  同样地,也可以实现对人像的风格变换,看到自己的脸在画面里变成“漫画脸”,感觉也挺有意思的。
  基于图像风格迁移,还可以实现妆容变换。如图,是抖音里的一个贴纸妆的效果,通过妆容的迁移,用户本身可能不带妆,但清晰可见画面中眼线、眉毛、嘴唇都被化上相应的妆容,且效果自然贴切。同时妆容切换只需要重新点击选中另一个图标即可,可以很好地帮助那些小仙女用户实现快速变妆拍照。
  该项功能主要是为了迎合部分追求文艺风格的用户,及大部分爱美女性用户的需求。
  试想若一个产品可以使得用户以超低的成本,随时体验自己不同风格的美,极大地满足用户的虚荣心,则该产品的用户黏度会越来越高。但体验中也有一个感受是,抖音里某些功能存在相近或冗余,比如:之前大火的所谓控雨术,在体验中发现并没有什么“控制的效果”,同时对于道具的分类也不是十分清晰,有点混乱,可能也是由于功能选项实在是太多了。
  技术关键词:风格迁移。
  4。带心爱的她去吹“蒲公英”
  大家觉得程序员都是呆板、木讷的,然而抖音程序员实现的“蒲公英”功能却可以说是相当浪漫了。
  如图所示,该功能的基本流程逻辑为:启动抖音app来到拍摄页面后,选中“吹蒲公英”工具图标,画面里就可以看到有几株漂亮的蒲公英,用户只需要对着屏幕,张大嘴巴做吹气状,则画面里的蒲公英就会像真的蒲公英一样四处散开,营造出一种唯美的意境。
  想象一下拍摄小视频时“吹蒲公英的现场”,画面感很真实,甚至于相比大自然的真实场景,更加美好。而且由于是虚幻的,蒲公英永远都吹不完,这应该戳中了许多抖音小仙女的心。
  该功能是抖音独创,有了它,你就可以带心爱的她天天吹蒲公英了。
  而提出该项功能需求点的初衷,一方面是为了满足平台用户少女的浪漫情怀,而另一方面也是为了帮助单身男青年实现低成本“求偶”。同时这也进一步强化了抖音音乐化、文艺化的定位和格调。
  “蒲公英”功能的实现,主要采用了人脸表情识别技术。但是在该项功能中,体验不足的是,用户只有将人脸放置在屏幕正中间,蒲公英的吹散效果才比较好,而且通常都是检测到动作后,一旦触发,就会把屏幕中所有的蒲公英都吹散开,没有办法实现单独吹某一朵蒲公英的行为。可能是当前算法在实际运用中,仍无法十分精准定位和检测的缘故吧。
  不可否认,抖音的成功还在于,它通过冰冷的技术,创造性地为用户带来了暖心的情怀和浪漫,这也是值得许多人工智能产品借鉴的一种精神。
  技术关键词:表情识别。
  5。时刻睁大的“鉴黄”双眼
  自直播、短视频应用兴起后,各种监管问题层出不穷,而对于抖音而言,用户生成的内容是海量的,基于此,抖音在用户看不见的后台,采用了基于深度学习的“图像分类”技术对用户上传的图片、视频资料进行智能监管。
  在训练鉴黄系统的过程中,输入如图所示的大量训练数据,并且这些数据都携带有对应标签,标签值标明了该图片是否属于黄色图片范畴。则模型通过学习并“记住”黄色图片的特征,并在面临新的输入图片或视频时,提取相应特征后,结合学习的经验判断,该图片属于属于黄色图片的概率,最终分类概率高于一定阈值的内容会被标记敏感选项,需进行二次分流检测或人工鉴别。如此对图片视频资料进行分类筛选,以保证内容的健康性。
  在体验时也发现,相较其它短视频或直播类的平台,抖音的整体环境的营造以及内容的调性相对优良,色情、暴力及敏感内容较少,则抖音背后强大的算法技术功不可没。
  抖音属于头条系产品,在算法的性能及应用上本身就具有一定的优势,假以时日,一定可以推动鉴黄算法朝着自动化及智能化更上一层楼。
  技术关键词:图像分类。
  总结
  综上,我们可切实地感受到,计算机视觉技术已不仅仅停留在理论层面,而是落地到许多产品中,为用户带来了许多活力与惊喜,而且往往在落地的过程中,“脑洞”和用户痛点的捕捉十分重要,因为技术本身没有温度。
  但是出色的AI产品人,一定懂得如何结合用户的需求,从技术中看到无限可能,为用户创造更优秀新奇的体验,这也是人工智能落地的核心要义所在。
  人工智能正不知不觉地慢慢改变人类的生活,作为计算机视觉的从业或爱好者,也应当保持对行业产品动态的持续关注
投诉 评论

为什么越像人的自然语言交互工具,越容易让人失望?你以为自然交互工具越拟人化越能让用户感觉亲近,越受用户欢迎?其实不然。从有了Siri作为先例,拟人化已经成为了自然语言交互工具的必备能力。不论是服务于个人用户的AI……人脸识别:方式、场景、设计思路本文笔者将与大家详细讲述:人脸识别的方式、人脸识别的场景以及人脸识别产品的设计思路。当下AI行业趋势在向商业化转变,自动驾驶的量产,城市、社区智慧化改造等可见一斑。AI产……机器学习关于聚类算法,你知道多少?本文笔者将对聚类算法的基本概念以及常见的几类基本的聚类算法的运作逻辑以及思路,还有优缺点进行分析。基本概念1。定义聚类就是对大量未知标注的数据集,按照数据内部……槽位背后AI专家系统的5个阶段(下篇)上篇主要是按照专家系统发展阶段的不同,可以将ES分为如下5个阶段:基于规则的、基于框架的、基于案例的、基于模型的、基于网络的。本文先对ES的落地应用进行举例,然后讲技术发展,其……槽位背后AI专家系统的5个阶段(上篇)本文笔者着重介绍专家系统的五个发展阶段基于规则、基于框架、基于案例、基于模型和基于网络的基本逻辑及侧重点。有许多AI产品朋友经过一定阶段的学习和实践能够掌握槽位在机器人客……打造课堂教学的“想象空间”,优化智慧课堂产品近些年来,智慧课堂产品正频繁出现在校园中,主打高效教学、高效学习的智慧课堂却没有得到教师群体的青睐,归根结底还是智慧课堂产品没有达到用户的想象空间。2019年对于智慧教育……AI产品分析(二):深扒美图秀秀中掳获万千少女芳心的“AI秘这是AI产品分析的第二期,沿着同样的思路,本期一起深扒美图秀秀掳获万千少女芳心的“AI秘籍”上一期我们一起体验了抖音里的各项黑科技,见证了抖音以短视频为载体,基于人脸关键……儿童教育型智能机器人市场、供应链分析文章是针对儿童教育型智能机器人市场做了一个市场和供应链的分析,enjoy做这个分析的背景,是因为公司尝试拓展业务线,原来主要专注于室外机器人移动底盘的开发,未来想以移动机……AI产品分析(一):抖音黑科技背后的计算机视觉技术此次准备专门写一系列的文章介绍AI产品,以人工智能技术相关的产品体验为主,指明其后背的核心技术关键词,这是一个更加贴近工业实践的尝试。首先选取爆红大佬抖音作为第一个代表,……紧抓未来趋势,为汽车之家设计VR展厅在VR发展初期,有非常多的应用场景可以想象,几乎涉及到我们生活的方方面面。这里我们就来聊聊汽车市场,设计一个VR版本的“汽车之家”,看看VR在汽车领域可以有怎样的发展!一……想从“火神”手中抢回古建筑,AI为首的黑科技们有哪些能与不能前沿的AI技术有望被用于火灾事故中,被给予厚望的AI能发挥其优势吗?持续了5个小时的大火,将拥有850年历史的巴黎圣母院付之一炬。在这个全人类为之惋惜的时刻,我们同……AI场景,3步懂图像识别产品本文重点讲述基于成熟的第三方AI平台阿里、某度、腾讯、谷歌等等中选择一个可供使用的SDK基于Python语言实现图像识别功能的GUI界面,从而一观图像识别车型、图像识别文本产品……
每天听本书升级成为得到战略级产品背后的逻辑每天听本书为何成为得到的战略级产品?其背后的逻辑究竟是什么?文章对此展开解读。罗辑思维昨天举行知识发布会002,推出每天听本书年度会员产品。得到其实早就有这个服务,……为什么美团、饿了么天生是招黑体质?懒人经济是上门O2O的原动力,因为用补贴烧出来不少伪需求,一向是招黑体质,但为什么外卖这样的刚需也在劫难逃?三年前的一次闭门会议上,京东VP们研究了当时火得一塌糊涂的上门……手册在线教育发展三部曲之后,如何转型迎接“新教育”?(一)本文作者希望通过“是什么发展历程当前阶段当前解决什么核心问题解决方案的模型”,这样的路径给出一个在线教育发展直观的、非数据层面的概要认知。enjoy……电商乱象,无形地推动了互联网消费保险前进步伐?一个新经济业态的发展总有一个由乱象转向秩序的过程,而这个过程往往伴随着许多衍生品的产生,带动更多产业的发展,电商发展也是如此。近年来,“双11”、“双12”、“6。18”……O2O商业闭环的魔力O2O商业闭环的背后蕴含着无穷的商业力量。当很多人谈论“闭环是一个伪命题”的时候,相信不少真正的业内人士都会报以“呵呵”。所谓互联网的闭环,其实在很大程度上来讲指的……月增长用户超千万的抖音,该如何避免昙花一现的命运?整个7月,抖音全平台的用户增长超过了1200万。它的快速蹿红和进击,也让快手产生了一丝警惕。若叫板快手,月增长用户超千万的抖音真能做到吗?北快手南抖音,不知道从什么时候起……产品经理日报第1036期知乎版“微博”:“发现”Tab被替换哈喽,你我相约七点半,你来了么产品经理日报继续为您带来今日最新的资讯:在4。0新版知乎应用里,最下面的“发现”Tab被替换成“想法”;沃尔玛携手Google推语音购物;蚂蚁金服……在去标签化的品牌策略上,快手和火山小视频是怎么做的?快手在策略上走向了问题的反面,相比于洗掉农村的“俗”,快手更愿意开拓他们以为更高阶的市场。在打破农村刻板印象上,火山小视频抢先了一步。假如以后农村短视频的俗被“洗白”,用户能想……百度外卖被收购后,外卖的下一战将会在平台打响饿了么和百度外卖在数据上究竟存在怎样的联系?此番收购又会对外卖行业的格局造成哪些影响?本文将为您揭晓。近日,饿了么收购百度外卖的消息让舆论的关注点再一次聚焦到了外卖市场身……百万学习名额开放,24门高人气产品、运营精品课程免费学掐指一算,2017年只剩下4个多月了。计划着抓紧干一票,好跟老板谈加薪,却在事务推进上屡屡受阻?看看年初定的KPI,发现那个数字怎么努力都遥不可及?下决心年底……如何穿着能够迅速减龄?时尚博主告诉你荷叶边印花清淡颜色搭配是减龄!如何穿衣能够迅速减龄?一位时尚博主告诉你,这些元素搭配一定会收获奇效!荷叶边印花清淡颜色背带等等。而四大技能需要您仔细观看哦学会之后整个夏日拍照拍拖不必愁!森姐先给……社交网络和推荐系统的困局一切社交app,始于约炮,兴于炫耀,衰于鸡汤,死于经商。一大概十五年前,A有了人生中的第一台手机,诺基亚6100。那时候中国移动基本还是一统天下,中国联通还小……
友情链接:中准网聚热点快百科快传网快生活快软网快好知文好找作文动态热点娱乐育儿情感教程科技体育养生教案探索美文旅游财经日志励志范文论文时尚保健游戏护肤业界