范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文
国学影视

StableDiffusionAI绘图,利用深度图控制绘出特定姿势

  前面我们已经介绍了ControlNet使用OpenPose控制人物的动作姿态,因为姿态节点图使用点来描述的,所以可能有时控制不是很精确。ControlNet是一种神经网络结构,它通过添加额外的条件来控制扩散模型,从而提高AI绘图的可控性。ControlNet公开了八种不同类别的输入条件,它们分别是:
  1.Canny:边缘检测,通过从原始图片中提取线稿,来生成同样构图的画面。
  2.Depth:深度检测,通过提取原始图片中的深度信息,生成具有相同表面几何形状的图片。
  3.HED:全卷积边缘检测网络,与Canny类似,但更加精确。
  4.MLSD:最小二乘直线检测(Minimum Line Segment Detection),用于识别建筑物等线段结构。
  5.Normal:法线检测,用于提取原始图片中3D物体的法线向量,用于法线贴图和立体效果。
  6.Openpose:姿势识别,用于人物动作,提取人体姿势的骨架特征。
  7.Scribble:涂鸦识别,用于将简单的涂鸦转化为完整的插画。
  8.Seg:语义分割识别(Semantic Segmentation),用于将原始图片划分为不同区域,并标注其语义类别。
  简单了解ContorlNet的原理,对我们进行AI绘画还是有帮助的,这样我们在选择参数时就不会手足无措了。
  它的控制原理一句话概括就是:用ControlNet的某一种模型加上输入图控制AI绘图的输出。
  深度图控制与上次介绍过的OpenPose控制原理相同,两者区别就是使用不同的控制模型和输入图。本次采用深度图和深度控制模型控制AI绘图的输出内容。
  控制原理
  从上面的原理我们可以知道,完成目标需要分两步:第一步,由原始图片生成一张深度图,第二步使用ControlNet的模型control_sd15_depth.pth控制AI绘图生成的人物。
  深度图目前应用已经非常广泛了,例如一张图片生成3d街景。如何得到一个图片的深度图,方法有很多种,网上有各式各样的生成软件,免费的收费的都有。有些专门提取人物,有的专门提取房间的家具等等。这里只介绍其中最简单的一种,它已经作为扩展插件集成在了UI里。对人物的处理还可以,当然效果比不上某些专业的软件,不过作为AI绘画试验已经够用了。插件名:depthmap2mask
  https://github.com/Extraltodeus/depthmap2mask.git
  如果你的AI绘图包是傻瓜包,多半已经包含了这个,如果没有就需要安装这个插件,如下图
  深度图提取插件
  很多人装了后不知道这个插件装在哪里,找半天找不到。
  它在img2img里,因为第一步从图生成一个深度图是处理。最下面有个Script,下拉框选择脚本:Depth aware img2img mask
  下拉框选择
  下拉框选择后就出现了配置框,都使用默认就行。
  配置框注意这里也有ControlNet,因为我们是生成一张深度图,不是去控制AI绘画,所以不要启用它。
  深度图也是用神经网络模型提取图片的内容的,这里选择的midas,第一次运行会自动下载这个模型,比较费时。想了解midas的可以参考
  https://github.com/isl-org/MiDaS
  到目前一切工作准备就绪,找一张图片放进去,按一下生成按钮,就会出现图片的深度图。
  深度图
  第一步到此就完成了,下面开始第二步,前面的介绍可以知道需要下载control_sd15_depth.pth,5.7G的模型放到model/ControlNet目录下面(AI绘图傻瓜包的很多已经下好了)。下载地址:
  https://huggingface.co/lllyasviel/ControlNet/tree/main/models
  8种控制模式的模型
  下载好后就可以进行AI绘图了然后,还是三步走:
  3步步骤
  今天的绘图的主题是《打太极的女弟子们》,太极拳深受大家喜爱,修炼之后身体好…这里选了一些
  1.亚丝娜,来自《刀剑神域》
  亚丝娜
  2.塞尔达公主,来自《塞尔达传说-旷野之息》
  塞尔达
  3.2B小姐姐,来自《尼尔机器纪元》
  2B
  4.蒂法,来自《最终幻想VII》
  蒂法
  在三次元小姐姐中深受喜爱,因为能够强身健体。
  最后是他们的祖师爷(原图)
  原图
  今天的介绍就到这里,我们下回见,关注我不迷路。

胎心率可以看出男宝女宝吗?关于怀孕有很多流传下来的说法。你可能听说过根据胎儿的心率来预测孕妇肚内宝宝的性别。如果心率超过140次分钟,你怀的就是一个女婴。如果孕妇心率低于140次,你肚子内可能就是一个男孩。人体最大的肌肉是哪一块?人体最大的肌肉当属臀大肌呀!哈哈,毋庸置疑。我的那些个减肥的会员,没有不练臀大肌的。因为,练臀,不但可以练出紧致上翘的蜜桃臀,还可以快速燃脂减肥呢!因为,臀部是人体最大的一块肌肉,柳传志会被追回工资吗?原创难矣工资发了税也交了过程合法手续合法无法返回当下汲取教训篱笆扎得紧野狗钻不进亡羊补牢犹未迟也故,及时整改堵住漏洞五爱教育凌远长著一定会的,因为他的工资发多了,要退一些回来,很多一个单位微信群渐渐变得冷清了,说明了什么?哈哈,单位的微信群一般就两个状态。一个状态是群魔乱舞狂秀图,一会儿有人上传工作照,一会儿有人拍自己满头大汗正在加班,当然最好玩的是领导在群里说点什么,几乎所有同事各种点赞图标马上铺红烧鱼怎么做好吃?一日三餐的营养少不了蛋白质,蛋白质来源无非是鸡鸭鱼肉,鱼肉属于优质蛋白,极易被人体吸收,受到很多人的喜爱,喜欢吃鱼但不会摘刺的朋友,建议选择鱼刺少的海鱼,吃起来省事过瘾。老人消化系西安房价怎么样?鸡鸭蛋自媒体202109071400西安是我国陕西省一座比较不错的城市,陕西省省会,十三朝古都。西安的历史很悠久,西安是一座古城,西安的旅游业也很发达,很多游客去了陕西以后,都会选青岛八大关的房子都是什么人住着?这个问题我最有发言权,因为我家就住在某关路,其实八大关住家户在八大关方圆占的比例很小,大部分都是疗养院,正阳关路以北,有青岛疗养院和空军疗养院,住家户主要分布在荣成路和武胜关路,这腌韭菜怎么腌制才好吃?当下进入深秋,正值每年最后的一茬韭菜,最嫩最香最好吃。俺老家鄂豫皖边区,每到这时候,家家都在开始忙活腌过冬的咸菜,白菜萝卜辣椒,当然的少不了韭菜。家乡的冬季咸菜,都很好吃。过去物质石家庄现在的房价正常吗?笔者也是石家庄人,同时地产从业9年,很愿意跟大家分享我的认识。笔者是10年毕业,当时石家庄平均房价在4000左右。15年买房,买的石家庄高新区的房子,5700一平米,当时觉得还算能武汉的你,都是怎么买到房子的?我在武汉买了两套房子,这两套房子我没靠任何人帮忙,也没找人借一分钱,都是我自己辛辛苦苦赚钱买来的!我第一套房是在2005年买的!我先介绍一下自己吧!我是1999年华工(就是现在的华第一次去哈尔滨,有什么建议吗?哈尔滨是北方重要的旅游城市,有很多景点值得观赏,我就从人文,历史的角度推荐一下吧首先游览历史文化景观,最有名的中央大街,白天黑夜之景各异,别有唯美和不同韵味。地砖已被磨得锃亮,边缘
互联网医疗概念股持续冲高!机构关注哪些概念股?近期,互联网医疗股连日走强!3月24日,该板块再度飙升,其中,叮当健康(09886。HK)涨14。45平安好医生(01833。HK)涨6。16,阿里健康(00241。HK)涨3。5独家外卖版奥特莱斯来了!美团神抢手细则曝光限时限量爆品运营每经记者赵雯琪每经编辑刘雪梅3月27日,美团外卖在产业大会透露,将向商家推出全新的爆品营销工具神抢手。目前该工具已在深圳测试,很快会在全国各地上线。每日经济新闻记者从知情人士处独家世界贸易大厦华尔街纽约市内的著名建筑纽约是美国最大的城市,有许多著名的建筑。一布鲁克林大桥布鲁克林大桥纽约市连接曼哈顿区和布鲁克林区之间的吊桥横跨东河之上。1869年始建,1833年竣工。历时14年,耗资1600万美血战华尔街,中国大妈这次赢麻了!国际金价暴涨,曾经让华尔街闻风丧胆的中国大妈,这次又出手,居然开始收割华尔街了。在美联储暴力加息的大背景下,最近欧美的金融行业迎来暴击,美国的硅谷银行和签名银行,相继倒下。另一边,华尔街日报评论文章瑞信面临破产,瑞士正陷入自二战以来最严重的危机之中文观察者网熊超然上周,瑞士信贷集团(CreditSuisse)游走于暴雷的边界,为阻止银行业危机蔓延,瑞士政府出面斡旋,推动了本国两家最大银行的收购交易案瑞银集团(UBS)同意以3瞄上水资源华尔街在美国西南部大手笔购地新华社北京3月24日电在位于美国亚利桑那州和加利福尼亚州交界的索诺兰沙漠,有一座名为锡沃拉的小镇,有居民大约300人。这里的生活几乎完全依赖科罗拉多河,无论农业还是旅游业。据美国有甲流来袭搞的我兵荒马乱啊!甲流的突然造访比解封后的新冠要严重好多,这几年疫情备的药还有好多,唯一的一次我没准备,以为不过就是感冒而已,家里药已经够多了,结果甲流光顾了我。这次的甲流来势汹汹,专家推荐的奥司他美欧银行危机之下,新兴市场资产重新成为华尔街香饽饽?在今年强劲的开局之后,随着大幅反弹导致估值不再那么具有吸引力,加之印度阿达尼集团(AdaniGroup)和巴西AmericanasSA等企业风波,投资者对新兴市场的兴趣减弱。但近两第三家美国银行快崩了,华尔街出手也没用,2008年的恐惧卷土重来两家美国银行倒闭之后,阴云笼罩在西方国家的头上。美国一直在释放积极信号,试图证明两家银行倒闭只是个例,并不会引发严重的后果。但感到担忧的声音更大,英国金融时报直言不讳地提出质疑银行北大毕业,华尔街辞职,她的故事到底多精彩我们会因为chatGPT失业吗?web3。0到底是啥?欧洲为何陷入能源危机?如何面对人口老龄化?这个世界上,每天都在发生着和我们息息相关但又复杂到让人不明所以的大新闻。这边人们谈论撑不住了,美国债务再度逼近上限,耶伦警告中国和华尔街将获益对于美国财政部长耶伦来说,目前她最重要的任务就是敦促国会通过提高债务上限的法案,如果在今年6月份之前债务上限依旧不能提高,美国将面临无法承担的灾难。3月16日,耶伦参加财政委员会关