关于眼睛和嘴吧训练的一些问题

不要胡说 · 发表于 2022-12-23 23:47:43

每次训练时没有开眼睛和嘴吧优先选项，看预览图觉得效果还行，但是最终合成视频时总觉得眼神很怪异，嘴吧也有点糊。想请教一下大佬，是不是训练到一定时候了需要打开 Eyes and mouth priority这个选项？自己今天训练时把这个打开了，训练的的loss值明显跑高了，以前已经练到0.2左右，开了这个马上升到0.5了，请问下这是正常现像吗？

踏浪而行 · 发表于 2022-12-23 23:58:13

不懂帮顶

彦哥 · 发表于 2022-12-24 00:06:16

按照大佬的教程，这个眼嘴初期就要开了，到中期关闭。至于打开飙升感觉没打开一个参数后都会飙一下

二圪蛋 · 发表于 2022-12-24 00:09:42

初期可以不开，你主要看眼睛和嘴巴像不像眼神对不对，如果跑了很久都不对打开可以改善一下。loss值不需要管，主要还是看图说话。

舞菲菲 · 发表于 2022-12-24 00:18:24

感谢大佬的指点，我也是看了滚石的教程说这个可以不开，主要是取决SRC素材，所以一直都没开这个。

一世不长应该活的漂亮 · 发表于 2022-12-24 00:21:23

眼神不对很多时候哦就是素材比较缺少，就像侧脸优化参数一样，很多时候你侧脸的素材少就应该开这个参数让模型去多训练带侧脸的素材。

御柳龙安 · 发表于 2022-12-24 00:29:09

16. 眼部嘴部优先训练
[n] Eyes and mouth priority ( y/n ?:help ) :

介绍：眼神和嘴巴口型是最难训练的区域，开启这个参数可以让模型重点优化眼部和嘴部。但如果你没有闭眼素材和张嘴素材，开这个参数也没用
推荐值：n
按照滚石大佬的推荐是：N ，所以一直没开。

大肥旺 · 发表于 2022-12-24 00:37:23

先开这组参数训练10-60W
face type : WF
random_flip : off
adabelief : on
eyes_mouth_prio : on
ct_mode: lct .

再开这个训练10-30W
learning rate drop：y

再关闭随机扭曲训练10-30W
random warp：n

最后开GAN训练10-30W
GAN poewer： 0.1

甜甜的夏 · 发表于 2022-12-24 00:41:17

loss确实是要倒升的，不过眼嘴打开主要还是看图

阳光下的海 · 发表于 2022-12-24 00:51:33

主要还是看图