Re: [閒聊] VT皮跟現實的動作同步率是怎樣運作的?

作者: ask321035 (ask)   2021-01-07 19:46:56
※ 引述《thesonofevil (四非亞心)》之銘言:
: 如題
: 個人沒用過任何攝影或同部的功能
: 聽說哀鳳本身現在有內建類似程式,不過我是中階機安卓賤民也不懂QQ
: 很好奇VT裡面那些嘴跟眼睛的動作,在現實到底同步率怎樣
: 舉例來說,鯊鯊超常嘴巴大開的,以人物模組來說,那絕對算是「大開」
: 那現實中呢? 也是同等大開嗎? 還是其實只要微開,模組同步就會是大開?
: 如果是現實中也是大開,那我不得不說那不可能是自然演出,而是刻意營造?
: 還有一些VT模組是抬頭看向上方的,但螢幕前面的不是應該就看著螢幕嗎?
: 難道其實他們在螢幕前面抬頭看天花板這樣演出?
: 另外我也很好奇,VT演出是不是看的到自己的模組當下怎展現的?
: 所以可能是看著模組來調整自己的動作跟嘴巴、眨眼,比較像演戲這樣嗎?
: 當然肯定也有自然而然的時候啦
: 還有之前有看過很多模組會有生氣、悲傷的差異,兔子甚至耳朵還會垂一隻
: 這個是要自己操作還是靠偵測表情啊?
: 我很好奇 
雖然只碰過facerig跟live2d(以下簡稱l2d好了,懶得打這麼長) 不過稍微來聊一下好了
如果你對VTuber的技術完全沒概念,而且有過度的幻想,那以下可能會讓你破滅
如果看完你沒這感覺,那可能就是你有基礎概念,或是你中的毒還有救
然後以下只談2d模組,3d要考慮的東西多更多,就不講了
依照結論,我先把你的問題分成三類
1. 看上方、張嘴巴這些動作時,中之人實際上是什麼情況
回答就是看設定。
具體來說,要看當初做l2d模組是怎麼做的以及偵測的設定是怎麼做的。
聽起來很幹話,但是就是這樣,l2d模組製作時,會設定最大值
往各個方向看最多能看到哪裡,嘴最多能張多大
這樣說明可能不清楚,我舉個反例好了。
閉嘴的情況最極限大多人都是一條線,也就是上嘴唇跟下嘴唇合在一起
那麼這就是l2d設定閉上嘴的極限
就算你現實讓上嘴唇蓋住下嘴唇,或是你下嘴唇可以往上到把鼻子蓋住
那模組也不會有這種動作,最多就是閉上嘴
第二是看偵測的設定,也就是「何時會達到最大值的條件」
假設你設定往左傾45度就是偵測到的最大值
然後你l2d的模組往左看的極限設定成90度,只看得到一隻眼睛那種
那麼中之人只要往左傾45度,呈現畫面就會是90度的情況
當然詳細情況沒這麼簡單,我只是簡化後說明而已
綜合以上情報
我舉個例子,假設你想做一個不會閉上眼睛的Vtuber,就跟金魚一樣
那你只要l2d模組設定時,不要設置閉上眼的動作
或是你設置偵測軟體時,把閉上眼的條件設定得很嚴苛
那麼你中之人就算閉眼也不會被發現
2. VT是否看得到自己的模組當下情況
這問題答案是肯定,應該是要看得到的
因為畫面是輸出到電腦(手機)上,再進一步擷取畫面,實況到網路上
沒有看不到的道理
3. 表情偵測的部分
不排除有表情偵測的可能,但是我認為大多都是靠自己操作
而且你問的部分與其說是在問表情是否靠偵測的
不如說是在問表情的切換是怎麼做的
差在哪裡呢?前者除非表演者自己說,不然都是未知數
就算從技術上推測不太可能是偵測,但你也不知道他是不是有黑科技,所以不能斷定
後者就以你說的兔子為例
https://www.youtube.com/watch?v=3WYvqUM0gEw
你說兔子哭哭臉的時候,耳朵還會垂下來
但是你仔細看,這個垂下來其實就是一個切換表情的動作
讓整張臉從「微笑」變成「哭哭」
這種時候就算他笑著說話,你看得到的也會是哭哭臉
反過來說,平常看到的VT大多都是微笑狀態
但是中之人可能是苦瓜臉張大嘴你也不會知道,因為設定上就是微笑狀態
就算擺顆西瓜在那邊,VT也會是微笑的
另外補充一下 判斷切換表情的標準並不是看「圖片切換」,而是看整體狀況
像兔子這種比較接近是換圖,看耳朵最明顯
也就是微笑 - 哭泣是分開做的,就跟你設定裝飾品一樣,切換動作就很明顯
另外有一種方式是表情做在同一張圖,那種切換時就比較難看出來
但是用那種做法在做表情會更麻煩,所以通常微笑跟哭泣不會這樣做
最多是靠眉毛高低來判斷不開心/開心狀況會用,如果你要說這是表情偵測也是可以
但就是很基本的偵測功能,這部分詳情可以參考鈴原るる
有時候他專注玩遊戲沒空操作,但是笑著的情況眉毛卻是ˊˋ,這種些微不高興的樣子
這可以推測設定上可能是讓眉毛低到一定程度時,就會變成些微不高興的表情所致的
最後再補充一下,某些時候會有人發現有貓耳的VT,耳朵會動這類的事
其實你仔細看看大多都是設定成跟著眼睛在動
也就是眼睛閉上,耳朵垂下,眼睛張開,耳朵往上
至於乳搖又是另一回事,基本款的大多是做成呼吸時隨著動
但是這呼吸動作可能不是隨著中之人運作,而是定期進行呼吸動作
高級一點的涉及到的參數比較多,我就不是很清楚
作者: omega000 (Ω品)   2021-01-07 19:48:00
專業
作者: tsukasaxx (香瓜百分百)   2021-01-07 19:49:00
專業推
作者: joe123456963 (pandajoe)   2021-01-07 19:51:00
簡單來說一切都是調出來的
作者: felixr0123 (felixr0123)   2021-01-07 19:53:00
你也花太多跟他解釋這些 叫他看一次live2d模組設定大概一眼就懂了
作者: AirPenguin (...)   2021-01-07 19:55:00
真的摸一下就知道了 第一次看到有人拿擺動幅度來吹的
作者: eric20601 (static)   2021-01-07 19:57:00
最近的是不是會自動偵測平常表情跟笑臉的嘴型?
作者: guogu   2021-01-07 19:58:00
嘴型是可以偵測的
作者: AirPenguin (...)   2021-01-07 19:58:00
之前有看過幾家的捕捉有額外在臉上加輔助的直播前會在臉上畫線或是貼圓點
作者: guogu   2021-01-07 19:59:00
想當初我眼珠上下一直喬不好就暫時把那項參數刪了這樣就不用煩惱眼珠位置看起來很怪
作者: showwhat2 (華仔)   2021-01-07 20:00:00
推、推!
作者: jared16458 (AHaHaHA)   2021-01-07 20:01:00
最近的好像已經可以偵測面部了?
作者: WindSucker (抽風者)   2021-01-07 20:02:00
486裸播能偵測嗎?
作者: jared16458 (AHaHaHA)   2021-01-07 20:02:00
要看他有沒有設定裸身吧 只做衣服的不太可能我在公三小 裸身要怎麼偵測
作者: afking (掛網中)   2021-01-07 20:04:00
現在技術上的頂端可以看看twitch那隻實驗性質的VTL2D本身就不太講究臉部表情細部變化,紙片人重點在誇大化
作者: crimsonmoon9 (緋月)   2021-01-07 20:07:00
樓上a大有關鍵字嗎?想看看建過3D模就知道穿模的問題根本超難處理 加上物件根本災難
作者: afking (掛網中)   2021-01-07 20:08:00
codemiko
作者: crimsonmoon9 (緋月)   2021-01-07 20:09:00
L2D沒接觸過但只要覆蓋過去應該簡單不少我以為會恐怖谷 結果意外的精細
作者: f222051618 ( 珍 珠 奶 茶 )   2021-01-07 20:15:00
專業推
作者: afking (掛網中)   2021-01-07 20:22:00
如果你想看比較恐怖谷的(?),神椿底下有個teresa
作者: Luos (Soul)   2021-01-07 20:34:00
這是會讓人崩潰的事情嗎
作者: tomsawyer (安安)   2021-01-07 21:12:00
樂奈不是有表演過 是會限嗎 忘了現場調參數lol
作者: felixr0123 (felixr0123)   2021-01-07 21:30:00
去看幾個有開實況接委託l2d的了解應用概念就好了 還整個做一遍啊?
作者: Yuiwa1996 (黑帽紳士雨蛙君)   2021-01-07 21:50:00
不是每一家表情都用手動切的,至少彩虹社的是直接偵測:https://reurl.cc/0Dg07M
作者: bear701107 (熊)   2021-01-07 22:10:00
彩虹也有可以固定表情的設定 像之前看るる玩夜迴後面有一段他直接固定皺眉的表情
作者: cloud7515 (殿)   2021-01-07 22:16:00
叶也有陰沉臉可以設定 他也說希望不要用到這表情
作者: episodicor (不連續之人)   2021-01-07 22:17:00
作者: wei115 (ㄎㄎ)   2021-01-07 22:38:00
彩虹也有表情 銀憨憨就是其中一例(變更憨了http://i.imgur.com/EuVKRzF.jpg不過沒什麼人玩 大家幾乎都直接捕捉
作者: landy0910 (lolicom)   2021-01-08 00:00:00
比較好奇夢見媽媽那個小手手怎麼弄的
作者: Alcatraz666 (lalalala)   2021-01-08 00:48:00
專業推

Links booklink

Contact Us: admin [ a t ] ucptt.com