Vtube - Avatar Mimik perfekt Synchronisieren mit Cam?
Hey an allen Vtube Spezialisten!
Da ich ab und zu am streamen bin, wollte ich mich mal mit Webcam probieren, bloß spiele ich mit dem Gedanken stattdessen mit Vtube anzufangen. Mir ist nur wichtig das man einige Mimiken oder Emotionen bspw. bei einem Horror Game mitverfolgen kann und dabei reicht mir theoretisch diese Methode bereits aus.
Daher hab ich mir VSeeFace heruntergeladen und es mit einem vorgefertigten Char es ausprobiert. An sich läuft alles prima und das Programm erkennt auch scheinbar perfekt alle meine Gesichts- und Kopfbewegungen. Doch was den Avatar/Charakter angeht, scheint wiederum nicht alles so zu erkennen wie gewollt und drückt oft die falschen Emotionen aus. Ob das an der Vorlage liegt, weiß ich nun nicht.
Ich hab auch bereits ein wenig mit den Settings herum gespielt, hier und da hat es was gebracht aber leider wurde es nun auch nicht unbedingt besser. Wenn ich mir nun andere bekannten Vtuber angucke, sehe ich auch Vtuber die das scheinbar deutlich besser und flüssiger hinbekommen haben. Ich frage mich jedoch, wie?? Gibt es dafür andere bekannte Tools die aushelfen oder liegt es evtl. an weiterer Hardware? (abgesehen von den Full Body Tracking-Anzüge)
Ich bin halt leider noch ein blutiger Anfänger und arbeite bereits dran mir evtl. einen eigenen Avatar zuzulegen. Doch bis dahin würde ich gerne schauen wollen, das die Bewegungen korrekt angezeigt werden. Nur kenne ich mich halt damit nicht aus und weiß nicht wie ich genau vorgehen soll? Ich hoffe ihr könnt mir dabei weiterhelfen, vielleicht kennt ihr ja sogar diverse hilfreiche Tutorials? (bestenfalls auf Deutsch)
Ich bedanke mich ^^
1 Antwort
Man kann sein VSeeFace auf seine Emotionen kalibrieren. Falls du das noch nicht gemacht hast solltest du das tun weil das ein wichtiger Schritt ist. Man kriegt eine Emotion vorgeschlagen z.b Joy und muss dann möglichst genau reagieren.
Ist sehr schwierig ich weiß. Gibt soweit ich weiß keinen anderen weg
Ich wünschte es wäre ja nur schwierig, dann wäre es zumindest noch möglich. Aber ich weiß nicht mal woran das genau liegt. Vermutlich verstehe ich die Software wohl noch nicht ganz oder ich muss wirklich stück für Stück mich an den Settings probieren.
Naja mal sehen. Dennoch, vielen dank! :)
Also ich hab schon mal auf Kalibrieren geklickt gehabt und dabei z.B versucht den neutralen Blick auszuführen. Ebenso habe ich auch die unterschiedlichsten Gesichtszüge ausprobiert wie Joy, angry usw. Ich muss aber zugeben das ich das noch nicht ganz begriffen hatte, wie das genau funktioniert oder ab wann ich genau die Gesichtszüge machen kann. Probiert habe ich es jedenfalls aber irgendwie hat das nicht immer ganz hingehauen wie gewollt.
Ich gehe wie folgt vor... Wähle eine Emotion aus -> Dann mache ich das jeweilige Gesicht -> Klick auf Kalibrieren -> Und dann auf Aufnahme beenden.
So.. wenn ich jetzt bspw. Neutral mache (dann natürlich ein neutrales Gesicht), kann es sein das es übernommen wird. Wenn ich nun aber mit "Spaß" weiter mache und es dann kalibriere... Dann passiert plötzlich ganz oft das mein neutrales Gesicht zu einem nicht erwünschten lächeln sich verändert, noch nicht einmal zu dem lächeln was ich bei Spaß kalibriert hatte.. das ist sehr seltsam. Und irgendwie verändert sich das ganze stets sobald ich mein Kopf bewege... Er erkennt also oft irgendeine falsche Mimik, allein schon durch die kleinste Kopfbewegung. Und es scheint mir oft so das es durch die ganze Kalibrierungen durcheinander kommt.