FramePackで人物にこちらを向いてもらえない問題を解決したい!

FramePackやFramePack-eichiの素晴らしさに日々感動しているのですが、今回はまた少し贅沢な悩みにぶつかりました。

以前の記事で紹介したこちらのAI生成女性
どうしてもこちらを向いてくれないのです!

プロンプトで「こちらを向いて」「正面を向いて」と指示しても、ずっと横向きのまま…。
どうやらFramePackは体の向きを変えるような動作を生成するのが、ちょっと苦手なようです。

ということで、今回はプロンプト以外の方法で「正面を向かせる」チャレンジをしてみました!



少し複雑な要求になるとFramePack-eichiの出番が増えてきます、今回もFramePack-eichiの出番です!

『FramePack-eichiで人物にこちらを向かせる方法』

今回のケースでは、横向き→正面向きの変化をどう再現するかがカギになります。
そこで登場するのが、画像生成サービス Midjourney(Discord版) との併用です!※Midjourney(Discord版)の使用方法は少し複雑ですので、後日詳細な使用方法を記載したいと思います。

手順はこちら👇

  1. 横向きの人物画像を用意

  2. Midjourneyでその人物が正面を向いた画像を生成(全く同じにはなりませんが、似るまで粘るのがコツ!)

  3. 横向きと正面向きの2枚の画像をFramePack-eichiで読み込み、アニメーション生成!

以上のステップで、まだ多少ぎこちなさは残るものの、ある程度自然にこちらを向かせることに成功しました!

生成した動画はこちら👇

やはり有料サービスより少し手間はかかります。
でも、クレジットを気にせず好きなだけ試せるのは大きなメリットですよね(笑)
今後もっともっと自由にダイナミックに動かせるように実験して行きます!