FramePackで人物がその場でしか動かない問題を解決したい!

FramePackやFramePack-eichiの素晴らしさに日々感動しているのですが、人物がその場でしか動いてくれないという贅沢な悩みをかかえるようになりました。
なんとかして、A地点からB地点に物理的にその場所から動いてくれないかと祈るのですが、なかなかうまくいきません、、、。


ボールならプロンプトの指示を工夫すればボール自体を動かす事は可能です
※プロンプトは長いので、YouTubeの説明欄に記載しております

しかし、これが人物となるとなかなかうまくいきません、
どんな指示をプロンプトに送ってもカメラが追って来てしまって、人物がその場で動く動画しか生成されないのです><こんな感じ↓


ボールに協力してもらい、誘導しようとしましたが無理でした(笑)

結局、試行錯誤した結果FramePack-eichiを使い一手間加える事により、1枚の画像から無事人物や主役をA地点からB地点まで物理的に自然に動かす事が出来ました。

『FramePack-eichiで人物や主役をA地点からB地点へ動かす方法』

FramePack-eichiは本来「異なる2枚の画像を自然につなげる」ツールですが、
この機能をあえて1枚の画像の位置違いに応用していきます!

手順は以下の通りです👇

  1. 主役がA地点にいる画像を画像編集ソフトで開く

  2. 主役を切り取り、移動させたいB地点に配置して新しい画像として保存する

  3. 元の画像(A地点)と編集後の画像(B地点)をFramePack-eichiに読み込ませて処理する

これで完了!

めちゃくちゃアナログな方法ですが(笑)、今のところ一番自然に人物を「場所ごと」動かせる方法です!

実際にこんな感じの動画がローカル上で生成できます👇

現在は手作業で画像編集が必要で、背景も無いシンプルな状態での実験ですが、
今後はもっと自動化したり、背景がある状態でも自然に動かせる方法を探していきたいと思っています!