Openjutsuのオープンソースツールがワンクリックで動画のキャラクターと衣装の交換を可能に

オープンソースの動画キャラクター・オブジェクト交換ツールであるOpenjutsuが、MITライセンスの下でGitHubで公開された。このツールは動画とキャラクターの参照写真を受け取り、カメラの動き、カット、モーション、サウンドトラックを保持したまま主要人物を再生成し、マルチパーソンモードで1~4人のキャラクターをサポートする。ComfyUIとMiniMax H3上でローカルに動作し、トラッキングにはSAM 3.1、画像記述にはQwen3-VL 8Bを使用する。
イベントのバージョン 1.
Key insights
元の動画要素を保持
Openjutsuは、カメラ、カット、モーション、サウンドトラックを変更せずに、動画内の主要人物を提供されたキャラクターに置き換える。ユーザーは髪、衣服、小道具、背景を個別に変更することもできる。
マルチパーソンモードは最大4人をサポート
このツールはマルチパーソンモードで1~4人のキャラクターをサポートし、各参照画像にアイデンティティを割り当てることができる。選択されていないキャラクターは変更されない。
オープンウェイトによるローカル実行
Openjutsuはユーザー自身のGPU上で動作し、動画にはMiniMax H3、人物のトラッキングにはSAM 3.1、画像とショットの記述にはQwen3-VL 8Bを使用する。アプリはComfyUIワークフロー上のNext.jsフロントエンドである。
プレビューとセグメント選択機能
プレビューでは再描画する領域が色で示され、ユーザーは進行バーをドラッグしてフレームを検査できる。短いテストのために動画の冒頭、中間、末尾のセグメントのみを選択できる。
追加の顔修復とリライティング
このツールには顔修復とカラーグレーディング機能、さらに17種類のリライティングプリセットが含まれている。