時間的プロンプトエンジン:ローカル、オープンソース、直感的、映画のプロンプトエンジン +ビデオおよびオーディオ生成スイートNVIDIA GPUS
##現在、カスタム12B Hunyuanvideoスクリプトを備えており、Mmaudioが80GBカード用に組み込まれています。
##以下の指示への大規模な更新
[email protected]でご連絡ください。これはすぐにWebAppバージョンに行くことに興味がある場合は、ボランティアアシスタントを探しています。
目次
- 導入
- 機能の概要
- インストール
- クイックスタートガイド
- APIキーセットアップ
- ストーリーモード:壮大な物語を解き放ちます
- 心に強く訴えるユースケース
- Comfyuiの力を活用します
- Cogvideoを使用したローカルビデオ生成
- The Tuperal Labs Journeyに参加してください
- 寄付とサポート
- 提供される追加サービス
- 帰属と礼儀のリクエスト
- 接触
- 謝辞
導入
The Tume Prompt Engineへようこそ。ビデオプロンプトジェネレーターのバッチバリエーションまたはストーリーシーケンスを構築するための包括的なフレームワーク。このアイデアは、CogvideoxのComfyuiワークフローとして開始されたオリジナルでしたが、その後、新しい基礎モデルとパイプラインで拡張することが証明されたモジュール式フレームワークに進化しました。
機能の概要
- 映画のビデオプロンプト:カメラの種類やレンズから照明やフレーミングまで、シーンのあらゆる側面を調整します。
- 一時的な認識:10年を選ぶと、カメラのオプションはその時間を表し、シーンに深さとコンテキストを追加します。
- 動的変数:照明、カメラの動き、照明、時刻など、使いやすいドロップダウンオプションなどの設定を調整します。
- 特別なモード:
- ストーリーモード:フレーム間でプロンプトをシームレスにブレンドして、まとまりのある物語を作成し、壮大な物語や親密な物語を作成できるようにします。
- ホリデーモード:お祝いのブランディングやマーケティングに最適な、ホリデーに合わせて調整された季節のコンテンツを生成します。
- カオスモード:カオスモードで予測不可能性を追加します。
- 相互接続された設定:古代のアートスタイルを選択するなどの選択が、カラーパレットやテクスチャなどの他の変数にどのように影響し、まとまりのある本物の出力を作成するかを体験してください。
- クロスプラットフォームの互換性: Windows & Linuxで使用できます
インストール
一時的なプロンプトエンジンのセットアップはシンプルで手間がかからず、構成ではなく作成に集中できます。このセクションでは、 Windowsユーザー向けのインストール手順を提供します。
システムの準備
YouTubeセットアップガイドパート1:
- オペレーティングシステム:Windows 10以降
- Python :バージョン3.10.9
- Pythonインストーラーのダウンロード:
- Pythonダウンロードページにアクセスしてください。
- Windows用のPython 3.10.9インストーラーをダウンロードします。
- Pythonのインストール:
- インストーラーを実行します:
- ダウンロードしたExeインストーラーファイルをダブルクリックします。
- 重要:
- すでにPythonをインストールしている場合:
- Pythonをパスに追加するときは注意してください。システムパスで既存のPythonバージョンを上書きする可能性があります。
- 競合を回避するために、パスに追加せずにPython 3.10.9をインストールできます。代わりに、Windows用のPython Launcher(
py )を使用して、コマンドを実行するときにバージョンを指定します。
- Pythonをインストールしていない場合:
- インストーラーウィンドウの下部にある「Pythonをパスに追加する」ボックスを確認します。
- [今すぐインストール]をクリックします。
- インストールの確認:
- 新しいコマンドプロンプトを開きます。
- 走る:
-
Python 3.10.9表示されます。
##ビデオ生成機能を動作させたい場合は、ローカルPython 3.12.4もインストールする必要があります。これが導入されている場合、セットアップはすべてを処理します。 ##プロンプトエンジンとサウンドエフェクトジェネレーターのみを使用する場合は、Setup.pyが少し文句を言う場合でも、3.10.9だけで問題ありません。
オペレーティングシステム:Windows 10以降
Python :バージョン3.12.4
- Pythonインストーラーのダウンロード:
- Pythonダウンロードページにアクセスしてください。
- Windows用のPython 3.12.4インストーラーをダウンロードします。
- Pythonのインストール:
- インストーラーを実行します:
- ダウンロードしたExeインストーラーファイルをダブルクリックします。
- 重要:
- すでにPythonをインストールしている場合:
- Pythonをパスに追加するときは注意してください。システムパスで既存のPythonバージョンを上書きする可能性があります。
- 競合を回避するために、パスに追加せずにPython 3.10.9をインストールできます。代わりに、Windows用のPython Launcher(
py )を使用して、コマンドを実行するときにバージョンを指定します。
- Pythonをインストールしていない場合:
- インストーラーウィンドウの下部にある「Pythonをパスに追加する」ボックスを確認します。
- [今すぐインストール]をクリックします。
- インストールの確認:
- 新しいコマンドプロンプトを開きます。
- 走る:
-
Python 3.12.4表示されます。 - オペレーティングシステム:Windows 10以降
- PY -3.12は、重要なビデオ生成環境バックエンドプロセスで使用されます。
Git :インストールおよび構成
- gitのインストール:
- WindowsのGitからGitをダウンロードしてください。
- デフォルト設定でインストーラーを実行します。
- インストールの確認:
- 新しいコマンドプロンプトを開きます。
- 走る:
- インストールされているgitバージョンが表示されます。
NVIDIA GPU :最適なパフォーマンスのためのCUDA対応NVIDIA GPU
- 最新のドライバーを備えたNVIDIA GPUを持っていることを確認してください。
CUDAツールキット:バージョン11.8 GPUと互換性があり、インストールされています
- CUDAツールキットをインストールします:
- CUDA ToolkitダウンロードからCUDA Toolkitをダウンロードしてください。
- インストーラーを実行し、画面上の指示に従ってください。
- インストールの確認:
- 新しいコマンドプロンプトを開き、実行します。
- CUDAコンピレーションツールのバージョン情報が表示されます。
FFMPEG :インストールされ、システムPATHに追加されます
- ステップ1:ここをクリックして、最新バージョンのzipファイルをダウンロードしてください。
- ステップ2:Winrarや7Zなどのファイルアーカイバーを使用して、このファイルを解凍します。
- ステップ3:抽出されたフォルダーをFFMPEGに変更し、C:Driveのルートに移動します。
-
setx /m PATH "C:ffmpegbin;%PATH%" - インストールの確認:
- 新しいコマンドプロンプトを開き、実行します。
- FFMPEGバージョン情報が表示されます。
Ollama :Ollamaセットアップからダウンロードして、画面上の手順に従ってインストールします。
## [セットアップビデオガイドパート2)[https://youtu.be/_8txlnwa9ak?si=eo73edqxafblqa_o]
自動セットアッププロセスを開始する準備ができました。
レポをクローンします
git clone https://github.com/TemporalLabsLLC-SOL/TemporalPromptEngine.git
リポジトリを手動でダウンロードします。
- Tumpalalpromptgenerator Githubリポジトリにアクセスしてください。
- [コード]ボタンをクリックし、 [zipのダウンロード]を選択します。
- ダウンロードしたzipファイルを目的の場所に抽出します(たとえば、
C:TemporalPromptEngine )。
簡単なクリックインストラー
抽出されたアーカイブ(またはクローニングされたリポジトリ)を開き、 RUN-FIRST-PRE-FLIGHT-CHECK.batをクリックします
- 画面上のプロンプトに従ってください。スクリプトは、Python環境を自動的にセットアップし、必要なパッケージをインストールし、設定を構成します。
アプリケーションが起動し、最初のセットアップをガイドします。このセットアップ中、アプリを閉じた後、またはセットアップ中にオープンを開くことを拒否した後、デスクトップにワークアラウンドショートカットを追加するオプションがあります。現在、アイコンがありません。これにより、ENVとスクリプトが確実に進行中にロードされます。
または
セットアップスクリプトを手動で実行します。
- コマンドプロンプトを開いて、抽出された
TemporalPromptEngineディレクトリに移動します。 cd C: T emporalPromptEngine-main
-
WINDOWSフォルダーに移動します。 - セットアップスクリプトを実行します。
##クイックスタートガイド
セットアップ中にデスクトップにショートカットを追加した場合
Click the Temporal Prompt Engine Shortcut on your Windows Desktop
セットアップ中にデスクトップにショートカットを追加しなかった場合
仮想環境を有効にします:
cd C: T emporalPromptEngine-main
TemporalPromptEngineEnv S cripts a ctivate
アプリケーションの起動:
python TemporalPromptEngine.py
アプリケーションにAPIキーを入力してください。
- タイムプロンプトエンジンのセットアップ中にプロンプトが表示されたときに、ハギングフェイスAPIキーを貼り付けます。
- セットアップエンジン環境内でこれを1回入力する必要があります。その後の使用でこのポップアップを閉じるだけです。
シーンの概念を入力してください:
創造的なアイデアやシーンの説明(最大400文字)を入力してください。
例:
「古代の天文学者の目を通して世界を見て、広大で非公式の夜空の下で初歩的な道具で星をマッピングします。」
- 暗号動物の映像:
「デジタルパターンと発光毛を具体化する神話上の生き物である、とらえどころのない「Cryptolion」をキャプチャするドキュメンタリースタイルの映像。」
ビデオおよびオーディオプロンプトオプションの構成:ドロップダウンと入力フィールドを使用して、ビデオおよびオーディオプロンプトを調整します。
ビデオとオーディオのプロンプトを生成します。
保存とエクスポート:すべてのメディアとプロンプトは、指定された出力ディレクトリに保存されます。
ストーリーモード:壮大な物語を解き放ちます
ストーリーモードは、ストーリーのアウトラインをまとめて作成し、そのシーケンス内の各ビートを本格的で最適化されたビデオプロンプトに変え、長いコンテンツプールのシームレスなバッチ処理を可能にします。これは、キーワードをプロンプトに投げるだけではありません。映画の実践、理論、歴史に焦点を当てたバックエンドロジックのいくつかの層があります。
The Tuperal Labs Journeyに参加してください
AIとテクノロジーの境界を押し広げるという使命をサポートします。投資家、開発者、またはクライアントとして参加してください。
提供される追加サービス
- 家庭教師、開発、設計、コンサルティング、ワークショップは、AIとテクノロジーのニーズを満たすために利用できます。
接触
質問、サポート、コラボレーションの機会、または私たちがどのように協力できるかを議論するために:
謝辞
GIT 、 Python 、 FFMPEG 、 Hunyuanvideo 、 Mmaudio 、 Ollama 、 Audioldm2 、 Cogvideo 、 Comfyui 、およびHuggingfaceの背後にある開発者とコミュニティに感謝します。