cog comfyui

cog-comfyui

تشغيل سير عمل Comfyui على النسخ المتماثل:

• https://replicate.com/fofr/any-comfyui-workflow
• https://replicate.com/fofr/any-comfyui-workflow-a100

نوصي:

• تجربته على الموقع الإلكتروني مع سير العمل المفضل لديك والتأكد من أنه يعمل
• باستخدام مثيلك الخاص لتشغيل سير العمل بسرعة وكفاءة على النسخ المتماثل (انظر الدليل أدناه)
• استخدام API Ready Ready Ready لدمج سير العمل في تطبيقك أو موقع الويب الخاص بك

ما هو مدرج

لقد حاولنا تضمين العديد من الأوزان النموذجية الأكثر شعبية والعقد المخصصة:

• عرض قائمة الأوزان المدعومة
• عرض قائمة العقد المخصصة المدعومة

ارفع مشكلة لطلب المزيد من العقد أو النماذج المخصصة ، أو استخدم علامة تبويب train على النسخ المتماثل لاستخدام أوزانك الخاصة (انظر أدناه).

كيفية استخدام

1. احصل على API JSON

ستحتاج إلى إصدار API من سير عمل ComFyui الخاص بك. هذا يختلف عن إصدار JSON المشترك بشكل شائع ، فهو لا يتضمن معلومات بصرية حول العقد ، إلخ.

للحصول على API json:

1. قم بتشغيل "تمكين خيارات وضع DEV" من إعدادات comfyui (عبر أيقونة الإعدادات)
2. تحميل سير العمل الخاص بك في comfyui
3. قم بتصدير API JSON باستخدام زر "حفظ (تنسيق API)"

comfyui-save-workflow.mp4

2. جمع ملفات الإدخال الخاصة بك

إذا أخذ النموذج الخاص بك مدخلات ، مثل الصور لـ IMG2IMG أو ControlNet ، فلديك 3 خيارات:

استخدم عنوان URL

قم بتعديل ملف API JSON الخاص بك لتشير إلى عنوان URL:

 - "image": "/your-path-to/image.jpg",
+ "image": "https://example.com/image.jpg", 

تحميل إدخال واحد

يمكنك أيضًا تحميل ملف إدخال واحد عند تشغيل النموذج.

سيتم حفظ هذا الملف input.[extension] - على سبيل المثال input.jpg . سيتم وضعه في دليل input comfyui ، بحيث يمكنك الإشارة في سير العمل الخاص بك مع:

 - "image": "/your-path-to/image.jpg",
+ "image": "image.jpg", 

قم بتحميل ملف zip أو ملف القطران من المدخلات الخاصة بك

سيتم تنزيلها واستخراجها إلى دليل input . يمكنك بعد ذلك الرجوع إليهم في سير العمل الخاص بك بناءً على مساراتهم النسبية.

لذلك ملف مضغوط يحتوي على:

 - my_img.png
- references/my_reference_01.jpg
- references/my_reference_02.jpg

قد يتم استخدامه في سير العمل مثل:

 "image": "my_img.png",
...
"directory": "references",

قم بتشغيل سير العمل الخاص بك

مع تحديث جميع مدخلاتك ، يمكنك الآن تشغيل سير العمل الخاص بك.

بعض مهام سير العمل تحفظ الملفات المؤقتة ، على سبيل المثال صور ControlNet المعالجة مسبقًا. يمكنك أيضًا إرجاعها عن طريق تمكين خيار return_temp_files .

كيفية استخدام مثيلك المخصص الخاص بك

يعد نموذج any-comfyui-workflow على النسخ المتماثل نموذجًا عامًا مشتركًا. هذا يعني أن العديد من المستخدمين سيرسلون سير العمل إليه قد يكون مختلفًا تمامًا عنك. سيكون تأثير ذلك هو أن خادم Comfyui الداخلي قد يحتاج إلى تبديل النماذج داخل وخارج الذاكرة ، وهذا يمكن أن يبطئ وقت التنبؤ.

يتم أيضًا تحديث Comfyui وعقدها المخصصة باستمرار. على الرغم من أن هذا يعني أن أحدث الإصدارات تعمل عادةً ، إذا كانت هناك تغييرات في العقد المخصصة ، فقد يتوقف سير العمل الخاص بك عن العمل.

إذا كان لديك مثيلك المخصص الخاص بك ، فسوف:

• إصلاح الرمز والعقد المخصصة لإصدار عمل معروف
• لديك وقت تنبؤ أسرع من خلال الحفاظ على نماذجك فقط في الذاكرة
• الاستفادة من التحسينات الداخلية الخاصة بـ Comfyui عند تشغيل نفس سير العمل مرارًا وتكرارًا

خيارات لاستخدام المثيل الخاص بك

للحصول على أفضل أداء من النموذج ، يجب عليك تشغيل مثيل مخصص. لديك 3 خيارات:

1. قم بإنشاء نشر خاص (أبسط ، ولكن ستحتاج إلى دفع ثمن الإعداد ووقت الخمول)
2. قم بإنشاء ونشر شوكة باستخدام COG (الأقوى ولكن الأكثر تعقيدًا)
3. قم بإنشاء نموذج جديد من علامة تبويب القطار (بسيط ، يمكن أن يكون نموذجك عامًا أو خاصًا ويمكنك إحضار أوزانك الخاصة)

1. إنشاء نشر خاص

اذهب إلى:

https://replicate.com/deployments/create

حدد fofr/any-comfyui-workflow كنموذج ترغب في نشره. اختر أجهزتك وحالات Min و Max ، وأنت مستعد للذهاب. سيتم تثبيته على الإصدار الذي تنشر منه. عندما يتم تحديث any-comfyui-workflow ، يمكنك اختبار سير العمل معه ، ثم النشر مرة أخرى باستخدام الإصدار الجديد.

يمكنك قراءة المزيد حول عمليات النشر في مستندات النسخ المتماثل:

https://replicate.com/docs/deployments

2. إنشاء ونشر شوكة باستخدام COG

يمكنك استخدام هذا المستودع كقالب لإنشاء النموذج الخاص بك. يمنحك هذا تحكمًا كاملاً في إصدار Comfyui والعقد المخصصة وواجهة برمجة التطبيقات التي ستستخدمها لتشغيل النموذج.

ستحتاج إلى أن تكون على دراية Python ، وستحتاج أيضًا إلى GPU لدفع نموذجك باستخدام COG. Replikate لديه دليل جيد للبدء: https://replicate.com/docs/guides/push-a-model

مثال

نموذج kolors على النسخ المتماثل هو مثال جيد لمتابعة:

• https://replicate.com/fofr/kolors (النموذج مع واجهة برمجة التطبيقات المخصصة لها)
• https://github.com/fofr/cog-comfyui- كولورز (الريبو الجديد)

تم إنشاؤه من هذا الريبو ، ثم تم نشره باستخدام COG. يمكنك أن تتخطى ارتباطات هذا الريبو لمعرفة ما تم تغييره وكيف ، ولكن على نطاق واسع:

• يستخدم هذا المستودع كقالب
• يتم تشغيل scripts/prepare_template.py أولاً ، لإزالة الأمثلة وملفات الغلاية غير الضرورية
• custom_nodes.json يتم تعديل لإضافة أو إزالة العقد المخصصة التي تحتاجها ، مع التأكد من إضافة أو إزالة تبعياتها من cog.yaml
• Run ./scripts/install_custom_nodes.py لتثبيت العقد المخصصة (أو ./scripts/reset.py لإعادة تثبيت comfyui وجميع العقد المخصصة)
• تتم إضافة سير العمل كـ workflow_api.json
• يتم تحديث predict.py باستخدام واجهة برمجة تطبيقات جديدة ويتم تغيير طريقة update_workflow بحيث يقوم بتعديل الأجزاء الصحيحة من JSON
• يتم اختبار النموذج باستخدام cog predict -i option_name=option_value -i another_option_name=another_option_value على وحدة معالجة الرسومات
• يتم دفع النموذج إلى النسخ المتماثل باستخدام cog push r8.im/your-username/your-model-name

3. قم بإنشاء نموذج جديد من علامة تبويب القطار

قم بزيارة علامة تبويب القطار على النسخ المتماثل:

https://replicate.com/fofr/any-comfyu-workflow/train

هنا يمكنك إعطاء عناوين URL العامة أو الخاصة للأوزان على Huggingface و Civitai. إذا كانت عناوين URL خاصة أو تحتاج إلى مصادقة ، فتأكد من تضمين مفتاح API أو رمز الوصول.

تحقق من سجلات التدريب لمعرفة أسماء الملفات التي يجب استخدامها في سير العمل JSON. على سبيل المثال:

 Downloading from HuggingFace:
...
Size of the tar file: 217.88 MB
====================================
When using your new model, use these filenames in your JSON workflow:
araminta_k_midsommar_cartoon.safetensors

بعد تشغيل التدريب ، سيكون لديك طراز Comfyui الخاص بك مع الأوزان المخصصة التي تم تحميلها أثناء إعداد النموذج. لمنع الآخرين من استخدامه ، يمكنك جعله خاصًا. يتم فواتير النماذج الخاصة بشكل مختلف على النماذج العامة على النسخ المتماثل.

النمو محليا

استنساخ هذا المستودع:

git clone --recurse-submodules https://github.com/fofr/cog-comfyui.git

قم بتشغيل البرنامج النصي التالي لتثبيت جميع العقد المخصصة:

./scripts/install_custom_nodes.py

يمكنك عرض قائمة العقد في custom_nodes.json

تشغيل واجهة مستخدم الويب من حاوية COG الخاصة بك

1. آلة GPU : ابدأ حاوية COG وفضح المنفذ 8188:

sudo cog run -p 8188 bash

تشغيل هذا الأمر يبدأ من حاوية COG ودعكم نصل إليه

2. داخل حاوية COG : الآن بعد أن نتمكن من الوصول إلى حاوية COG ، نبدأ الخادم ، ويرتبط بجميع واجهات الشبكة:

 cd ComfyUI/
python main.py --listen 0.0.0.0

3. الجهاز المحلي : الوصول إلى الخادم باستخدام IP لجهاز GPU والمنفذ المكشوف (8188): http://<gpu-machines-ip>:8188

عندما تحصل على http://<gpu-machines-ip>:8188 سترى نموذج الويب الكلاسيكي!