0

بلاگ

دانلود هوش مصنوعی ویدیوساز LTX 2.3 با اینترنت ملی

۱۵ اردیبهشت ۱۴۰۵
ارسال شده توسط
آموزشی ، استیبل دیفیوژن ، مدل آفلاین ، هوش مصنوعی
3.86k بازدید

مدل LTX 2.3 نسخه ۱.۱ در حال حاضر یکی از قدرتمندترین مدل های ویدیوساز اوپن سورس است که قابلیت های بینظیری را به عنوان یک مدل کاملا رایگان ارائه می دهد.

توسط این مدل میتوانید ویدیوهای صدادار بسازید، سایر ویدیو ها را گسترش دهید یا ویرایش کنید و …

این مدل در همچنین به صورت پیشفرض قابلیت تبدیل متن به ویدیو و همچنین تصویر به ویدیو را دارد.

 دانلود و اجرای مدل LTX 2.3

در ادامه مراحل کامل نصب مدل LTX 2.3 روی کامفی یو آی را بررسی میکنیم:

برای اجرای این مدل باید آخرین نسخه رابط کاربری ComfyUI را به همراه نود های مخصوص GGUF و سایر پیش نیاز ها روی سیستم خود نصب داشته باشید.

در صورتی که جدیدترین نسخه این رابط کاربری را ندارید کافیست وارد لینک زیر شوید و نسخه اختصاصی کافه آرتک که تمام پیش نیاز های ضروری در آن قرار گرفته را دانلود و نصب کنید:

دانلود رابط کاربری ComfyUI با نت ملی

پس از نصب کامفی یو آی باید مدل ها را دانلود و در پوشه مخصوص قرار دهید. توضیحات بیشتر و لینک دانلود مدل ها در ادامه قرار گرفته.

۱. دانلود مدل اصلی:

ابتدا فایل اصلی مدل را با توجه به کارت گرافیک خود از لینک های زیر دانلود کنید:

توجه: در قسمت دانلود مدل ها دو فرمت متفاوت وجود دارد. یکی safetensors و دیگری GGUF. 

  • فرمت Safetensors:این فرمت نسخه اصلی مدل بوده و بالاترین حجم را دارد. در واقع نسخه ای است که فشرده سازی روی آن انجام نشده و به دلیل حجم بالایی که دارد نیاز به کارت گرافیک قدرتمند تر و با حافظه VRAM بالاتری دارد. از طرفی به دلیل فشرده نشدن، بالاترین کیفیت مدل مربوطه را در این نسخه میتوانید ببینید. اگه مقدار حافظه کارت گرافیک شما از حجم نسخه safetensors مدل مذکور بیشتر است میتوانید از این نسخه استفاده کنید. در غیر این صورت باید سراغ نسخه های GGUF بروید.
  • فرمت GGUF:این فرمت نسخه فشرده شده از مدل اصلی است. سایز مدل به نسبت های مختلف کوچک شده و برای کارت گرافیک با مقادیر مختلف حافظه VRAM قابل استفاده است. با توجه به مقدار حافظه VRAM کارت گرافیک خود باید نسخه gguf مناسب را انتخاب کنید. سعی کنید مدلی که نسبت به حافظه کارت گرافیک شما حجم کمتری دارد را انتخاب کنید. مثلا اگر کارت گرافیک شما ۶ گیگ حافظه دارد، باید مدلی را انتخاب کنید که حجمش کمتر از ۶ گیگ باشد. طبیعتا مدل های با حجم پایینتر کمی افت کیفیت هم دارند اما آنچنان قابل توجه نیست.

با توجه به این نکات، مدل مورد نظرتان را دانلود کنید:

 ۲. دانلود تکست انکودر:

بعد از دانلود فایل مدل اصلی، باید مدل تکست انکودرهای مخصوص LTX 2.3 را دانلود کنید.

با توجه به حافظه کارت گرافیک خود و نکته ای که بالاتر در مورد تفاوت مدل های Safetensors و GGUF اشاره شد، یکی از مدل های مناسب را از زیر دانلود کنید:

 ۳. دانلود VAE:

در مرحله بعد کافیست فایل vae را از لینک زیر دانلود کنید:

 ۴. دانلود Upscaler:

در مرحله بعد کافیست فایل Upscaler را از لینک زیر دانلود کنید:

 ۵. دانلود Lora مخصوص نسخه Dev:

در مرحله آخر، فقط در صورتی که از مدل اصلی نسخه Dev استفاده میکنید (نسخه GGUF قرار گرفته در این صفحه از نوع Dev میباشد اما نسخه Safetensors خیر)، باید فایل لورای distilled را دانلود کنید:

۶. دانلود ورک فلو:

در انتها کافیست فایل ورک فلوی زیر را دانلود کرده و بعد از خارج کردن از حالت فشرده، با درگ کردن به داخل محیط کامفی یو آی بکشید.

سپس یکبار با فشردن کلید R روی کیبورد لیست مدل ها را رفرش کرده و با وارد کردن پرامپت و کلیک روی دکمه Run تصویر مورد نظرتان را بسازید.

هماهنگ کردن ورک فلو برای مدل های GGUF:

در صورتی که میخواهید از مدل اصلی نسخه GGUF استفاده کنید کافیست نود Unet Loader (GGUF) را با راست کلیک و انتخاب گزینه Bypass فعال کرده و خروجی این نود را به ورودی نود Load Lora وصل کنید.

همچنین در صورتی که قصد استفاده از نسخه GGUF برای مدل تکست انکودر را دارید کافیست نود DualClipLoader (GGUF) را از حالت Bypass خارج کرده و خروجی آن را به ورودی نود Set Clip وصل کنید.

نکته مهم: لزومی ندارد که مدل اصلی و مدل تکست انکودر حتما از یک نوع باشند (مثلا هر دو از نوع GGUF یا هر دو از نوع Safetensors). میتوانید مدل اصلی را از نوع GGUF و مدل تکست انکودر را از نوع Safetensors استفاده کنید یا بالعکس.

برای دانلود سایر مدل های آفلاین هوش مصنوعی با اینترنت ملی این مقاله را ببینید ...
اشتراک گذاری:
درباره جواد نبوی

مدرس نرم افزار های گرافیک و عکاسی

در اینستاگرام
ما را دنبال کنید!

مطالب زیر را حتما مطالعه کنید

47 دیدگاه

به گفتگوی ما بپیوندید و دیدگاه خود را با ما در میان بگذارید.

  • دمت گرم منتظر بودم سایت huggingface باز شه 
    سایت های ایرانی زیادی رو گشتم پیدا نکردم جز اینجا♥️
    qwen image 2.0 و zimage edit هم عرضه شدن؟
    اگه شدن خواهشا بذارید.

    پاسخ

  • ارور نود های نصب نشده
    چون نت ملیه احتمالا نتونید به صورت اتوماتیک کاستوم نود هارو نصب کنید!
    https://github.com/kijai/ComfyUI-KJNodes
    وارد لینک بالا شید و دکمه سبز code رو بزنید و دانلود zip
    بعدش ComfyUI-KJNodes-main رو در پوشه custom nodes استخراج کنید
    و بعدش وارد این لینک بشید
    https://github.com/kosinkadink/ComfyUI-VideoHelperSuite
    و به شکل بالا در پوشه custom nodes استخراج کنید تا ارور ها رفع بشه

    پاسخ

  • سلام با نت ایرانسل میشه کامفی یو آی رو آپدیت کرد حتی نود ها رو هم میشه از داخل خود کامفی یو آی نصب کرد فقط موقع آپدیت شدن امنیتش از weak به normal تغییر کرد و اون قسمتی که باید تغییرش داد و تو دوره هم گفته شده کار نمیکنه یعنی امنیت تو اون قسمت weak هست ولی داخل خود کامفی یو آی بازم نمیشه با لینک نودها رو نصب کنم یادمه چت جی پی تی یه قسمت دیگه رو بهم آدرس داد که امنیتش رو کم کنم و درست شد ولی الان به چت جی پی تی دسترسی ندارم

    پاسخ

  • سلام من که باید نسخه gguf مدل اصلی رو نصب کنم آیا نیاز هست که نسخه خام رو هم برای پوشه diff model دانلود کنم
    من همه فایل هارو جایگذاری کردم غیر این فایل و هنگام ران کردن ورک فلو این ارور را میگیرم
    No link found in parent graph for id [371] slot [0] INT
    راه حل چیست؟

    پاسخ

  • با تشکر از قرار دادن این مجموعه، متاسفانه من از نسخه دسکتاپ کامفی استفاده میکنم و وژن gguf رو هم دانلود کردم
    و این نود هارو میخواد، تو گیت هاب هم گشتم پیدا نکردم اون لینکی هم که آقای همایون گذاشته بود هم اضافه کردم ولی مثل اینکه کاستوم نود های پرتابل با دسکتاپ فرق داره، کسی اگه اطلاعی داره ممنون میشم راهنمایی کنه

    LTX2SamplingPreviewOverride
    LTXVChunkFeedForward
    LTX2_NAG
    Power Lora Loader (rgthree)

    پاسخ

  • فایل مدل اصلی که ۲۴ گیگ هست نسخه distilled هست که اشکالی نداره اما فایل gguf نسخه dev هست.
    که حداقل به لورای تبدیل به distilled نیاز داره وگرنه با ۹۹ درصد ورکفلو ها نتیجه درست نمیده
    لطفا نسخه رو اصلاح کنید

    پاسخ

  • سلام جناب نبوی وقتتون بخیر.
    سوال اولم اینه که چرا خروجی LTX 2.3 بنده، یه تصویر بی کیفیت و دون دون هستش و فقط یک شمایل کلی و پر نویز نمایش میده؟ از مدل GGUF که قرار دادید استفاده کردم.
    سوال دومم هم اینکه، خواستم بدونم در صورت تهیه دوره، چطور رابط کاربری Automatic1111 را نصب کنیم؟ چون هم فایلش در حال حاضر در دسترس نیست و هم اگر هم در دسترس باشه، بعد نصب همونطور که مطلعید نیاز به دانلود یکسری فایل به صورت خودکار داره تا راه اندازی بشه. البته موارد دیگری هم در دوره به همین صورته.
    RTX3060 12GB
    32GB RAM

    پاسخ

    • درود وقتتون بخیر
      در مورد سوال اول باید لورای distilled رو از لینک زیر دانلود کنید و در فولدر loras قرار بدید که این مشکل توی نسخه dev مدل شما برطرف بشه:
      http://dl2.artech.cafe/offlineai/loras/ltx-2.3-22b-distilled-lora-384.rar
      ضمن اینکه حتما نود لود کردن این لورا که در ورک فلو بعد از نود لود مدل اصلی قرار گرفته رو باید از حالت bypass خارج کنید.

      در مورد سوال دومتون در حال حاضر واقعا رابط کاربری automatic1111 برای استفاده توی کار های عملی پیشنهاد نمیشه با توجه به اینکه قدیمی شده و پشتیبانی درستی از مدل های جدید نداره. پیشنهاد میکنم به جاش از رابط کاربری ComfyUI استفاده کنید که حرفه ای تر و به روز تره و نسخه آفلاینش توی سایت برای دانلود با نت داخلی قرار گرفته. آموزشش هم کامل توی دوره هست. بخش های مربوط به A1111 توی دوره رو هم صرفا برای آشنایی با مقدمات و مفاهیم هوش مصنوعی های آفلاین ببینید ولی برای کار عملی از کامفی یو آی استفاده کنید.

      پاسخ

  • سلام وقت بخیر این ارور رو میده : LTXVideo\v2\ltx-2.3-22b-distilled-1.1_transformer_only_fp8_scaled.safetensors Missing Models (1)
    . من مدل ltx-2.3-22b-dev-Q5_K_M.gguf رو دانلود کردم . تو ورکفلو ام

    پاسخ

    • درود
      چون gguf رو دانلود کردید بنابراین نیازی به نود مربوط به مدل safetensors ندارید. اون نود رو bypass کنید و از نود مخصوص gguf به همراه مدل خودش استفاده کنید و خروجیشو به همون جایی وصل کنید که خروجی نودی که bypass کردید وصل بود.

      پاسخ

  • لطفا در نصب نود های کمکم کنید !
    GetNode
    SetNode
    ImageResizeKJv2
    LTX2SamplingPreviewOverride
    LTXVChunkFeedForward
    LTX2_NAG
    INTConstant
    SimpleCalculatorKJ
    Power Lora Loader (rgthree)
    VAELoaderKJ
    VHS_VideoCombine

    پاسخ

  • سلام این لورا برای ویدیو با عکس سورس شخصیت با زوایای مختلف برای شخصیت ثابت در فیلم هست خیلی کاربردیه فوق العادست LTX-2.3-22b-IC-LoRA-HDR
    لطفا اگه برات مقدوره آپلودش کن

    پاسخ

  • سلام لطفا مدل Q3K_M برای vram کمتر هم قرار بدین. از شما ممنونم که توی این شرایط سخت بما کمک میکنید به امید روزهای بهتر

    پاسخ

      • تموم فایلهای Safetensors رو دانلود و در جای درست قرار دادیم اونارو میشناسه مشکلی نیست. ولی میگه مدل GGUF رو در فولدر unet پیدا نمیکنم!

        پاسخ

        • پس متن مقاله رو با دقت نخوندید. باید نود های مربوط به GGUF رو روی کامفی یو آی خودتون نصب داشته باشید و اگه ندارید باید نسخه کامفی یو آی که توی لینک زیر قرار گرفته رو دانلود کنید که به صورت پیشفرض این نود ها رو داره:
          https://artech.cafe/blog/offline-ai

          پاسخ

          • اتفاقا از همین لینک دانلود کردیم. مشکل در نودها نیست. مشکل اینه که مدل ltx-2.3-22b-dev-Q5_K_M.gguf رو میخواد در فولدر unet.

          • توی مقاله ذکر کردیم که شما برای مدل اصلی نیاز به یا نسخه GGUF دارید و یا نسخه Safetensors.
            اگه نسخه Safetensors رو دانلود کردید دیگه نیازی به نود مربوط به مدل gguf ندارید و باید اون نود رو توی ورک فلوی خودتون bypass کنید (یا حتی حذفش کنید) و بجاش از نود اصلی که مدل safetensors رو لود میکنه استفاده کنید (اگه توی حالت bypass هست از این حالت خارج کنید).

دیدگاهتان را بنویسید