deforum-art发布了一个扩展,将ModelScope 文本合并到视频 (text2video)与 Automatic1111 的稳定扩散 Web UI。我将在本文中向您展示如何安装使用此扩展程序。

启用扩展

  • 单击 扩展 选项卡,然后单击 从 URL 安装。
  • 在 URL 框中输入https://github.com/deforum-art/sd-webui-modelscope-text2video并单击 Install。

  • 单击 已安装 ,然后单击 应用并重新启动 UI。
  • 转到您的 stable-diffusion-webui/models 文件夹并创建一个名为 ModelScope 的文件夹,然后在 ModelScope 下创建一个名为 t2v 的文件夹。这是 text2video 的模型文件夹。此文件夹的路径是stable-diffusion-webui/models/ModelScope/t2v
  • 您可以使用两组模型。原始型号尺寸更大,需要更多 VRAM 才能使用。下载模型和配置文件并将它们放在之前创建的文件夹中。请注意,对于配置文件,您必须单击</> raw才能获取该文件。
    原始模型
    Pruned 和半精度模型
  • 重启webui

text2video 示例

  • 单击ModelScope text2Video选项卡并根据需要输入提示。单击生成以开始该过程。

  • 界面不会告诉您何时完成。您将不得不查看控制台窗口以查看它是否已完成生成。完成后,单击更新视频 以查看生成的视频。生成的视频在stable-diffusion-webui/outputs/img2img-images/text2video-modelscope/下
    关于此扩展的一些观察:
  • 我的带有 12GB VRAM 的 GPU 可以生成高达 384×384 的视频。
  • 如果您手动输入身高和体重,它可能不起作用。相反,使用向上和向下箭头来调整身高和体重。
  • 我尝试过不同的分辨率,但似乎 256×256 的效果最好。
  • 如果你想生成以人物为主题的视频,你可以试试这个提示。
    提示:你的主题的超逼真的照片肖像,美丽对称的脸,冷漠的表情,逼真的圆眼睛,色调映射,复杂,优雅,高度详细,数字绘画,artstation,概念艺术,流畅,锐利的焦点,插图,梦幻般的魔法氛围, artgerm 和 greg rutkowski 和 alphonse mucha 的艺术,4k,8k
    负面提示:框架,边框,丑陋,肥胖,超重,(长脖子),质量差,错误,模糊,模糊,高对比度,((染发)),两个头,多个头,两张脸,多张脸,多人,一群人
  • 大多数视频都有 shutterstock 水印,无法通过否定提示删除。

以下是一些示例视频:

 

发表回复

后才能评论
casibom