Stable Diffusion在ipad叫什么?(在Mac/iPad/iPhone上使用AI绘画)

共计 1746 个字符,预计需要花费 5 分钟才能阅读完成。

在 AIGC(人工智能绘画生成)的浪潮中,每个人都有机会成为一位艺术家。然而,长期以来,AI 一直与显卡,特别是 Nvidia 支持的 CUDA 显卡紧密相连。在 Mac 平台上运行 AI 应用通常需要一些额外的努力。但随着苹果软硬件的不断升级,现在在 Mac/iPad/iPhone 上使用 Stable Diffusion 变得越来越容易。在本文中,我们将介绍两种主要的方法来在苹果设备上使用 Stable Diffusion。Stable Diffusion 在 ipad 叫什么?(在 Mac/iPad/iPhone 上使用 AI 绘画)

Core ML Stable Diffusion:苹果的宠儿

苹果为 Stable Diffusion 推出了两种主要方法,它们都可以在 CPU、GPU 和 NE 等多种运行环境下运行:

Swift Core ML Diffusers

这是一个来自 Huggingface 的开源 Demo,它使用苹果的工具将 Stable Diffusion 模型转化为 CoreML 格式,然后将其保存在 Huggingface 上。用户可以根据需要下载相应版本的 CoreML 模型来生成图像。

优势 :开源,支持多种不同的运行条件,包括 GPU、NE、GPU+NE 等,同时也支持 iOS 版(需要自行编译),CoreML 速度快。

缺陷 :不支持直接导入本地模型,示例中模型数量相对较少,需要用户自行添加。

兼容性和功能

  • macOS Ventura 13.1
  • iOS/iPadOS 16.2
  • Xcode 14.2(需要自行构建)

在 MacBook Pro M1 Max(64 GB 内存)上,使用 CPU + GPU 运行,Stable Diffusion v2-base 模型在 macOS 上仅需约 8 秒。在 iPhone 13 Pro 上,使用 CPU + Neural Engine,Stable Diffusion v2-base 模型需要 23 到 30 秒。

Mochi Diffusion

这是一个由网友制作的开源 Demo,它使用苹果的 Swift 调用 CoreML,允许用户自行下载 CoreML 格式的模型并将其放入指定文件夹以运行,也可以下载 Stable Diffusion 并使用苹果的工具将其转换后再导入。

优势 :开源,支持多种不同的运行条件,包括 GPU、NE、GPU+NE 等,同时支持直接导入本地模型,CoreML 速度快。

缺陷 :不支持 iOS 版。

兼容性

  • 搭载 Apple 芯片的 Mac
  • macOS Ventura 13.1
  • Xcode 14.2(需要自行构建)

MPSGraph 派:基于 Maple Diffusion 的选择

Waifu Art AI

这个应用搭载了 Aniplus V1 模型,这是一个基于 Stable Diffusion 1.5 + Waifu Diffusion 1.3 + TrinArt Characters v1 的二次元绘画风格模型。作者还添加了画风选择和中文输入翻译系统。

优势 :支持 Mac/iPad/iPhone,界面提供中文界面。

缺陷 :不开源,模型选择有限,参数相对较少。

兼容性

  • macOS 12.3
  • iOS/iPadOS 16.0,需要 6 GB 内存以上的设备,如 iPad M1/M2、iPhone 13 Pro、iPhone 14 或 iPhone 14 Pro。

Draw Things

这款应用几乎是最强大的 Stable Diffusion 使用工具之一,备受推崇。作者形容制作过程为 ”Stretch iPhone to its Limit”,其 2GiB 模型可以绘制几乎任何东西。

优势 :支持 Mac/iPad/iPhone,提供多种参数和模型选择,iPhone 上只需 2GB 内存。

缺陷 :不开源,导出的模型与其他工具不兼容,速度稍慢于苹果的 CoreML。

兼容性

  • macOS 12.4
  • iOS/iPadOS 15.4,需要 A12 芯片和 2GB 以上内存的设备。

总结

有了以上四个选择,每个人都可以在自己的 Mac/iPad/iPhone 上愉快地使用 Stable Diffusion。然而,需要注意的是,这些工具有不同的兼容性要求:

  • 对于 iPhone 和 iPad,通常需要 A12 芯片或更高,以及 4GB 甚至 6GB 以上的内存,并且对 iOS/iPadOS 版本也有特定要求。
  • 对于 Mac,主要取决于硬件和系统版本,M1/M2 系列芯片效果最佳,但有些模型对 Intel 芯片有潜在的约束。

此外,这些工具通常在首次运行时加载较慢,因为首次出图速度特别慢,但随后会加快。现在,您可以随心所欲地在苹果设备上尽情享受 Stable Diffusion 的乐趣了。

正文完