您好,欢迎访问一九零五行业门户网

几行代码安装,免费做图无上限:Stability AI公布DreamStudio开源版本

自从文本到图像开源模型 stable diffusion 最初版本发布以来,dreamstudio 一直是 stability ai 新模型和功能的主要界面。迄今,用户已经借助 dreamstudio 创建了数百万张图像。
最近,dreamstudio 还升级到了 sdxl,实现了比其前身 stable diffusion 2.1 更详细的图像和构图,并能用较短的 prompt 来创建描述性图像。
就目前来说,dreamstudio 已经可以生成这样的图像,效果不输 midjourney 5.1:
尽管 dreamstudio 提供了几乎没有门槛的图像生成方法,但它也有一个条件:付费。sdxl 版本的定价甚至还要更高一些。
而且,对一部分技术过关的开发者来说,他们也希望能够在 dreamstudio 的基础上进行一些应用扩展。
或许是听到了网友们的心声?刚刚,stability ai 发布了 dreamstudio 的开源版本 ——stablestudio。
开源地址:https://github.com/stability-ai/stablestudio
「我们相信,扩大技术落地的最佳方式是通过开放、社区驱动的开发,而不是闭源产品的私有化迭代。」stability ai 表示。
在该公司的规划中,stablestudio 的目标是进行更广泛的社区合作,为生成式 ai 打造一个世界级的用户界面,让用户能够充分控制。尽管 dreamstudio 仍将是 stability 公司托管的 stablestudio 的实现,但最终目标是培养一个能够超越任何由单一公司开发的项目。
具体来说,stablestudio 和 dreamstudio 有什么区别?
stability ai 做了一些调整,使得该项目对社区更加友好。包括:
删除了 dreamstudio 专属品牌;所有在线 api 调用都已被插件系统取代,用户可以轻松更换后端;删除了专属于 stability 的帐户功能,例如计费、api 密钥管理等。扩展功能dreamstudio 最初被设想为 disco diffusion 的动画 studio,2022 年 stable diffusion 发布之后,dreamstudio 的重点就转向了图像生成。
受今年爆火的对话模型启发,4 月 stability ai 发布了开源 llm stablevicuna。dreamstudio 的开源版本 stablestudio 将和 stablevicuna 结合,推出聊天界面。
stablevicuna 对话示例。
stable diffusion xl 生成的「stable vicuna」。
stability ai 表示,stablestudio 未来可能会更新以下功能:
通过 webgpu 进行局部推理通过 stable-diffusion-webui 进行局部推理桌面安装controlnet 工具安装与使用stablestudio 项目已在 github 上线,其中包含快速安装方法。
项目地址:https://github.com/stability-ai/stablestudio
要使用 stablestudio,用户需要先安装 node.js 和 yarn。然后按照如下命令克隆 stablestudio 存储库
git clone https://github.com/stability-ai/stablestudio.gitcd stablestudioyarnyarn dev
默认情况下,stablestudio 在 localhost:3000 上运行。用户需要准备 api 密钥才能使用默认的 stability api 插件;如果没有,则需要在 dreamstudio 上创建帐户并获取密钥。
图像生成主流模型无论是 dreamstudio,还是开源版本的 stablestudio,其背后的基础模型都是当前大火的图像生成模型 stable diffusion。stable diffusion 因其能在消费级 gpu 上快速生成高质量图像而得到广泛使用。
stable diffusion 模型的技术最早来源于发表在 cvpr 2022 中的一篇论文《high-resolution image synthesis with latent diffusion models》。为了训练出 stable diffusion,研究团队动用了 4000 个 a100 ezra-1 ai 超大集群, stability ai 公司提供了这些算力。
2022 年 8 月,stability ai 宣布发布 stable diffusion 并开源,11 月,他们又发布了 stable diffusion 2.0 版本。现在,stable diffusion 已取代 gan 成为图像生成领域主流模型。
作为产品平台 dreamstudio 的开源版本,stablestudio 把所有在线 api 调用替换为插件系统,能让用户轻松更换后端,将进一步推动图像生成领域的发展。
以上就是几行代码安装,免费做图无上限:stability ai公布dreamstudio开源版本的详细内容。
其它类似信息

推荐信息