本文由 GPT- 4 所创作,配图由 Stable Doodle 生成。
编者按
Stability AI 上新了!
其收购的 Clipdrop 发布了全新的 Stable Doodle 工具,我在使用后最为直观的感受就是 —— 把绘画门槛打下来了。
在 Stable Doodle 之前,使用各类 AIGC 绘画工具最为痛苦的就是要写非常非常详细看着也不像人话的 Prompt,我想这也是很多人的痛点,不然也不会有像 ArtHub.ai 等提供 Prompt ideas 网站的诞生。
Stable Doodle 带来的最大的变化就是 Prompt 姿势的更新:
你随便画个草图,再搭配极为简单的 Prompt,相对精准而极为精致的图就诞生了。
使用 Stable Doodle 非常简单,只需要打开 https://clipdrop.co/stable-doodle 网页,无需登录账号(多次使用后会提示登录),直接在草图上随手画,再辅以简单的 Prompt 就可以。
比如我作为资深铲屎官想画猫:
看到 Stable Doodle 生成的图,我最大的感受就是:我的草图不配……
本文除了标题和「编者按」之外,其他内容均使用 AIGC 创作。在向 ChatGPT(GPT-3.5)、GPT-4 和微软 New Bing 发出同样的 Prompt 而得出不同的内容之后,我最终采用了 GPT-4 的内容,主要是它所生成的内容逻辑性和准确性相较之下都更好一些。一开始 New Bing 生成的看着专业性极强,但细细甄别之下我就发现了错误,如下:
接下来,就一起来看 GPT-4 是如何报道 Stable Doodle 的吧,如果你发现了错误,请一定要留言告诉我。
GPT-4:Stable Doodle 的诞生与应用
Stability AI 公司近日推出一项新的工具 Stable Doodle,这是一款可以将简单的绘图转化为动态图像的工具,为各行各业的专业人士和爱好者提供了无限的图像可能性。
Stable Doodle 的发布与特性
该工具由 Clipdrop 和 Stability AI 公司共同开发,可以显著提升从教育到创意设计,再到时尚和艺术等各种行业的效率。现在,任何具有基本绘画技能和在线访问能力的人都可以在几秒钟内生成高质量的原创图像。
Stable Doodle 的用户友好性使设计师、插图画家和其他专业人士能够节省宝贵的时间并最大化效率。他们可以立即将绘制的思维导图实施到作品中,为客户创建设计,为演示文稿和网站提供素材,甚至创建标志。其可能性是无穷的,而且使用起来非常有趣。
例如,以下是一些使用 Stable Doodle 的示例:
Stable Doodle 的工作原理
Stable Doodle 结合了 Stability AI 的 Stable Diffusion XL 高级图像生成技术和强大的 T2I-Adapter。T2I-Adapter 是由腾讯 ARC (license) 开发的一种条件控制方案,它允许对 AI 图像生成进行精确控制。
通过向现有的大型扩散模型添加可训练的参数,T2I-Adapter 能够包含额外的输入条件,比如素描、分割地图或关键姿势。这个框架同时支持多个模型进行输入引导,从而提供对生成过程的更强大控制。对于 Stable Doodle 的用例,T2I-Adapter 提供了辅助指导,使预训练的文本到图像模型 (SDXL) 能够理解素描的轮廓,并根据模型定义的提示和轮廓生成图像。
T2I-Adapter 网络由大约 7700 万个参数组成。它为预训练的文本到图像 (SDXL) 模型提供额外的指导,同时保持原始的大型文本到图像模型不变。
如何获取和使用 Stable Doodle
Stable Doodle 目前可以在 Clipdrop by Stability AI 的网站和应用程序 (iOS 和 Google Play) 上获得。用户可以在不登录的情况下开始试用该工具,但每日有使用限制。该工具的用户界面设计直观易用:用户只需用鼠标创建一个基本的素描,选择一个艺术风格,然后点击“生成”即可。
Stable Doodle 甚至允许艺术定制,通过 Stable Diffusion XL 提供了 14 种可供选择的风格。风格范围从现实(摄影)到电影,再到创意(奇幻艺术和折纸)。
Stable Doodle 的价值和限制
尽管 Stable Doodle 展示了令人印象深刻的能力,但还是需要认识到其固有的限制。Stable Doodle 使用算法分析图像的轮廓以生成视觉上令人愉悦且连贯的结果。最终的输出取决于用户提供的初始绘图和描述,以及工具的准确性可能会因场景的复杂性而变化。
用户在完全依赖 Stable Doodle 进行关键应用时应谨慎行事。与所有 Clipdrop 工具一样,Stable Doodle 的用户必须遵守 Clipdrop 的通用条款和条件。
综上,Stable Doodle 的发布为各行各业的专业人士和爱好者提供了一种全新的创作方式。尽管存在一些限制,但其潜力和可能性仍然无法估量。我们期待看到更多的创新和应用案例。