这内容详细拆解了一个AI艺术项目“Cyberfish”的诞生。它探讨了在缺乏数据的情况下,如何巧妙利用Midjourney生成数据,再通过StyleGAN进行二次训练,甚至实现声音实时交互。这个过程揭示了AI时代跨学科创作的全新可能性,为对AI艺术感兴趣的人提供了宝贵的实战参考。
智能速览
缺乏数据集时,可用Midjourney“抽卡”生成新数据。
使用StyleGAN对AI生成数据进行二次训练,打造专属模型。
选择合适的预训练模型(如动物正面脸)能显著提升训练效率。
通过操控StyleGAN模型的不同层级,可实现图像从抽象到具象的生成。
对模型进行程序改造,可实现声音、鼠标等实时交互创作。
精华内容
AI艺术创作的魅力不仅在于最终成品,更在于其背后的技术路径和创作巧思。以下将详细拆解“Cyberfish”项目,看一个工科背景的创作者如何利用现有AI工具,一步步实现独特的艺术构想。
巧解数据难题
项目初衷是创作一套鱼的正脸作品,但最大的痛点在于人类世界中几乎不存在足够数量的鱼正面数据集。创作者的解决方案是利用Midjourney进行“抽卡”,即生成大量图片。在大约生成了200张图片后,获得了初步理想的鱼正面形象。这些由AI生成的图片,成为了后续模型训练的宝贵数据集,完成了“用AI生成AI的数据”这一关键闭环。
模型训练与迭代
获取数据集后,创作者选择StyleGAN模型进行训练。一个关键技术点在于预训练模型的选择。他没有从零开始,而是基于一个能识别老虎、狮子等动物正面的模型进行迁移学习。因为该模型已具备强大的五官特征抓取能力,使得鱼模型的训练效果更好、速度更快。在项目2.0版本中,创作团队不仅生成了更丰富的数据集,还在生成的动画基础上,额外加入了像素迁移着色器算法,使视觉效果更具表现力。
探索抽象与交互
为了追求更接近本源的抽象表达,创作者开始探索模型的内部结构。他发现,在StyleGAN模型中,靠前的神经网络层决定图像的大结构与构图,而靠后的层级则负责补充细节纹理。因此,他尝试只调用模型靠前的层级来生成动画,舍弃了后期细节,创造出形态更简洁、抽象的“圆形”版本作品。更进一步,通过对StyleGAN可视化工具进行二次开发,实现了通过鼠标拖拽、音乐甚至说话声实时控制动画参数,将静态的艺术品变成了可与人实时互动的动态体验。
这个案例生动展示了AI时代创作的核心:善用工具,迭代思维。从数据生成到模型训练,再到分层抽象与实时交互,创作者将技术工具化为艺术的画笔。未来,随着图像提示词、脑机接口等技术的发展,人机共创的边界将被进一步拓宽,这或许将催生出更多前所未见的艺术形式。
关键评论
有观众提问“抽卡是什么”,反映出AI创作的术语壁垒。