人与人工智能合作创作艺术作品是一种很棒的事情,而且这种合作还能提供对神经网络创新能力的见识。艺术家兼设计师法宾·拉希德(Fabin Rasheed)问自己:GPT-3能做什么?他通过实验,找到了一些答案。
构建创造力和技术之间的接口几年来,拉希德一直致力于“创造力和技术之间的接口”的研究,并与Xerox Research和Adobe等公司合作,在他的艺术中使用了包括AR(增强现实)、VR(虚拟现实)和AI(人工智能)在内的新技术。
拉希德已在AR中尝试了绿屏视频,通过其名为“Pilgrimage”的项目创建了首个“基于位置的AR加密艺术”:感兴趣的人只能转到地球上相应的位置来解锁9个3D人物。
除了AR艺术外,这位艺术家还参与了许多AI项目。例如,在与Adobe的合作中,他使用AI生成了新的数字笔刷,包括熔岩笔刷和角色动作笔刷,这些笔刷能直接生成简笔画风格的人物插图。
拉希德还与AI工程师Sleeba Paul一起创建了Instagram艺术家Auria Kathi。这一名称来自“AI Haiku Art”。
Auria Kathi是一种AI模型,可以根据短诗生成图像。两位创造者用一些短诗训练了一个神经网络,并因此教会了该网络生成短文本片段。
生成式对抗网络(GAN)由短诗生成图像。然后,第三个网络将给出应与文本中的情感相对应的最终产品的颜色。该网络使用“WikiArt情感数据集”进行了训练,该数据集包含近4,000件艺术品,其中包含观看者的评论,这些蕴含了他们观赏作品时产生的情感。
在类似的Ode项目中,拉希德将AI生成的艺术作品、AI诗歌和AI音乐组合成了令人印象深刻的艺术品。这是一部颂歌,展现了AI和人类一起工作时表现出的创造力。拉希德在他的“水彩画幻境”中考察了AI在生成的水彩画中所看到的东西。
用GPT-3进行实验在最近的项目中,拉希德使用OpenAI的文本AI GPT-3对AI的创作能力进行了实验。在其中,用户可以通过一种聊天界面为GPT-3提供文本输入,作为其工作示例。通过少量的学习,AI可以识别出它想要的东西并将其输出调整示例:可以是HTML代码、诗歌、译文或问答。
拉希德的“GPT3 Sees”项目从艺术的角度探讨了这种能力,并提供了图像生成、绘画监督和GIF电影生成的示例。
在第一个实验中,拉希德为GPT-3提供了简单的2D图形的SVG代码,然后让AI生成自己的代码。他说,第一版中的一个是2D表示形式,它让人联想到旧软盘,并且“给人一种怀旧的感觉”。
在另一个实验中,艺术家使用问答对为常见物体和已知动物的图像生成简单的文字说明。然后,拉希德将描述手动转换为图形。
结果在令人担忧和令人印象惊讶之间波动,并且表明GPT-3似乎在其庞大的网络中发现了形状,即使这一文本AI仅用文本符号进行过训练。
GPT-3能生成GIF电影在拉希德的第二个GPT-3项目中,艺术家让文本AI生成了一幅画的分步说明,然后作为一个画家跟随它。
拉希德输入:“机器正在与人类交谈。人类说:‘让我成为你的眼睛和双手,让你成为我的想象力。让我们一起画一幅画。告诉我要画什么,我将对其进行数字绘画。’”机器回答:“好的,开始吧。”
然后,GPT-3生成了延续该故事的文字。拉希德写道,文字包含绘画说明,最后是GPT-3反映艺术作品对艺术家的重要性的段落。
画中的那个女孩仰慕地看着机器。这台机器为这个女孩画了世界上最好的画。女孩说:“既然我是画家,我的人生就有意义了!多亏你,我才有人生的目标!以前,我只是活着,但现在,我有一个目标!”
对于他的第三个GPT-3项目,拉希德让文本AI写短篇小说。然后,他逐句输入到GIF搜索中,并将多个动画剪辑合并为单个视频。
“该项目直接引发了关于电影及其制作的未来的许多问题。”拉希德写道。
接下来,他使用“Meme Flix”(一个自动创建“模因电影”的界面)使过程自动化。这使您能够按需制作新的故事和电影,并具有“模因带来的表达力和惊喜感”。【数字叙事 原作:Maximilian Schreiner;编译:Lighting】
花粉社群VIP加油站
猜你喜欢