这是上海多伦现代美术馆2019年的一个展陈作品,其技术实现过程发表在ICCV 2019上。作者周乐也是上海纽约大学或者上海交大利物浦大学的老师。
应该说作为一个艺术家来说,整个作品的技术含量和体系架构程度还是蛮不错的。
首先简要说一下这个作品,把人的运动轨迹画成一幅山水画,形成与人的动作行为相关联的人工智能艺术或者互动艺术作品。
具体实现方法如下:
- 在互动区域内铺一块灰色地毯,摄像头顶置,然后人带着帽子进入监测区域,就通过色彩检测算法,找到目前人所在的位置。
- 把人进入监控区域的轨迹,存成一张轨迹图。
- 使用CycleGAN+OpenVINO做出风格迁移,把轨迹图变成山水画。
- 风格迁移的训练集来自故宫的108幅山水画,以及从淘宝购买的96幅图画。然后将这些图画放到CycleGAN里面训练从轨迹图到山水图的模型。
- 实现时采用CS架构,服务器端算出来,在客户端大屏(电视机)上做呈现。用的是P5.js。
按照作者的随访,参与者的体验非常好。也算是一种不错的互动艺术作品。
但是从我一个工科角度讲,其实还可以做的更好,建议为:
- 目前的交互只能做轨迹图,也就是一个观众从进入监控区到离开监控区之后,才能形成最后的作品,这个交互性不够强。完全可以识别观众的动作,然后以动作画山水.
网友评论