65岁日本艺术家用Luma和Suno复活了逝去11年的爱人,给我看破防了

6月14日,一位65岁的日本艺术家在社交平台上,发布了一个用Luma的Dream Machine制作的视频。视频中,他将自己已逝去11年的妻子,在视频中重新复刻,把冰冷的照片变成了鲜活的影像。视频一经发布,这些温情瞬间触动了无数网友的心弦,不少网友在评论区留言,表示感动到热泪盈眶。

在这里插入图片描述
这个视频来自Koya Matsuo(松尾公也),是为了纪念他逝去了11年的妻子Tori-chan(小鸟酱)而做。

松尾,是一名AI艺术家,也是IT编辑,还是音乐人。

同时,也是一个65岁的老人。

在这里插入图片描述
该视频引发了许多网友的关注,播放量超过了40万次,不少网友称,“这简直就像是《哈利波特》里的魔法”。视频内容如下:
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
由于二人都十分热爱音乐,于是在小鸟酱离世前几个月,松尾和他的妻子就想完成一部作品留作纪念,但是由于小鸟酱的病情严重,松尾尝试用UTAU将过去的声源合成到新歌中。

UTAU,著名的开源声音合成软件,国内B站上一堆的鬼畜视频,就是用这个做的。

在这里插入图片描述
据外媒报道,2013年6月25日,松尾公也的妻子小鸟酱因乳腺癌不幸逝世。此后,松尾公也陷入对妻子的巨大思念中。

这一晃,十年过去了,松尾为小鸟酱制作的歌,达到了几百首之多,他就这样默默的做着,默默的用这种方式,纪念的小鸟酱。

AI时代

然后,AI时代,来了。

松尾的思念,从无形,化成了有形。

他疯狂的学习,疯狂的尝试所有的AI。

用pixel和remini来修复他和小鸟酱在1987年拍下的老照片。

用修复好的照片给SD来训练小鸟酱的角色LoRA,每天都在ComfyUI上拖着各种各样的工作流,终于让她终于有了新的写真。

在这里插入图片描述
还疯狂尝试AI音乐,把Stable Audio、Udio、Suno啥的全部用了个遍。

直到,6月12日,Luma的Dream Machine上线了。

网址在此:https://lumalabs.ai/dream-machine

他在发表于TECHNOEDGE中的文章里表示:“我使用它的目的并不是为了电影等视频制作,而是用于静态图像,尤其是让人物动起来。更具体地说,是为了看到11年前去世的妻子的动态身影。”

松尾公也用1978至1987年间拍摄的胶片照片,通过Remini技术进行高清化处理,再利用Luma Dream Machine转换成视频,实现了让妻子在视频中“复活”的愿望。

据他本人介绍,他把妻子高中时的一张照片(拍摄于1978 年)上传到Dream Machine,然后输入提示词:“a girl is talking with her friend on a moving train(在移动的火车上,一个女孩正在与她朋友交谈)”,从而生成视频。

照片中的人随着火车的震动而摇晃,窗外的阴影变化也被反映出来了。

在这里插入图片描述
他还找出妻子的数张照片,先用SD生成图像,然后使用Dream Machine将这些静态画面转化为动态视频。

在尝试过程中,松尾公也发现,如果动作太大,比如回头或站起来,视频中的脸部往往会与本人不符。他推测这可能是因为AI的训练数据偏向欧美人。为了解决这个问题,他尝试使用“… is looking at me(某某正在看着我)”或“… is staring at the viewer(某某正凝视着观众)”等提示词,成功生成了视线始终朝向他的视频。

这是1985年他们在筑波博览会拍摄的照片。

松尾给的提示词是:“a girl is looking at me(一个女孩正在看着我)”,然后,Dream Machine生成了让他每看一次都会心动的视频。

在这里插入图片描述
为了使作品更加完整,他把妻子保留下来的声音进行取样,利用 Suno的Voiceflex功能作词作曲,最终为妻子生成一条音乐MV:《Can Dream Machine Dream?》,完成了一次跨越时空的音乐与影像的融合。

当人工智能的浪潮席卷而来,我们不禁被其无尽的智慧和创造力所震撼。然而,在这科技的海洋中,我们更应该珍视与AI之间那独特而微妙的联系。它们不仅是我们探索未知世界的得力助手,更是我们情感与智慧的延伸。让我们携手共进,用AI的力量点亮人类文明的未来,共同谱写一段赞美人与AI之间和谐共生的壮丽篇章!

  • 14
    点赞
  • 19
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值