近年来,日本的人工智能技术在文化领域得到了快速发展和应用,通过将日本传统文化与现代科技相融合,为数字时代的人们提供了与文化遗产互动的新途径。
7月22日,日本生成式AI初创公司Sakana AI发布浮世绘风格图像生成模型“Evo-Ukiyoe”和着色模型“Evo-Nishikie”,通过开源平台Hugging Face免费开放了模型权重、推理代码、模型算法等,旨在应用AI技术赋能日本传统文化的世界传播。
使用Evo-Ukiyoe生成的图像
Evo-Ukiyoe是一种文本到图像生成模型,可进行浮世绘风格高清画作的生成,用户只需用日文输入简单的文本描述,便可以创建高质量的浮世绘风格图像,其色彩和纹理都与真实的浮世绘图像极为相似。
使用Evo-Ukiyoe生成的图像(提示词:一只穿着和服的猫在花园里喝茶)
基于Evo-Ukiyoe开发的浮世绘着色模型Evo-Nishikie是一种图像到图像生成模型,除了可对墨色单色浮世绘图像进行着色之外,还可将彩色浮世绘转换为不同的颜色,该技术适用于为古代典籍中的版刻插图进行着色。
原图(左)和使用Evo-Nishikie着色的图像(右)
Evo-Ukiyoe和Evo-Nishikie应用了深度学习和GPT大语言模型,其训练数据集来自立命馆大学提供的24,038幅真实的浮世绘数字化图像。
原图(左)和使用Evo-Nishikie着色的图像(右2幅)
Sakana AI公司将这两款模型视为“学习日本美的AI”,希望广泛应用于教育与科研领域的同时,能够激发艺术家从浮世绘中汲取新的灵感,引领大众深入探索浮世绘的魅力,进一步提升全世界对浮世绘及日本传统文化的兴趣与认知,传承和弘扬日本传统文化。
使用Evo-Ukiyoe生成的图像(提示词:一只穿着和服的白虎在樱花树下读书)