关于 GAN Lab
生成式人工智能与交互实验室 · Generative Artificial Intelligence and Interaction Lab
团队与背景
生成模型与人机交互
在生成模型研究中,我们关注生成效率、内容可控性与质量评价:如何用更少的计算步骤得到高质量结果,如何让模型响应人的意图,以及如何评价生成内容是否符合预期。DisBack研究扩散模型蒸馏的训练方法,通过分布回溯改善收敛过程;团队成员也参与了面向实时交互场景的 MoWorld 世界模型研究。
在人机交互研究中,我们关注人如何表达想法、探索方案并调整生成结果。PoemPalette将诗歌意象组织为可供创作的视觉线索,RealtimeGen 探索生成过程中的实时干预,FusionProtor 结合实体原型与扩展现实支持设计探索。这些工作通过系统实现与用户研究,考察交互方式如何影响创作过程和使用体验。
文化遗产与艺术实践
文化艺术是团队持续开展研究与创作的领域。团队成员参与的“墨染”国画创作系统,在浙江大学—阿里巴巴前沿技术联合研究中心开展,探索国画长卷合成、字体设计、风格与笔触迁移等方法。《运河·生长·万象》以京杭大运河杭州段遥感影像为基础,生成国画长卷与动态影像,展于浙江美术馆“大地史诗——中国大运河主题艺术展”。成员参与内容撰写与视觉设计的人工智能发展简史图谱,也在浙江美术馆展出。
围绕古画修复,我们面向不同使用者探索数字工具与交互体验。InkRenew 关注修复师的数字修复工作流程;Ink Restorer则面向公众,将“洗、揭、补、全”的传统修复工序转化为可参与的虚拟操作。前者服务于专业操作中的数字辅助,后者帮助公众在体验中理解修复技艺。
项目合作
团队的项目经验涉及生成模型研究、交互工具开发和文化展览创作,既有研究系统,也有与其他团队共同完成的作品。面向技术研发、设计与文化领域的合作,我们关注具体场景中的生成、交互和内容表达问题,将算法方法与系统原型、创作实践结合。