中国科学技术大学推出AI人像视频编辑工具PortraitGen：风格化、换衣、修改光照通通搞定

摘要

中国科学技术大学的研究团队推出了一款名为PortraitGen的创新AI人像视频编辑工具。该工具支持多模态编辑，只需30分钟即可实现复杂的人像视频修改。用户可以通过文本或图像驱动进行风格化编辑、换、修改光照等操作。此外，PortraitGen还引入了SMPL-X系数追踪和神经高斯纹理技术，确保在编辑过程中保留人物个性化面部结构，保持自然流畅的效果。

主要特点

1. 30分钟内将2D人像视频编辑为支持每秒100帧播放的高质量视频。
2. 多种编辑方式，包括文本驱动和图像驱动，实现风格化、换衣和光照调整。
3. 采用神经高斯纹理技术，确保更复杂的样式编辑和面部细节保留。
   

技术优势

1. SMPL-X系数追踪与神经高斯纹理结合，实现精准的人像编辑。
2. 支持多模态输入，提供丰富的风格和样式选择。
3. 面部意识编辑模块提升表情质量，确保人物个性化。

应用场景

1. 人像视频编辑：快速处理并生成高质量、个性化视频内容。
2. 广告与影视制作：灵活应用于风格转换和特效制作。
3. 虚拟试穿与光照调整：适用于时尚、广告等需要精细光照和换装效果的场景。

相关链接

– 项目入口