apple / ml-neuman

Official repository of NeuMan: Neural Human Radiance Field from a Single Video (ECCV 2022)

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

关于人体渲染和背景渲染的分割问题

sycamore27 opened this issue · comments

您好,看到您在论文中写到将human mask扩大4%,想请教一下在后面渲染过程如何避免把背景颜色信息渲染到人体模型中呢?仅仅是根据mask loss来约束的吗?如果没有很精确的mask如何解决呢?期待&感谢您的回复🙂

hi,我们用了两个方法来避免背景颜色进入人体模型:1. 用mask来分割背景和人。2。先训练背景。
我们的假设是背景模型的重建质量还可以,那么这部分pixels(分割到人体上的背景像素)只会产生很小的loss来影响human nerf。