Vision4Graphics & Graphics4Vision

Computer Vision&Graphics

• 

  Computer Vision Learning Common and Specific Features for RGB-D Semantic Segmentation with Deconvolutional Networks (ECCV2016) 최근 연구 때문에 서로 다른 modality를 가지는 데이터 간 correlation을 학습하는 네트워크를 서치하고 있었는데요, 그러던 중 ECCV 2016에서 발표된 RGB-D 데이터 기반의 semantic segmentation 논문을 하나 찾았습니다. RGBD 데이터를 이용해 recognition / segmentation의 성능을 향상시키려는 시도는 이전에도 있었습니다. 다만 논문에서 지적하는 점은 이 논문들에서 RGBD 데이터를 다루는 방식이 두 modality의 특성과 관계에 대한 고려 없이 단순히 concat하는식으로 독립적으로 다룬다는 것입니다. 실제로 제가 이 논문을 찾게 된 이유도 같은 이유라고 할 수 있겠네요. 논문에서는 RGB image와 depth map이라는 서로 다른 modal..

• 

  Terminology Manifold in Machine Learning 논문 리뷰를 하던 중 terminology 하나를 짚고 넘어갈 필요성을 느껴 포스트를 올립니다. 제가 읽으려던 논문의 제목은 인데요, Manifold 라는 단어는 이 논문의 제목 뿐만 아니라 머신 러닝 관련 document들을 읽다보면 빈번하게 발견할 수 있습니다. 이번 포스트에서는 그 의미를 짚고 넘어가려 합니다. 정리한 개념 / 정보 출처는 포스트 하단에 적어 놓겠습니다. Manifold in Data Science 데이터 사이언스에서 Manifold는 다음과 같은 의미를 가지고 있습니다. A topological space that resembles Euclidean space near each point 다시 말해, n dimensional manifold에 포함되어 있는 각각의 요소들은 이 ma..

• 

  Computer Graphics NeRFactor: Neural Factorization of Shape and Reflectance under an Unknown Illumination (TOG 2021) 오늘 notion을 긁어 모아 올릴 논문은 NeRFactor 입니다. 처음 박사 컨텍을 할 때 다루는 한국 연구실이 별로 없어 절망했을 만큼, illumination이나 relighting, decomposition 은 한국에서 상대적으로 인기 없는 주제인 듯 한데요.. 조금이라도 더 많은 학생들이 뛰어들어 같이 고생했으면 하는 마음으로 정리해봅니다. https://xiuming.info/projects/nerfactor/ NeRFactor Project page for NeRFactor. xiuming.info Abstract camera pose를 알고 있는, single unknown illumination (아마도 environment light) 환경에 놓인 object에 대해 scene을 su..

• 

  Computer Vision Unsupervised Learning of Probably Symmetric Deformable 3D Objects from Images in the Wild (CVPR 2020 Best Paper) Introductionsymmetric clue를 이용해서 single raw image 인풋으로 (supervision 없이) deformable 3D object recon 하는 논문. 우선은 input image를 depth / albedo / viewpoint / illumination 으로 decompose 하는 autoencoder를 기반으로 하는 end-to-end learning 구조."대부분의 객체들은 이론적으로라도 symmetry 구조를 가진다"를 전제로 풀어냄illumination을 reasoning cue로 사용, appearance 가 shading 등에 의해 완벽한 symmetry 가 아닌 경우에 대해서도 underlying symmetry를 찾을 수 있도록 했다는데 정확히 어떻..

• 

  Computer Vision Multi-view Relighting using a Geometry-Aware Network Coarse(Apporximated) Geometry 기반 Multi-view Relighting. Main novelty shadow refinement subnetwork illumination buffers. Contribution MVS Geometry proxy를 기반으로 한 end-to-end outdoor relighting network. (novel RGB Shadow imge based) learning based shadow refinement solution to remove and resynthesize shadows. "A Training procedure that uses realistic synthetic scenes to flexibly generate multiple li..

• 

  Computer Graphics RefNeRF: Structured View-Dependent Appearance for Neural Radiance Fields (CVPR 2022 oral) 논문 리뷰 2021년 12월에 arXiv에 올라온 걸 보고 notion 에 정리해놨던 리뷰입니다. 이번 CVPR 2022 accepted paper list 에 있는 걸 보고 뒤늦게 긁어모아 올리는 것인데.. 혼자 보려고 정리한 내용이다 보니 좀 설명이 불친절하더라도 양해 부탁드립니다. https://dorverbin.github.io/refnerf/ Ref-NeRF: Structured View-Dependent Appearance for Neural Radiance Fields Neural Radiance Fields (NeRF) is a popular view synthesis technique that represents a scene as a continuous volumetric function, par..