가우시안 스플래팅을 이용한 이미지 편집
- 폴란드와 영국 연구자들의 새로운 협력으로, 선택된 이미지 부분을 3D 공간으로 해석하여 수정하는 기법인 Gaussian Splatting을 제안.
- 사용자는 이미지의 3D 표현을 수정하고 변환을 적용할 수 있음.
- 특정 이미지 부분을 Gaussian Splatting을 통해 3D 공간으로 이동시키고, 사용자가 조작한 후 변환을 적용.
- MiraGe 시스템은 물리 엔진을 통합하여 자연스러운 운동 해석 가능.
- Adobe의 Firefly 시스템과 달리 생성형 AI를 사용하지 않음.
- MiraGe 시스템은 선택을 3D 공간으로 해석하고 기하학을 추론하여 고품질 재구성을 만듦.
- 논문 제목: MiraGe: Editable 2D Images using Gaussian Splatting.
- Gaussian Mesh Splatting (GaMeS) 매개변수를 사용하여 Gaussian Splats를 전통적인 CGI 메쉬로 해석.
- MiraGe는 ‘평평한’ Gaussian을 2D 공간에서 해석하고 GaMeS를 사용하여 3D 공간으로 끌어옴.
- 편집된 예제로는 한 여성의 팔을 실감나게 기울인 사례가 있음.
- MiraGe는 Blender와 같은 오픈 소스 3D 프로그램에 통합 가능.
- 두 가지 변형 접근법(Amorphous, Graphite)을 제공하여 복잡한 형태를 처리.
- 신호 대 잡음 비율(SNR) 및 MS-SIM 메트릭을 사용하여 이미지 품질 평가.
- 실험 데이터셋: Kodak Lossless True Color Image Suite, DIV2K validation set.
- NVIDIA GEFORCE RTX 4070 및 RTX 2080에서 실험 수행.
- MiraGe는 이전의 프레임워크에 비해 우수한 성능을 제공.
- Gaussian Splatting을 사용하여 2D 이미지를 3D 공간으로 임시 변환 후 원래 이미지로 돌려놓는 접근 방식이 유망하게 평가됨.
4unite.ai링크 복사하기
AI 뉴스 요약은 뉴스의 내용을 AI가 요약(GPT-4 활용)한 것입니다. 따라서 틀린 내용을 포함할 수 있습니다. 뉴스의 자세한 내용을 확인하시려면 해당 뉴스 링크를 클릭해주세요.