광고
광고
광고
광고
광고
광고
광고
광고
광고
광고
로고

Google의 ReCapture를 사용하면 사용자가 기존 비디오의 카메라 각도를 변경할 수 있습니다.

운영자 | 기사입력 2024/11/18 [10:37]

Google의 ReCapture를 사용하면 사용자가 기존 비디오의 카메라 각도를 변경할 수 있습니다.

운영자 | 입력 : 2024/11/18 [10:37]

 

 

Google의 ReCapture를 사용하면 사용자가 기존 비디오의 카메라 각도를 변경할 수 있습니다. 

이미지: Zhang et. al

Google의 ReCapture는 사용자가 사전 녹화된 비디오에서 카메라 각도를 소급적으로 조정할 수 있는 새로운 AI 기반 방법을 도입합니다. 2단계 프로세스를 사용하여 ReCapture는 먼저 원하는 카메라 움직임이 있는 "앵커 비디오"를 생성합니다. 이 앵커는 예비적인 반면 모델을 안내하지만 처음에는 불일치를 표시할 수 있습니다. 이를 개선하기 위해 시스템은 시간적 및 공간적 Low-Rank Adaptation(LoRA) 레이어를 모두 통합하는 마스크 비디오 미세 조정을 사용합니다.

Temporal LoRA는 움직임의 연속성을 처리하는 반면, Spatial LoRA는 세부 사항을 보존합니다. 비디오 대 비디오 변환에 의존하는 ReCapture는 CAT3D와 같은 확산 모델을 활용하여 전체 재교육 없이도 매끄러운 팬, 틸팅 및 확대/축소 조정을 허용합니다. 아직 실험적이기는 하지만 ReCapture는 사용자 친화적이고 전문가 수준의 비디오 조작에서 진전을 보여줍니다.

 

 

 
 
광고
광고
광고
광고
광고
광고
광고
광고
광고