VideoCoCo는 물리 과정을 먼저 코드로 실행하고, 그 다음 영상을 만든다
VideoCoCo는 Blender 코드로 물리 과정의 저해상도 초안을 먼저 실행한 뒤 비디오 편집 모델로 사실적 영상을 만드는 Code-as-CoT 이중 엔진 접근으로, 물리 일관성 비디오 생성의 제어 가능한 중간 표현을 제안한다.
Category6 posts
비디오 생성, 편집, 인페인팅, 영상 기반 모델링 흐름을 정리합니다.
VideoCoCo는 Blender 코드로 물리 과정의 저해상도 초안을 먼저 실행한 뒤 비디오 편집 모델로 사실적 영상을 만드는 Code-as-CoT 이중 엔진 접근으로, 물리 일관성 비디오 생성의 제어 가능한 중간 표현을 제안한다.
KeyFrame-Compass는 386개 기본 샘플과 키프레임 실행·전체 비디오 품질을 분리한 진단 지표로, 멀티 키프레임 비디오 생성이 자연스러움과 제어 충실도 사이에서 어떤 trade-off를 보이는지 측정하는 공개 벤치마크다.
StudioRecon은 저중첩 다중 카메라 영상에서 배경에는 비디오 확산 prior를, 사람에는 SMPL 기하 prior를 따로 적용해 4D Gaussian human-scene을 재구성하고, 시간 일관성 보정으로 자유 시점 영상을 만드는 SIGGRA...
WorldDirector는 LLM이 3D 객체·카메라 궤적을 계획하고, 이를 2D 위치 조건·appearance binding·causal chunk memory로 내려보내 장기 비디오에서 동적 객체 영속성을 유지하려는 공개 월드 시뮬레이터 프레임워크...
NVIDIA LongLive-2.0은 Balanced SP, NVFP4 학습·추론, KV-cache 양자화, asynchronous VAE decoding을 묶어 긴 비디오 생성의 학습 비용과 실시간 추론 병목을 동시에 낮추려는 공개 시스템 릴리스다.
Netflix의 VOID는 단순 배경 인페인팅을 넘어서, 사람이 사라지면 기타가 떨어지는 것처럼 제거 대상이 남긴 물리적 상호작용까지 함께 수정하는 interaction-aware video object removal 모델이다.