LTX-2는 Lightricks가 개발한 190억 파라미터의 DiT 기반 오디오-비디오 베이스모델입니다. 이 모델은 한 번의 처리 과정에서 동기화된 비디오와 오디오를 생성하며, 움직임, 대사, 배경 소음, 음악이 함께 어우러진 일체감 있는 경험을 만들어냅니다.
주요 특징
- 동기화된 오디오-비디오 생성: 한 번의 처리 과정에서 움직임, 대사, 효과음, 음악을 함께 생성합니다.
- 다양한 생성 모드: 텍스트-비디오, 이미지-비디오, 비디오-비디오
- 제어 옵션: IC-LoRAs를 통한 Canny, Depth, Pose 비디오-비디오 제어
- 키프레임 기반 생성: 키프레임 이미지 간 보간 처리
- 네이티브 업스케일링: 더 높은 해상도와 프레임 속도를 위한 공간적(2배) 및 시간적(2배) 업스케일러
- 프롬프트 향상: 자동 프롬프트 향상 지원
모델 체크포인트
시작하기
LTX-2는 ComfyUI에서 기본적으로 지원됩니다. 시작하려면:- ComfyUI를 최신 버전으로 업데이트하세요.
- 템플릿 라이브러리 > 비디오로 이동한 후, LTX-2 워크플로우 중 하나를 선택하세요.
- 팝업 안내에 따라 모델을 다운로드하고 워크플로우를 실행하세요.
워크플로
텍스트 기반 비디오 생성
텍스트 프롬프트에서 비디오를 생성합니다.
텍스트 기반 비디오 생성
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
텍스트 기반 비디오 생성 Distilled
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
이미지 기반 비디오 생성
입력 이미지로 비디오를 생성합니다.
이미지 기반 비디오 생성
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
입력 이미지
기본 입력 이미지를 다운로드하거나 직접 만든 이미지를 사용하세요.
이미지 기반 비디오 생성 증류 버전
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
입력 이미지
기본 입력 이미지를 다운로드하거나 직접 만든 이미지를 사용하세요.
Control-to-video
IC-LoRA를 사용하여 구조적 제어 기반 비디오를 생성합니다. 깊이 제어:
Depth-to-Video
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
입력 이미지
기본 깊이 입력 이미지를 다운로드하거나 자신의 이미지를 사용하세요.
입력 비디오
기본 입력 비디오를 다운로드하거나 자신의 비디오를 사용하세요.
Canny-to-Video
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
입력 이미지
기본 Canny 입력 이미지를 다운로드하거나 자신의 이미지를 사용하세요.
입력 비디오
기본 입력 비디오를 다운로드하거나 자신의 비디오를 사용하세요.
Pose-to-Video
워크플로 다운로드
Comfy Cloud에서 실행
클라우드에서 열기
입력 이미지
기본 포즈 입력 이미지를 다운로드하거나 자신의 이미지를 사용하세요.
입력 비디오
기본 입력 비디오를 다운로드하거나 자신의 비디오를 사용하세요.
프롬프트 작성 팁
LTX-2용 프롬프트를 작성할 때는 행동과 장면에 대한 상세하고 연대기적인 묘사를 중심으로 하세요. 구체적인 움직임, 외관, 카메라 앵글, 환경적 세부사항 등을 한 문장으로 자연스럽게 표현하세요. 바로 행동부터 시작하고 묘사는 직설적이고 정확하게 유지하세요. 프롬프트를 다음과 같은 구조로 작성하세요:- 한 문장으로 된 주요 행동
- 구체적인 움직임과 제스처 설명
- 캐릭터/객체의 외관
- 배경과 환경 세부사항
- 카메라 앵글과 움직임
- 조명과 색상
- 변화나 갑작스러운 사건들