Novita는 시장에서 매우 경쟁력 있는 가격을 제공합니다.
예를 들어, Wan 2.1 I2V 720P 5초 비디오는 비디오당 $0.3, Wan 2.1 I2V 480P 5초 비디오는 비디오당 $0.2에 불과합니다!
현재 최대 3개의 Lora를 지원합니다!
지금 Novita AI에서 무료 체험을 시작하세요. Wan 2.1 API를 통합하려면 개발자 문서에서 자세한 내용을 확인하세요.
Wan 2.1 I2V(Image-to-Video)는 Wan-VAE 및 Video Diffusion DiT와 같은 최첨단 기술을 결합한 최신 비디오 생성 모델입니다. 이 모델은 강력하고 깨끗한 학습 데이터셋을 기반으로 고충실도 비디오 재구성, 효율적인 압축, 원활한 텍스트-투-비디오 생성에 탁월합니다.
Wan2.1 I2V 기능
Wan 2.1의 주요 혁신
1. Wan-VAE
개요
- 효율적인 압축과 고충실도 모션 재현을 위해 설계된 3D 변분 오토인코더(VAE)
- 시간적 일관성을 유지하면서 1080P 비디오를 인코딩 및 디코딩 가능
- 시공간 압축 최적화, 메모리 사용량 감소, 시간적 인과성 보장을 위한 여러 전략 통합
해결된 문제
- 효율적인 압축: 비디오 데이터의 저장 및 계산 요구 사항 감소
- 고충실도 재구성: 생성된 비디오의 높은 품질과 모션의 일관성 보장
- 시간적 일관성: 생성된 비디오에서 프레임 불연속성이나 떨림과 같은 일반적인 문제 방지
2. Video Diffusion DiT
개요
- Flow Matching 프레임워크로 향상된 Diffusion Transformers 기반
- 다국어 텍스트 입력(T5 Encoder 사용) 및 텍스트 임베딩(크로스 어텐션) 지원
- 시간 임베딩에 대한 변조 파라미터 예측을 위해 공유 MLP 사용, 각 트랜스포머 블록이 고유한 편향을 학습하게 하여 성능 향상
해결된 문제
- 텍스트와 비디오 생성의 심층 통합: 모델이 텍스트 설명에 따라 비디오를 더 잘 이해하고 생성할 수 있도록 함
- 향상된 생성 성능: 파라미터 수를 늘리지 않고도 생성된 비디오의 품질과 표현력을 크게 향상
- 멀티모달 지원: 여러 언어와 입력 유형을 처리하여 응용 시나리오 확장
3. 후보 데이터셋
개요
- 대규모로 선별 및 중복 제거된 이미지 및 비디오 데이터셋
- 데이터 차원, 시각적 품질, 모션 품질에 초점을 맞춘 4단계 데이터 정제 프로세스 사용
- 다양하고 고품질의 학습 세트 구축
해결된 문제
- 데이터 노이즈 및 중복: 품질이 낮거나 중복된 데이터를 효과적으로 제거하여 학습 데이터의 효과 향상
- 다양성과 품질: 모델에 풍부하고 깨끗한 샘플을 제공하여 일반화 및 생성 능력 향상
- 대규모 학습: 크고 고품질의 데이터셋에서 효율적인 학습 지원
Wan 2.1의 Vbench
Wan 2.1(Wan-14B)은 ID 일관성, 물리적 타당성, 부드러움과 같은 핵심 작업에서 뛰어난 성능을 보여줍니다. 전체 가중치 점수는 업계 최고 수준으로, 현재 사용 가능한 선도적인 비디오 생성 모델 중 하나입니다. 그러나 스타일화 능력과 카메라 제어 측면에서는 여전히 개선의 여지가 있습니다.
Wan 2.1의 하드웨어 요구 사항
Wan 2.1은 특히 고해상도 및 대형 모델 작업에서 높은 하드웨어 요구 사항을 가집니다. Wan 2.1 I2V의 메모리 요구 사항은 80GB에 가깝습니다. 메모리 및 속도 요구 사항을 충족하려면 여러 개의 고성능 데이터센터급 GPU(A100, H100, H20 등)를 사용하는 것이 좋습니다. 소비자급 GPU는 소형 모델 및 저해상도 시나리오에만 적합합니다.
| 모델 | 단일 카드 호환 | 멀티 GPU 권장 | 권장 수준 |
|---|---|---|---|
| RTX 4090 | 아니요 | 아니요 | T2V-1.3B 480P 전용 |
| H20 | 지원 안 함 | 4 GPU 또는 8 GPU | ★★★ |
| A800/A100 | 지원 | 4 GPU 또는 8 GPU | ★★★★ |
| H800/H100 | 지원 | 4 GPU 또는 8 GPU | ★★★★★ |
Novita AI를 통해 Wan 2.1에 액세스하는 방법
Novita AI는 개발자가 간단한 API를 사용하여 AI 모델을 쉽게 배포할 수 있도록 지원하는 AI 클라우드 플랫폼이며, 구축 및 확장을 위한 저렴하고 안정적인 GPU 클라우드도 제공합니다.
1단계: 로그인 및 모델 라이브러리 액세스
계정에 로그인하고 Model Library 버튼을 클릭하세요.
2단계: 모델 선택
사용 가능한 옵션을 살펴보고 필요에 맞는 모델을 선택하세요.
3단계: 무료 체험 시작
4단계: API 키 가져오기
API 인증을 위해 새로운 API 키를 제공합니다. 페이지에 진입하면 이미지에 표시된 대로 API 키를 복사할 수 있습니다.
5단계: API 설치
프로그래밍 언어에 맞는 패키지 관리자를 사용하여 API를 설치하세요.
설치 후, 개발 환경에 필요한 라이브러리를 가져옵니다. API 키로 API를 초기화하여 Novita AI LLM과 상호 작용을 시작하세요. 다음은 Python 사용자를 위한 채팅 완성 API 예제입니다.
import requests
url = "https://api.novita.ai/v3/async/wan-i2v"
payload = {
"extra": {"webhook": {
"url": "<string>",
"test_mode": {
"enabled": True,
"return_task_status": "<string>"
}
}},
"model_name": "<string>",
"image_url": "<string>",
"width": 123,
"height": 123,
"loras": [
{
"path": "<string>",
"scale": {}
}
],
"seed": 123,
"prompt": "<string>",
"negative_prompt": "<string>",
"steps": 123,
"guidance_scale": 123,
"flow_shift": 123,
"enable_safety_checker": True
}
headers = {
"Content-Type": "<content-type>",
"Authorization": "<authorization>"
}
response = requests.request("POST", url, json=payload, headers=headers)
print(response.text)
Wan 2.1 I2V (Image-to-Video)는 Wan-VAE 및 Video Diffusion DiT와 같은 최첨단 기술을 결합한 최신 비디오 생성 모델입니다. 이 모델은 강력하고 깨끗한 학습 데이터셋을 기반으로 고충실도 비디오 재구성, 효율적인 압축, 원활한 텍스트-투-비디오 생성에 탁월합니다.
자주 묻는 질문
Wan 2.1 I2V의 하드웨어 요구 사항은 무엇인가요?
Wan 2.1 I2V는 텍스트 또는 이미지 입력으로 고품질 비디오를 생성하기 위한 고급 모델입니다. 그 독특함은 고충실도 모션 재현, 시간적 일관성, 텍스트-투-비디오 생성을 위한 다국어 지원에 있습니다.
Wan 2.1 I2V란 무엇이며, 무엇이 독특한가요?
경쟁력 있는 가격: 유사 플랫폼의 $2.39에 비해 5초 720P 비디오당 $0.40.
개발자를 위한 상세 문서와 사용하기 쉬운 API.
Wan 2.1 I2V에 어떻게 액세스할 수 있나요?
Novita AI 플랫폼을 통해 Wan 2.1 I2V를 사용할 수 있습니다. 간단히 로그인하고 모델을 선택한 후 API 키를 받아 개발 환경에 API를 통합하세요.
Novita AI는 AI 야망을 실현하는 올인원 클라우드 플랫폼입니다. 통합 API, 서버리스, GPU 인스턴스 — 비용 효율적인 도구를 제공합니다. 인프라 걱정 없이 무료로 시작하여 AI 비전을 현실로 만드세요.
