TongFlow, SCAIL-2 통합 — GPU에서 돌아가는 제어형 캐릭터 애니메이션

TongFlow가 이제 SCAIL-2를 지원합니다. 공식 tongflow-modal-scail2 플러그인이 엔드투엔드 제어형 캐릭터 애니메이션을 캔버스에 더합니다. 캐릭터 이미지와 구동 영상을 넣으면 캐릭터가 그 움직임을 그대로 따라 움직입니다. GPU는 Modal이 맡습니다.

무엇을 할 수 있나

SCAIL-2(zai-org/SCAIL-2)는 Wan2.1 기반의 제어형 캐릭터 애니메이션 모델입니다. 플러그인은 이를 바로 실행할 수 있는 노드 두 개로 연결합니다. tongflow-modal-wan-animate와 완전히 같은 두 슬롯이므로, 기존 워크플로에서 두 백엔드를 자유롭게 갈아 끼울 수 있습니다:

• 애니메이션(video-image-gen-video-move) — 구동 영상의 움직임을 내 캐릭터가 그대로 연기합니다.
• 교체(video-image-gen-video-mix) — 영상 속 캐릭터를 내 캐릭터로 바꿉니다.

입력은 캐릭터 이미지 + 구동 영상, 출력은 구동 영상의 오디오가 그대로 담긴 mp4입니다. 내부에서는 헤드리스 ComfyUI + WanVideoWrapper + WanAnimatePlus와 핵심 SAM3 노드가 돌아가며 컬러 마스크를 자동으로 만들어 줍니다. 손으로 로토스코핑할 필요가 없습니다. 두 모드는 공유 그래프 안의 불리언 값 하나로 전환됩니다.

단일 GPU에 맞춘 설계

플러그인은 SCAIL-2 14B DiT를 fp8과 BlockSwap으로 실행해 파이프라인 전체를 A100-80GB 한 장 안에 담습니다. 긴 변 896px 기준 약 5초짜리 클립이 엔드투엔드로 대략 9분 걸립니다(fp8, 6스텝 lightx2v, BlockSwap 10, 콜드 스타트 모델 로딩 포함). 출력 길이는 min(구동 동영상 길이, duration)을 따르며, VRAM, 어텐션 모드, 웜 유지 같은 튜닝 옵션은 플러그인 README에 정리되어 있습니다.

무료로 시작하기

플러그인은 Modal에서 실행됩니다. Modal은 신규 계정마다 A100급 실제 하드웨어에서 쓸 수 있는 매월 최대 $30 상당의 무료 GPU 컴퓨팅을 제공합니다. GPU가 없어도 클립을 넉넉히 만들 수 있는 양입니다. TongFlow의 Settings에는 자격 증명 세 가지가 필요합니다: MODAL_TOKEN_ID, MODAL_TOKEN_SECRET, 그리고 게이트된 Comfy-Org/sam3.1 가중치 접근이 승인된 HF_TOKEN(먼저 라이선스에 동의해야 합니다).

사용해 보기

1. 플러그인 설치 — TongFlow에서 플러그인 매니저를 열고 tongflow-modal-scail2를 설치합니다. 재시작 없이 바로 쓸 수 있습니다.
2. Settings에 자격 증명을 추가합니다(Modal 토큰 + HF_TOKEN).
3. 캐릭터 이미지와 구동 영상을 캔버스에 놓고, 애니메이션 또는 교체를 골라 실행합니다. 처음 실행할 때 플랫폼이 자동으로 Modal에 배포합니다.

TongFlow가 처음이신가요? v0.1.0 릴리스 글부터 읽어 보세요. 데스크톱 앱은 Releases에서 받을 수 있고, 호스팅 스튜디오 app.tongflow.com에서 바로 시작할 수도 있습니다. 도움이 되었다면 GitHub 스타가 큰 힘이 됩니다.

상상을 넓히고 아이디어를 펼쳐 보세요. 지금 바로 시작해 보세요.