ToonCrafter는 정적 이미지에서 부드러운 애니메이션을 생성할 수 있는 혁신적인 AI 도구입니다. 이 도구는 사전 훈련된 이미지-비디오 확산 모델을 활용하여 두 개의 만화 이미지를 보간합니다. 사용자는 시작 프레임과 종료 프레임을 입력하면 ToonCrafter가 이를 기반으로 자연스러운 애니메이션을 생성합니다.
ToonCrafter의 주요 기능은 만화 스케치 보간, 참조 기반 스케치 색상화(단일 이미지 및 이중 이미지 참조), 그리고 희소 스케치 가이드 생성 등이 포함됩니다. 이 도구는 특히 애니메이션 제작 효율성을 높이기 위해 설계되었습니다.
ToonCrafter는 홍콩 중문대학교, 시티 유니버시티 오브 홍콩, 그리고 텐센트 AI 랩의 연구진에 의해 개발되었습니다. 이 도구는 오픈소스 프로젝트로, Apache-2.0 라이선스 하에 제공됩니다. 사용자는 GitHub 저장소에서 상세한 설정 지침과 함께 도구를 로컬에서 실행할 수 있는 방법을 찾을 수 있습니다.
ToonCrafter는 최대 16프레임의 비디오를 512x320 해상도로 생성할 수 있습니다. DDIM 단계를 줄임으로써 추론 시간을 단축할 수도 있습니다. 또한, ComfyUI에서 ToonCrafter를 사용할 수 있도록 하는 ComfyUI-ToonCrafter 저장소도 존재합니다.
이 도구는 애니메이션 제작자들에게 새로운 가능성을 열어주며, 복잡한 애니메이션 제작 과정을 단순화합니다. ToonCrafter를 통해 사용자는 창의적인 아이디어를 더 빠르고 효율적으로 실현할 수 있습니다.
