공간정보와 인터넷지도

요즘 Stable Diffusion 커뮤니티의 핫한 주제는 Video-to-Video입니다. 그 가운데에는 AnimateDiff 가 있죠. 저도 몇번 생성해봤지만, 아직도 잘 모르는 게 많아, 천천히 알아보려는 중입니다. 이 글은 그중에서 세번째 시도로, https://github.com/guoyww/AnimateDiff/ 을 번역한 글입니다. === 이 저장소는 Yuwei Guo 등의 논문, AnimateDiff: Animate Your Personalized Text-to-Image Diffusion Models without Specific Tuning 의 공식 구현입니다. AnimateDiff는 추가적인 학습이 없이도, 거의 모든 커뮤니티 모델을 애니메이션 생성기로 바꿔주는 plug&play 모듈..

이 글은 animateDiff와 인페인트를 사용해서 일부분만 움직이는 이미지를 생성하는 ComfyUI에 대해 설명드립니다. 소프트웨어 따라하기 워크플로 설명 소프트웨어 이 글에서는 스테이블 디퓨전을 위한 GUI 중 하나인 ComfyUI를 사용합니다. 설치 및 기본 사용방법은 이 글을 보시면 됩니다. 조금 중복되는 부분도 있지만, 초보자 가이드도 참고하세요. 따라하기 0단계 : ComfyUI 워크플로 불러보기 아래의 그림을 다운로드 받고, ComfyUI 화면에 Drag&Drop하면 이 워크플로를 사용할 수 있습니다. 대부분 그냥 따라하면 그대로 사용할 수 있지만, 때때로 오류가 발생할 수 있습니다. 그러한 경우, 다음과 같은 작업이 필요할 수 있습니다. 처음 사용할 때 - ComfyUI Manager 를 ..

브레드 피트가 열연을 펼친 "벤자민 버튼의 시간은 거꾸로 간다"라는 영화를 보며, 자기에 맞는 얼굴을 갖는 게 얼마나 중요한지에 대해 생각했던 기억이 있습니다. 오늘 소개시켜드릴 워크플로도 사람이 점점 거꾸로 나이가 들어가는 동영상을 만드는 방법입니다. 이 기법은 ComfyUI + AnimateDiff 를 사용합니다. 아래는 생성 예입니다. 이 글의 목차는 아래와 같습니다. 소프트웨어 설정 따라 하기 참고사항 및 변경 방법 인생을 25초로 소프트웨어 설정 스테이블 디퓨전을 사용할 수 있는 GUI는 여러가지 종류가 있지만, 이 글에서는 ComfyUI를 사용합니다. ComfyUI가 처음이신 분은 설치 및 기본 사용 방법 및 초보자 가이드를 읽어보시기 바랍니다. 따라 하기 1 단계: 워크플로 불러오기 아래 그..

이글은 아래와 같은 텍스트 애니메이션이 포함된 비디오를 생성하는 방법을 설명합니다. 이글에서는 먼저 무료 소프트웨어를 사용해 텍스트 애니메이션을 만드는 방법을 알아보고, 이 비디오를 사용해 실제 파도가 치는 효과를 추가하는 ComfyUI 워크플로를 알아보겠습니다. 이 글의 내용은 아래와 같습니다. 소프트웨어 DaVinci Resolve 설치 Text 추가 Text 이동 추가 텍스트 애니메이션 내보내기 ComfyUI 워크플로에 불러오기 실습 소프트웨어 텍스트 애니메이션을 생성하기 위한 비디오 편집프로그램은 Da Vinci Resolve를 사용합니다. 아래로 내려가면 아래와 같은 화면을 볼 수 있는데, Free Download Now를 누르면 등록한 후 다운로드 받을 수 있습니다. 스테이블 디퓨전을 사용하기..

LCM-LoRA를 사용하면 스테이블 디퓨전 모델을 사용한 이미지 생성 속도를 아주 빠르게 할 수 있습니다. 일반적인 경우 KSampler에서 20 단계 ~ 25 단계정도를 돌려야만 깔끔한 이미지를 생성할 수 있음에 비해, LCM-LoRA를 사용할 경우, 4-6 단계 정도면 비슷한 수준의 이미지를 생성할 수 있습니다. 즉 5배 정도 빨리 이미지를 생성할 수 있다는 것입니다. 또한 LCD-LoRA의 경우 SDXL에도 적용할 수 있어 유용할 것 같습니다. 특히 아래와 같은 AnimateDiff 비디오를 생성할 경우, 여러개의 프레임을 생성해야 하므로 속도가 매우 중요하다고 할 수 있습니다. 아래는 이 글의 목차입니다. LCM-LoRA란 무엇인가? LCM-LoRA의 작동 원리 LCM-LoRA 다운로드 AUTOM..

이 글에서는 AnimateDiff Prompt Travel Video-to-video, 즉, AnimateDiff 와 프롬프트를 사용해서 기준 Video를 유사한 다른 비디오를 만드는 기법을 소개시켜드립니다. 이제까지 Stable Diffusion을 사용해서 비디오를 만드는 방법은 여러번 소개시켜드렸는데(다섯가지 방법, Deforum, AnimateDiff) 여러가지 한계가 있었습니다. 이 글에서 소개시켜 드리는 방법도 완벽하다고는 할 수 없지만, 상당히 부드럽고 일관성이 있는 비디오를 생성할 수 있는 기법입니다. 이 글의 목차는 아래와 같습니다. AnimateDiff Prompt Travel의 작동 원리 소프트웨어 설정 워크플로 불러오기 사용방법 생성된 영상 품질 검사 생성 설정 변경 좋은 영상을 만들..