스테이블 디퓨전 125

ComfyUI에서 Flux GGUF 사용하기

GGUF(GGML Universal File) 파일 형식은 텐서와 메타데이터를 단일 파일에 저장하는 바이너리 형식 포맷으로서, 모델 데이터를 빠르게 저장하고 로드할 수 있도록 설계되었다....(중략).... GGUF 파일은 일반적으로 PyTorch나 Tensor와 같은 다른 머신 러닝 라이브러리로 개발된 모델을 변환하여 생성된다.(출처: GGUF-wiki)저는 머신러닝에 대해선 거의 모르지만, GGUF는 그냥 공통 파일 포맷 정도로 생각하면 되고, 무엇보다 대형모델을 빠르게 돌릴 수 있는 장점이 있다고 합니다.사실 제가 GGUF까지 관심을 둘만한 일은 아닙니다. 그런데... Stable Diffusion 보다 성능이 좋다는 Flux 모델을 사용하고 싶은데, SD-Forge에서는 소형모델이나마 지원해주는데..

이미지속 숨겨진 글자

아래의 이미지에서 뭔가 숨겨진 게 보이시나요? 눈을 거의 감길 것처럼 찌그리고 쳐다보세요. 스테이블 디퓨전 AI 를 사용하면 이렇게 단어가 숨겨져 있는 이미지를 쉽게 생성할 수 있습니다.이러한 이미지를 생성하는 가장 좋은 도구는 ControlNet 과 ADetailer 입니다. 이미지 자체는 텍스트 프롬프트로만 사용합니다. 따라서 얼마든지 다양하고 독특한 이미지를 생성할 수 있습니다.이 글에서는 AUTOMATIC1111 에서 이러한 이미지를 생성하는 방법을 세밀하게 알려드립니다.소프트웨어따라하기참고다른 프롬프트짧은 생각소프트웨어이 글에 있는 워크플로는 가장 널리 사용되고 있는 스테이블 디퓨전용 웹 GUI인 AUTOMATIC1111을 사용합니다. AUTOMATIC1111의 설치 방법은 이 글을 보시고, 초..

책 표지 만들기

이 워크플로는 스테이블 디퓨전으로 책 표지를 생성합니다. 프롬프트를 바꿔주면 원하는 대로 생성할 수 있습니다. 책표지에는 아래와 같이 제목과 저자명을 포함합니다.소프트웨어따라하기(SD3)따라하기(Forge)SD3와 Flux 비교소프트웨어텍스트를 원하는 위치에 정확히 표시하려면 스테이블 디퓨전 3를 사용하는 것이 좋습니다. 현재 SD3를 사용하려면 Stability AI에서 제공하는 API를 사용하는 방법뿐이 없습니다. 설치하는 방법은 이 글을 따라하시면 됩니다.또, Flux 를 사용하는 방법도 있습니다. Flux는 현재 SD-Forge를 사용해서 로컬에서 돌릴 수 있습니다.이 글에서는 이 두가지 방법을 사용하는 방법을 보이고, 결과를 비교해 보겠습니다.따라하기(SD3)1 단계: 모델 다운로드체크포인트 모..

시베리안 냥이 애니메이션

이 글에 있는 ComfyUI 워크플로는 아래와 같은 시베리안 고양이 비디오를 생성합니다.소프트웨어따라하기비디오 변경 방법소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ComfyUI가 처음이시라면, 설치 및 기본 사용방법 및 초보가이드를 확인하시기 바랍니다.따라하기1 단계: 모델 다운로드체크포인트 모델: Delibrate v2 모델을 다운로드 받아 ComfyUI\models\checkpoints 폴더에 넣어줍니다. (A1111과 모델을 공유할 경우 여기를 보세요)AnimateDiff 모델: AnimateDiff v3 motion 모델을 다운로드 받아, ComfyUI\models\animatediff_models 폴더에 넣어줍니다.ControlNet 모..

추상 비디오 아트 (ComfyUI)

이 글에 있는 ComfyUI 워크플로는 아래와 같은 멎진 추상 비디오 아트를 생성합니다.소프트웨어따라하기비디오 변경 방법소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ComfyUI가 처음이시라면, 설치 및 기본 사용방법 및 초보가이드를 확인하시기 바랍니다.따라하기이 워크플로는 AnimateDiff 노드에 Prompt Travel 을 적용합니다.1 단계: 모델 다운로드체크포인트 모델: Delibrate v2 모델을 다운로드 받아 ComfyUI\models\checkpoints 폴더에 넣어줍니다. (A1111과 모델을 공유할 경우 여기를 보세요)AnimateDiff 모델: AnimateDiff v3 motion 모델을 다운로드 받아, ComfyUI\mo..

ComfyUI로 이미지 배경 삭제하기

배경 제거는 디지털 아티스트 및 그래픽 디자이너에게 중요한 도구입니다. 군더더기를 줄이고 집중력을 높일 수 있죠. 또한 이 이미지를 다양한 맥락에 재활용할 수 있습니다.이 글에서는 ComfyUI를 사용해 이미지 배경을 삭제하는 방법을 설명합니다.소프트웨어다른 대안따라하기소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ComfyUI가 처음이시라면, 설치 및 기본 사용방법 및 초보가이드를 확인하시기 바랍니다.다른 대안사실 구글링만 해봐도 배경을 삭제하는 서비스는 많습니다. 하지만, 처리된 이미지를 원래의 해상도로 다운로드 받으려면 가입을 하거나 비용을 지불하는 경우가 많습니다. 또한 프라이버시 혹은 비밀 등으로 인해 이러한 서비스를 이용하는 것이 타당하지..

춤추는 스파게티

어떤 물체를 춤추게 한다는 아이디어를 생각해 본 적이 있으신가요? 이 글에 있는 ComfyUI 워크플로를 사용하면 쉽게 생성할 수 있습니다 이 예제 워크플로는 댄싱 비디오를 춤추는 스파게티로 전환해 줍니다.소프트웨어이 워크플로의 원리따라하기비디오 변경소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ComfyUI가 처음이시라면, 설치 및 기본 사용방법 및 초보가이드를 확인하시기 바랍니다.이 워크플로의 원리이와 비슷한 작업을 두개의 샘플링 패스로 구현한 사례가 있지만, 이는 불필요합니다. 여기서는 단일 샘플링 패스를 사용해 동일한 결과를 얻는 방법을 보여드리겠습니다 입력 비디오는 흰색 피사체와 검은색 배경으로 이루어집니다. 이러한 비디오는 Depth 전처..

페이스 아트 애니메이션

이 글에서는 아래와 같은 페이스 아트 애니메이션 비디오를 생성합니다.소프트웨어이 워크플로의 원리따라하기비디오 변경소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ComfyUI가 처음이시라면, 설치 및 기본 사용방법 및 초보가이드를 확인하시기 바랍니다.이 워크플로의 원리참조 이미지 생성이 워크플로에서는 먼저 SDXL 모델과 loRA를 사용해서 비디오를 생성하기 위한 참조 이미지를 생성합니다.비디오 생성비디오는 SD 1.5 모델에 AnimateDiff 를 적용하여 생성합니다. 비디오 생성 도중에 IP adapter를 사용하여 참조 이미지를 주입합니다. 여기에서 프롬프트는 비워두어서 오직 이미지를 기준으로만 비디오를 생성하게 됩니다.후처리스테이블 디퓨전을 ..

ComfyUI에서 스테이블 디퓨전 3.5 미디엄 모델 사용하기

스테이블 디퓨전 3.5 미디엄(Stable Diffusion 3.5 Medium)은 일반용 그래픽카드에서 돌릴 수 있는 AI 이미지 모델입니다. 파라미터의 수는 26개로서, 8억개인 SD 3.5 Large에 비해 적습니다.SD 3.5 미디엄은 메모리가 큰 GPU에서 이미지를 빨리 생성하고 싶은 경우, 혹은 메모리가 비교적 작은 PC에서 돌리고자 할 경우에 사용할 수 있습니다. Stablility AI에 따르면 256x256 부터 1440x1440 에 이르는 여러 해상도를 지원하는 최초의 스테이블 디퓨전 모델이라고 합니다. 소프트웨어SD 3.5 모델SD 3.5 미디엄 설치 방법SD 3.5 미디엄 모델 설정소프트웨어이 글에서는 스테이블 디퓨전용 GUI중에서도 제가 제일 좋아하는 ComfyUI를 사용합니다. ..

백라이트 사진

이 워크플로는 초보자용으로서, SD-Forge 웹UI에 Flux 모델을 사용하여 사실적인 백라이트 사진을 생성하는 워크플로입니다.소프트웨어따라하기이미지 변형소프트웨어이 투토리얼에서는 Stable Diffusion Forge 웹 UI를 사용합니다. 설치 방법은 여기를 보시고, Forge에서 Flux를 실행시키는 방법은 여기를 읽어보세요.따라하기1 단계: 체크포인트 모델 설치아래의 모델을 다운로드 받습니다.Flux1 dev NF4 - VRAM이 적은 기기에서 돌릴 수 있는 작지만 빠른 버전(6GB/8GB/12GB 등)다운로드 받은 후 webui_forge_cuXXX_torchXXX/webui/models/Stable-diffusion 폴더에 넣어줍니다. AUTOMATIC1111과 모델을 공유할 경우, sta..