스테이블디퓨전 9

[스테이블디퓨전] ComfyUI-ControlNet 설치하기 (모델의 포즈를 내 마음대로 변경, ControlNet-Union)

#푸푸놀이터  스테이블디퓨전으로 모델을 생성하다보면, 프롬프트만으로 해결하기 힘든 부분들이 있습니다. 원하는 포즈나 디테일한 표정, 그리고 잘 못 나온 부분만 수정하는 기능 등등, 스테이블디퓨전에는 이런 세세한 부분을 수정할 수 있는 기능들이 있습니다. 이번 포스팅은 그런 기능들 중 ControlNet 에 대해 알아보겠습니다. ControlNet 의 대표적인 기능은 Open Pose입니다. 생성하려는 모델의 자세를 내가 원하는 자세로 만들 수 있게 보조해 주는 기능인데요. 처음 시작은 Open Pose 하나롤 시작되었지만 지금은 다양한 추가적인 기능을 통해 여러 조건을 만족하는 기능들을 사용할 수 있습니다.  설치하는 방법부터 사용하는 방법까지 하나하나 천천히 기록해 보겠습니다. 보시면서 따라해보세요. ..

[스테이블디퓨전] ComfyUI-FLUX-GGUF 설치(3) (두 개의 Lora를 사용해서 이미지 비교하기)

#푸푸놀이터  FLUX - GGUF 에서 LoRA를 사용할 때, 같은 이미지(seed)에 다른 유형의 로라를 비교해 보고싶을 때가 있습니다. 예를 들면 비슷한 유형의 Lora 결과물을 비교하거나, 하나는 실사사진 Lora, 또 하나는 애니메이션 캐릭터 느낌의 Lora를 사용하여 결과물을 얻고 비교해 보면서 이미지를 생성해야하는 경우가 종종 발생합니다. 이때, 유용하게 쓸 수 있는 워크플로우 제작 방법을 알려드리겠습니다. 추가적인 노드 설치가 필요하니 천천 따라하시면서 워크플로를 만들어보세요.  1. 추가 노드 설치하기 1) ComfyUI 를 실행시키고 Manager 를 열어줍니다. 2) Manager 에서 Custom Nodes Manager를 열어줍니다.  3) 검색창에 ' venture ' 검색하면,..

[스테이블디퓨전] ComfyUI-FLUX-GGUF 설치(2) (Lora 사용하기)

#푸푸놀이터  GGUF 설치에 이어서 LORA를 사용해보겠습니다. Lora를 사용하게 되면 더욱 다양하고 정확한 표현력을 가지고 이미지를 생성할 수 있습니다. 그럼 로라를 사용하기 위한 노드부터 설치해보겠습니다.  1. 추가 노드 설치하기 1) ComfyUI 를 실행시키고 Manager 를 열어줍니다. 2) Manager 에서 Custom Nodes Manager를 열어줍니다.  3) 검색창에 ' custom Scripts ' 검색하면, pythongosssss/comfyUI-Custom-Scripts 라는 노드가 검색됩니다. 이 노드를 설치 합니다.  4) 설치가 완료되면, ComfyUI 를 재시작 합니다.    2. 워크플로 설정하기 1) 바탕을 더블 클릭해서 노트 검색란에 "Lora Loader" ..

[스테이블디퓨전] ComfyUI-FLUX-GGUF 설치(1) (강력한 Flux 모델을 낮은 사양 PC에서 사용 가능)

#푸푸놀이터  Flux 모델을 가볍게 사용할 수 있는 GGUF를 설치해 보겠습니다.  GGUF는 기존 Flux 모델 크기의 절반 정도 수준이며, 낮은 vram 에서도 구동이 가능하게 만들어졌기 때문에, 로컬 PC사양이 낮은 환경에서도 Flux 생성이 가능합니다.기존 Flux 모델 구동에 어려움이 있으셨거나, 빠르게 결과물 만들고 싶다면 GGUF를 설치해보세요. 설치 방법 및 워크플로 셋팅방법, 그리고 사용 방법을 어렵지 않게 순서대로 자세히 설명해 놓았습니다.차근차근 따라하시면서 설치해보세요~~  1. GGUF 파일 다운로드  1) 링크를 이동합니다. ComfyUI - GGUF 관련 내용은 아래 Github 링크에서 확인할 수 있습니다.https://github.com/city96/ComfyUI-GGUF..

[스테이블디퓨전] ComfyUI-MimicMotion 챌린지 댄스 동영상 만들기

#푸푸놀이터 이번 포스팅은 영상 속 캐릭터의 움직임을 내가 원하는 캐릭터가 움직일 수 있게 만드는 MimicMotion 에 대해 알아보겠습니다. 우선, ComfyUI 에서 사용할 수 있도록 MimicMotion 의 설치 방법에 대해 알아보고 설치 중에 발생할 수 있는 문제도 해결해보겠습니다. 컴퓨터를 능숙하게 다루지 못하는 문들은 조금 어려울 수 있지만, 천천히 따라 하시면 설치할 수 있습니다.영상보다는 글이 보기 편하니까요. 두 번, 세 번, 보시면서 설치해 보세요~      1. Mimic Motion 노드 설치 1) ComfyUI 를 실행합니다. 2) Manager  >  Install Custom Nodes 누루고 검색에서 ' mimic ' 을 검색합니다. 3) Tile 중 ' ComfyUI-Mi..

[스테이블디퓨전] ComfyUI-FLUX (최고의 AI생성 모델 Flux 설치하기)

#푸푸놀이터  FLUX는 Black Forest Labs. 에서 개발한 생성형 AI 모델로, 현재 가장 좋은 결과물을 낼 수 있는 모델입니다.  기존 Text to Image 형식의 생성형 AI는 이미지 생성의 정확도가 낮습니다. 특히 손가락 같은 경우 여러 개의 손가락을 만들거나 부족하게 만들고 어색하게 만드는 경우가 많았습니다. 하지만 Flux 모델은 손가락의 표현이 더 정확해지고 구조와 완성도가 높아졌습니다. 또한 이미지 안에 넣는 텍스트도 틀리지 않고 잘 표현합니다. 장점과 강점이 많은 Flux는 현재 WebUI forge와 ComfyUI 에서 사용할 수 있습니다.  이번 포스팅은 ComfyUI에서 Flux 를 사용하기 위한 설치 방법에 대해 설명하였습니다. 자세하게 설명했으니 천천히 따라 하면서..