공간정보와 인터넷지도

Stable Video 3D(SD3D)는 이미지를 단 한장 입력받아서, 3차원으로 회전하는 동영상을 생성해주는 AI 모델입니다. Stability AI에서는 이 모델을 비 상업적 목적에 한해 공개했습니다. 아래는 입력 이미지와 이를 이용해 생성헌 3차원 회전 이미지입니다. 이 글의 목차는 아래와 같습니다. 소프트웨어 따라하기 이미지 조정 SV3D의 원리 소프트웨어 이 글에서는 ComfyUI를 사용합니다. ComfyUI 에 대해 잘 모르신다면 설치 및 사용법 기초와 투토리얼을 읽어보시기 바랍니다. 따라하기 1단계: SV3D 워크플로 불러오기 아래의 json 파일 혹은 이미지 파일을 다운로드 받은 후, ComfyUI 화면에 Drag&Drop하면 워크플로가 불러들여집니다. 이 워크플로는 대부분 그냥 그대로 사..

SD Forge는 AUTOMATIC1111의 변형 버전으로, 매우 실행속도가 빠르는 등 여러가지 장점이 있는 스테이블 디퓨전용 웹 UI입니다. 특히 ControlNet, SDV 등 몇가지 확장이 미리 통합되어 있어 따로 설치할 필요가 없어 편리합니다. 이 글에서는 SD Forge를 사용하여 SVD 비디오를 생성하는 방법을 알아보겠습니다. 스테이블 비디오 디퓨전(SVD)이란 txt2img 로 이미지 생성 SVD 비디오 생성 GIF 변환 스테이블 비디오 디퓨전(SVD)이란 스테이블 비디오 디퓨전(Stable Video Diffusion)은 2023년 11월 1일 Stability.ai에서 발표한, 이미지를 사용하여 짧은 비디오(움짤)을 생성하는 img2vid 생성 모델입니다. 이 글을 읽어보시면 ComfyU..

요즘 Stable Diffusion 커뮤니티의 핫한 주제는 Video-to-Video입니다. 그 가운데에는 AnimateDiff 가 있죠. 저도 몇번 생성해봤지만, 아직도 잘 모르는 게 많아, 천천히 알아보려는 중입니다. 이 글은 AnimateDiff for AUTOMATIC1111에 이어 네번째 글로, https://wikiwiki.jp/sd_toshiaki/AnimateDiff 를 번역한 글입니다. AnimateDiff 개요 모션 모듈이란? a1111 사용방법 매개변수 체크포인트 및 LoRA 특성 프롬프트 작성방법 콘트롤넷 AI 확대기(UpScaler) ComfyUI에서 사용방법 프롬프트 트래블 없는 워크플로 프롬프트 트래블을 사용하는 워크플로 AnimateDiff 개요 GIF 등의 짧은 동영상(표준..

요즘 Stable Diffusion 커뮤니티의 핫한 주제는 Video-to-Video입니다. 그 가운데에는 AnimateDiff 가 있죠. 저도 몇번 생성해봤지만, 아직도 잘 모르는 게 많아, 천천히 알아보려는 중입니다. 이 글은 그중에서 세번째 시도로, https://github.com/guoyww/AnimateDiff/ 을 번역한 글입니다. === 이 저장소는 Yuwei Guo 등의 논문, AnimateDiff: Animate Your Personalized Text-to-Image Diffusion Models without Specific Tuning 의 공식 구현입니다. AnimateDiff는 추가적인 학습이 없이도, 거의 모든 커뮤니티 모델을 애니메이션 생성기로 바꿔주는 plug&play 모듈..

요즘 Stable Diffusion 커뮤니티의 핫한 주제는 Video-to-Video입니다. 그 가운데에는 AnimateDiff 가 있죠. 저도 몇번 생성해봤지만, 아직도 잘 모르는 게 많아, 천천히 알아보려는 중입니다. 이 글은 AnimateDiff for AUTOMATIC1111에 이어 두번째 글로 https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved 를 번역한 글입니다. 개요 모델 설정 기능 향후 추가 예정 기능 기본 사용법 및 노드 [AnimateDiff Loader ① ] Gen1 과 Gen2의 비교 Multival 노드 AnimateDiff Keyframe Context Options와 View Options [Sample Settings] ..

요즘 Stable Diffusion 커뮤니티의 핫한 주제는 Video-to-Video입니다. 그 가운데에는 AnimateDiff 가 있죠. 저도 몇번 생성해봤지만, 아직도 잘 모르는 게 많아, 천천히 알아보려는 중입니다. 이 글은 그중에서 첫 시도로, https://github.com/continue-revolution/sd-webui-animatediff 을 번역한 글입니다. === 이 확장은 AnimateDiff와 CLI(프롬프트 트래블)를 AUTOMATIC1111 Stable Diffusion WebUI 와 ControlNet에 통합하는 것이 목표이다. 이 확장을 사용하면, txt2img로 이미지를 생성하는 것과 똑같은 방식으로 GIF를 생성할 수 있다. 이 확장은 AnimateDiff를 다른 방식..

이 글에서는 Video-to-video 기법, 즉 기존의 비디오를 소스로 해서 인물과 배경을 바꾼 새로운 비디오를 생성하는 기법을 설명합니다. 다만, 예전 글에서 설명한 것처럼, Video-to-video를 적용하면 화면이 번쩍거리던가 매 장면마다 사람 얼굴이 바뀌는 등의 문제가 발생하기 쉬운데, 여기서는 이런 문제를 해결한 비디오를 생성합니다. 여기서 다루는 사항은 아래와 같습니다. IP-adapter - 얼굴을 일관성있게 유지하는데 중요합니다. 다중 콘트롤넷 - 프레임간 움직임을 일정하게 유지하는데 중요합니다. AnimateDiff - 프레임간 일관성 유지에 필요합니다. 원래 짧은 비디오를 생성하는 img-to-video 모델입니다. LCM LoRA - 비디오 생성속도를 3배 이상 빠르게 합니다. D..

이글은 아래와 같은 텍스트 애니메이션이 포함된 비디오를 생성하는 방법을 설명합니다. 이글에서는 먼저 무료 소프트웨어를 사용해 텍스트 애니메이션을 만드는 방법을 알아보고, 이 비디오를 사용해 실제 파도가 치는 효과를 추가하는 ComfyUI 워크플로를 알아보겠습니다. 이 글의 내용은 아래와 같습니다. 소프트웨어 DaVinci Resolve 설치 Text 추가 Text 이동 추가 텍스트 애니메이션 내보내기 ComfyUI 워크플로에 불러오기 실습 소프트웨어 텍스트 애니메이션을 생성하기 위한 비디오 편집프로그램은 Da Vinci Resolve를 사용합니다. 아래로 내려가면 아래와 같은 화면을 볼 수 있는데, Free Download Now를 누르면 등록한 후 다운로드 받을 수 있습니다. 스테이블 디퓨전을 사용하기..

이 글에서는 비디오 스테이블 디퓨전(SVD, Stable Video Diffusion)으로 생성한 3개의 비디오를 합쳐, 하나의 비디오로 만드는 워크플로를 소개합니다. 이 글의 내용은 아래와 같습니다. 소프트웨어 따라해 보기 설정 변경 실습 소프트웨어 이 글에 있는 내용을 따라 해보기 위해서는 ComfyUI 를 설치해야 합니다. ComfyUI 초보자 가이드도 도움이 되실 겁니다. 따라해 보기 1단계: 아래의 워크플로 이미지를 다운로드 받은 후, ComfyUI 캔버스에 Drag&Drop하면 워크플로를 불러들일 수 있습니다. 필요시에는 ComfyUI를 최신 버전으로 갱신하거나, 빠진 커스톰 노드를 설치하거나, 혹은 모든 커스톰 노드를 갱신해야 할 수 있습니다. 2단계: txt2img 모델 설정 먼저 SDXL..

얼마전, Stable Diffusion을 오픈소스로 공개한 Stability.ai에서 텍스트 입력만으로 짧은 비디오(움짤)를 생성할 수 있는 Stable Video Diffusion을 공개했다는 소식을 알려드렸습니다(비디오 생성 스테이블 디퓨전 참조). 오늘은 이에 대한 좀 더 자세한 소식이 있어 소개합니다. 아래는 이 글에서 다루는 내용입니다. 비디오 스테이블 디퓨전(SVD) 이란? 비디오 스테이블 디퓨전(SVD) 모델 가중치 모델 파라미터 ComfyUI로 비디오 스테이블 디퓨전 사용하기(txt2vid) ComfyUI에서 이미지를 비디오로 변환하기(img2vid) ComfyUI에서 img2vid 사용하기 비디오 스테이블 디퓨전(SVD) 이란? Stable Video Diffusion(SVD, 비디오 생..