공간정보와 인터넷지도

이미지 생성형 인공지능 모델 FLUX를 개발한 Black Forest Labs(이하 BFL)에서 Flux Pro  미세조정 API를 발표했습니다. Flux Pro는 Replicate나 fal.ai 와 같은 파트너사에서만 사용할 수 있어서, 그 동안에는 기본 base 모델로만 이미지를 생성할 수 있는데, 이번 미세조정 API를 사용하면 사용자가 원하는 인물, 물체, 브랜드, 스타일 등을 추가할 수 있다는 것입니다.이 기능은 기본적으로 Flux Dev에서 LoRA를 학습하는 것과 비슷하다고 볼 수 있지만, Flux.1 pro 뿐만 아니라, Flux 1.1 pro Ulta 혹은 Raw 모델에도 사용할 수 있다는 점이 중요하다고 할 수 있습니다. 즉, FLUX Pro 미세조정 API를 사용하면 자신만의 이미지나..

오픈소스 모델의 장점중 하나는 원 모델로부터 자기 자신만의 모델을 학습시킬 수 있다는 것입니다. 처음 Stable Diffusion이 출시되었을 때, 오픈 소스 커뮤니티에서는 여러가지 미세조정 및 학습 기법을 개발하였으며, 그 결과 LoRA 를 포함해 여러가지 대체 모델이 급증하게 되었습니다.Flux의 경우에도 오픈 소스로 공유되었기 때문에 이와 동일한 기법들이 재빠르게 채택되어, Black Forest Labs에서 제공한 모델용으로 조정되고 개발되었습니다. 현재 Civitai에서 FLUX 용 LoRA를 검색해보면 수많은 LORA들을 만날 수 있습니다.  Flux란Flux.1 Dev 는 이미지를 생성할 수 있는  AI 모델로, 미디저니, DALL-E 또는 스테이블 디퓨전과 유사하거나 더욱 뛰어난 품질을 ..

Replicate Flux LoRA 학습기따라하기LoRA 파일 사용하기LoRA 라이선스 및 상업적 사용개인적인 생각Replicate Flux LoRA 학습기언제 어디서든 쉽게 사용할 수 있는 생성형 AIReplicate는 누구든 쉽게 생성형 AI를 이용할 수 있는 플랫폼입니다. 이 플랫폼에서는 개발자 혹은 호기심 많은 사람들이 전문적인 경험이나 지식 없이도 여러가지 AI 기술을 실험해볼 수 있습니다.이미지 생성의 경우, Replicate에서는 여러 커뮤니티에서 제공하는 모델 및 도구를 다양하게 호스팅하고 있습니다. 사용자는 이미 올려져있는 템플릿을 사용하거나, 자신이 만든 템플릿을 사용하여 쉽게 이미지를 생성할 수 있습니다.Replicate 사용 가격Replicate 사용가격은 일부 무료서비스가 있기는 ..

LoRA를 사용하면, Flux.1 dev 모델 전체를 다시 학습시킬 필요 없이, 맞춤형 스타일을 정의할 수 있습니다. 이 기술을 사용하면 계산과 저장 측면에서 공간을 적게 차지하면서도, 특정 개념, 인물 또는 스타일에 맞춰 모델을 조정할 수 있습니다.LoRA학습 자체는 그다지 어렵지 않습니다. Flux 용 LoRA 학습 투토리얼에서 설명한 것처럼, 온라인에서도 학습시킬 수 있습니다. 그러나, 효과적인 LoRA 의 핵심은 학습 데이터세트에 달려있습니다. 즉, 학습용으로 선택한 이미지가 LoRA의 성능에 직접적으로 영향을 미치게 됩니다.이 글에서는 최적의 데이터세트를 만드는 방법을 알아보겠습니다. 이미지의 양, 이미지 다양성 및 품질의 중요성, 캡션의 생성 등과 같은 핵심적인 요소에 대해 알려드리겠습니다. ..

소셜 네트워크에 관심이 많으신 분이라면, 지난 몇 달 동안 FLUX로 생성한 초현실적인 인물 사진들을 많이 만나셨을 것입니다. 놀랍도록 사실적인 사진을  생성하는 능력으로 인해 Black Forest Labs의 새로운 모델에 대한 관심이 매우 뜨거워지고 있습니다.이 글에서는 FLUX와 포토리얼리즘에 특화된 LoRA 를 함께 사용하여, 놀랍도록 현실적인 이미지를 생성하는 방법에 대해 알아보겠습니다. 참고 : Flux는 미디저니, DALL-E, 스테이블 디퓨전등과 비슷한 이미지 생성형 AI 입니다. Flux는 텍스트 프롬프트에서 이지지를 생성하는 데 사용합니다. 자세한 내용은 Flux 모델의 이해와 사용을 위한 모든 것을 읽어보세요.FLUX-RealismLoRAFLUX를 LoRA와 함께 사용하기Fal.at ..

LoRA(Low-Rank Adaptation)은 Flux나 Stable Diffusion과 같은 이미지 모델을 세부 조정(finetuning)하는 기술로서 탄생했습니다. 모델 매개변수 일부를 조정하는 것에 초점을 맞춤으로써, LoRA는 전체 모델을 다시 학습할 필요 없이 효과적으로 미세조정을 할 수 있습니다.그런데, 대형 비디오 모델로서는 처음으로, Hunyuan Video 에서 LoRA를 사용할 수 있게 되었습니다.이번 글에서는 Hunyuan Video에 LoRA를 사용하는 방법을 알려드립니다. 이 기법에는 여러개의 LoRA를 사용하여 아래와 같은 장면에서 일관성있는 캐릭터를 생성할 수 있습니다.소프트웨어Hunyuan LoRA의 작동 원리사용 사례하나의 LoRA를 사용하는 워크플로두 개의 LoRA를 사..

2024년 8월 1일 Flux. 1 이 출시된 이래, 이와 관련된 여러가지 활동이 이루어지고 있습니다. 많은 사람들이 사용방법을 알아내고, 이를 돌리기 위한 도구를 만들기 위해 노력해 왔습니다. 이제 조금 정리되었으므로, Flux의 도구와 자원을 정리해볼 때입니다.Flux AI 모델이란?Flux AI 모델의 작동 원리Flux AI 모델을 상업적으로 사용할 수 있나?Flux AI 모델 사용 방법Flux AI 로 야한 이미지를 생성할 수 있나?Flux와 스테이블 디퓨전의 차이Flux AI 모델이란?Flux AI 모델은 Black Forest Labs에서 개발되었으며, 사실적인 이미지를 생성하는데 뛰어난 이미지 생성용 인공지능 모델입니다. Flux AI 모델은 아래와 같은 세가지 모델이 존재합니다.Flux.1..

스테이블 디퓨전에서 어떤 특정한 인물의 얼굴을 넣으려면 LoRA를 학습시키거나 또는 dreambooth 를 사용해 checkpoint모델을 학습 시켜야 합니다.하지만, 새로운 모델을 학습시키는 것은 매우 시간이 걸리는 일입니다. 그런데, 이렇게 학습시킬 필요 없이 어떤 얼굴을 즉시 삽입할 수 있다면 어떨까요?이 ComfyUI 워크플로는 입력 이미지로부터 어떤 인물의 얼굴을 복사합니다. 마치 맞춤형 LoRA나 체크포인트 모델처럼 사용할 수 있지만, 학습 시킬 필요는 없는 겁니다. 심지어는 매우 빠르고 편리합니다.참고: 이 글은 IPAdapter Unified Loader FaceID 노드를 사용하도록 갱신한 워크플로입니다.소프트웨어따라하기다른 인물 사용 실험김태리조인성송혜교테스트 결과 요약소프트웨어이 글에..

ComfyUI는 다재다능한 오픈소스 이미지 생성형 AI인 스테이블 디퓨전을 위한 GUI중 하나입니다. 원래는 AUTOMATIC1111이 훨씬 더 많이 사용되었지만, 여러가지 워크플로를 쉽게 생성하고 변경할 수 있어서 사용자가 급격하게 늘어나는 중입니다. 다만, ComfyUI는 스테이블 디퓨전의 기술적인 내용과 많은 관련이 있어서 사용하기가 쉽지 않습니다. 요즘 들어 ComfyUI 에 관한 글이 더 많아졌는데, 사용법이 잘 정리된 문서가 없어서 고민하던 중이었는데, 이 투토리얼은 아주 기초적인 내용부터 고급 사용법까지 아우르는 여러가지 내용을 담고 있습니다. 처음부터 따라해보면 ComfyUI를 좀 더 확실하게 이해하실 수 있게 될 것입니다. 이 투토리얼은 Open.ai 의 ComfyUI Academy 에 ..

제가 요즘 제일 많이 사용하는 stable diffusion용 웹 UI는 ComfyUI입니다. 처음 사용하기는 까다롭지만, 일단 원하는 대로 설정하면 사용하기가 편하기 때문입니다. 그래서 글을 몇개 쓰기는 했는데, 그다지 마음에 들지는 않았습니다. 그러던 차에 제가 구독하는 stable-diffusion-art.com에서 ComfyUI 소개글이 나와서 정리해 보기로 했습니다. (이 글도 그다지 마음에 드는 건 아니네요. ㅠㅠ) 참고로 이 글은 ComfyUI 설치방법은 다루지 않습니다. 이 글 앞부분을 보면 설치방법이 있으며, ComfyUI 사용법도 상당부분 중복되는 내용이 있으니 참고하세요. ComfyUI는 stable diffusion을 위한, 노드 기반의 GUI입니다. 이 글에서 다루는 내용은 아래와..