랩 썸네일
LAB
상업 안전 ComfyUI 파이프라인 연구실 LAB
9월 21일 - 12월 31일
10:30 - 12:30
WEEKLYSAT요일
온라인
6

한 줄 소개

comfyui 관련 LAB이 없어서 직접 만들었습니다!

분야

ARTS, ETC

목표 결과물

COMPETITION, OPEN_SOURCE

랩 소개

* ComfyUI에서 좋은 모델을 사용할 수 없다면, 생성형 AI 구독형 플랫폼에 비해 성능이 매우 떨어짐에도 불구하고 왜 접근해야하는가?에 대한 물음에서 시작했습니다. 첫 번째로는 널리 쓰이는 노드팩과 모델 중 상당수가 상업 사용이 불가능하다는 것입니다. InsightFace는 비상업 연구 라이선스, FaceDetailer가 의존하는 Ultralytics YOLO는 AGPL-3.0, IPAdapter FaceID는 GPLv3에 InsightFace 의존성까지 겹칩니다. 튜토리얼을 그대로 따라 만든 워크플로우가 상업적으로는 전혀 쓸 수 없는 결과물이 되는 사례가 흔합니다. 두 번째는 "이 프롬프트를 쓰면 잘 나온다"는 지식은 모델 세대가 바뀔 때마다 과하게 말하면 무효화됩니다. 또한 현업자가 아니시라면 반복해서 특정 대상을 생성할 때, 어떤 프롬프트를 사용해야하는지 머릿속에 체계화 시키는 것에 어려움을 느껴, 오히려 프롬프트를 생성형AI에게 되묻고 있을 겁니다. 반면 파이프라인 설계, 파라미터 스펙 문서화, 배치 자동화 역량은 모델이 바뀌어도 이전 됩니다. 세 번째는 캐릭터 일관성입니다. 애니메이션·웹툰·게임 에셋 제작에서 가장 자주 요구되는 것은 "같은 캐릭터를 여러 각도와 표정으로" 뽑는 능력이며, 이는 상업 라이선스가 확보된 도구만으로 구현할 때 난이도가 급격히 올라갑니다. 저는 지금 당장은 이렇게 생각합니다. 본 LAB은 이 세 문제를 상업 사용이 가능한 라이선스의 도구만으로 해결하는 파이프라인을 설계·검증·문서화하는 것을 목표로 합니다. AI가 두뇌고 ComfyUI가 사람이라면 사람을 이해하는 과정을 하려고 하는 것 입니다.

##생성모델#이미지생성#comfyui
##comfyui

운영 방식

**모임은 비대면으로 운영합니다. (특정 시기나 중요한 사건이 있는 경우, 대면으로 전환하겠습니다. 대면 불가하신 분들은 지원 고려해주시길 바랍니다.) 1. 지원자의 이해도가 낮은 경우 초기 1~2주 — 온보딩 (Vast.ai, Claude 활용법, 기초 노드 교육) 지원자분들이 생각보다 기초 툴 사용에 익숙하지 않은 경우가 많다는 점을 감안해, 도구 사용법부터 확실히 맞추고 시작합니다.(**구독료가 꽤 소모된다는 점 유의해주세요. 각 사이트의 가격 참고 바랍니다.) 사전 학습 자료 공유 → 2) 모여서 개념 정리 및 질의응답 → 3) 다음 주 학습 범위 합의 확산 모델 구조, ComfyUI 노드 원리, 라이선스 체계 등 공통 기반 지식을 랩원 전원이 동일한 수준으로 맞추는 데 집중합니다. 이 시기는 랩장이 주차별 학습 범위를 사전에 정리해 공유합니다. 2. 지원자가(랩장 기준) 충분히 이해하고 있는 경우, 또는 후반부 — 결과물 중심 과정 공유 각자 진행한 실험·모델/논문 조사 결과 공유(개인별 5~10분) → 2) 막힌 지점 상호 리뷰 → 3) 다음 주 개별 연구 방향 조정 랩원 각자 관심 트랙(라이선스 검증 / LoRA 학습 / ControlNet / 자동화 등)을 맡아 개별 연구를 진행하고, 매주 진행 상황을 공유합니다. 관련 모델·논문을 개인이 파악한 뒤 요약해 공유하는 방식으로, 학습이 아니라 각자의 연구 산출물을 만들어가는 데 초점을 둡니다. (이미 나와 있는 자료를 설명하는 것으로 충분합니다.) 최종적으로 개인별, 팀별 결과물을 모아 통합 발표합니다. 3. 무조건 지켜야 하는 원칙 진행 상황 공유 — 서로의 연구 방향을 충분히 이해하고 설명할 수 있도록 하는 것이 목표입니다. 자발적인 참여 — 일단 해봤다에 의의가 있습니다. 결과물이 마음에 들지 않더라도 공유하고, 어떤 점에서 문제가 있었는지 설명합니다. 지원자간의 실력 차이가 있어도 충분히 자신의 지식을 공유해주실 분만 와주시면 좋겠습니다.

커리큘럼

1주차: 오리엔테이션 및 연구 주제 소개, 목표 설정, 랩원 자기소개

2주차: 확산 모델 구조 기초 스터디 (LDM, 잠재공간, 어텐션·패치화)

3주차: ComfyUI 노드·워크플로우 설계 원리 정리

4~5주차: 라이선스 유형별 조사 및 상업 가능/실습전용/배제 분류 기준 수립

6주차: 라이선스 검증 DB 1차 공개 및 랩원 리뷰

7~8주차: 다중 ControlNet 체이닝 실험 (Depth + Lineart 조합)

9~10주차: 배경 분리·인페인팅 파이프라인 구축 (BiRefNet 기반)

11~13주차: SDXL LoRA 학습 실험 (kohya sd-scripts, 데이터셋·rank·step 비교)

14주차: 워크플로우 JSON 및 LoRA 실험 리포트 정리·공개

15~17주차: ComfyUI API 모드 배치 자동화 파이프라인 구성

18~20주차: 캐릭터 시트·표정 시트 자동 생성 파이프라인 구축

21~24주차: 개인별 미니 프로젝트 수행, 상호 리뷰, 최종 발표 준비

참여 요건

저도 잘 알지 못하지만 혼자하는 것보다 같이 하는 게 훨씬 낫다고 느꼈고, 목표를 좀 더 명확하게 만들어서 향후에는 각자의 목표를 이룰 수 있었으면 좋겠습니다. **참여요건(필독입니다) 1. comfyui를 실무적으로 활용해, 성과를 내보고 싶거나 내본 적 있는사람. 2. 기존 생성형 AI의 문제점을 알고 그것을 comfyui를 통해 해결해보고 싶은사람. 3. 다소 답답함이 있어도 문제를 파고들어 끊임없이 해결해나가려고 하는사람.(*필수) 4. claude를 구독하고 있거나 구독할 수 있는 사람.(*필수) 5. 본인이 이루고 싶은 목표가 명확한 사람. 그럼에도 불구하고 소통하면서 공동체적인 발전을 이루고 싶은 사람.

사전 질문

자기소개 간단히 부탁드립니다!

3-6개월간 매주 실험하고 공유하는 루틴이 본업/학업과 병행 가능한 이유를 설명해주세요.

comfyui 스킬이나 생성형AI를 실무나 개인 프로젝트에 적용해본 사례가 있다면 공유해주세요 (블로그, 포트폴리오, GitHub 링크 등)

ComfyUI로 만들어본 워크플로우 중 가장 복잡했던 것을 설명해주세요. (없으면 다른 어필만 해주세요.)

하고 싶은 말(자유롭게 작성해주세요, 개인사, 성격 등 괜찮습니다. 자신을 어필해주세요.)

랩장 소개

default_avatar

김성호

없음kimsungho429@naver.com