이미지 내의 구성을 툴을 써서 직접 그래픽 작업을 수행하는 것보다, 적절한 AI의 도움이 있다면
디자이너의 생산성을 크게 향상시킬 수 있으며, 비전문가도 전문가가 만든 것과 유사한 수준의 높은 결과물을 산출할 수 있을 것입니다.
원하는데로 이미지를 컨트롤 할 수 있는 이미지 편집 AI , 얼마나 발전했을까요? 바로 오늘, 그리고 어제 발표된 논문을 통해 살펴봅니다.

MLLM의 도움으로 사용자 편의성을 극대화시킨 이미지 조작 AI 툴 , MagicQuill

이미지 편집 프로그램은 매우 실용적인 응용 분야로, 다양한 사용자 요구사항을 충족시켜야 하기에 사용 편의성이 무엇보다 중요합니다.
본 연구에서는 사용자의 창의적인 아이디어를 빠르게 구현할 수 있는 통합 이미지 편집 AI 시스템 ‘MagicQuill’을 제안합니다.
MagicQuill의 핵심은 간단하면서도 강력한 인터페이스입니다.
사용자는 몇 번의 간단한 동작만으로도 요소 삽입, 객체 제거, 색상 변경 등 다양한 편집 작업을 수행할 수 있습니다.
특히 다중 모달 대규모 언어 모델(MLLM)이 사용자의 행동을 실시간으로 분석하여 별도의 프롬프트 입력 없이도 사용자의 의도를 정확히 파악합니다.
또한 특별히 개발된 투-브랜치 플러그인 모듈로 강화된 디퓨전 프라이어 기술을 적용하여, 사용자의 편집 요청을 정밀하게 제어하고 처리합니다.
이를 통해 직관적이고 효율적인 이미지 편집 경험을 제공합니다.

MagicQuill

MagicQuill: An Intelligent Interactive Image Editing System

NVIDIA의 사실적 이미지 편집 AI 로 활용가능한 디퓨전 모델군 , Edify image

NVIDIA가 완벽한 픽셀 정확도로 사실적인 이미지 콘텐츠를 생성할 수 있는 Diffusion model family, Edify Image를 소개하였습니다.
Edify Image는 서로 다른 주파수 대역의 이미지 신호가 각기 다른 속도로 감쇠되는 새로운 라플라시안 디퓨전 프로세스를 사용하여 훈련된 cascade pixel space diffusion model 을 활용합니다.
Edify Image는 control input 을 통한 구성물 교체, 인페인팅 및 텍스트-이미지 변환, 4K 업샘플링, 컨트롤넷, 360도 HDR 파노라마 생성, 이미지 커스터마이징을 위한 파인튜닝 등 광범위한 응용 분야를 지원합니다.

NVIDIA Deep Imagination Research Homepage

NVIDIA’s world class researchers and interns work in areas such as AI, deep learning, parallel computing, and more. Explore what’s new, learn about our vision of future exascale computing systems.