GN⁺: 애플, 지시 기반 이미지 편집을 위한 혁신적인 AI 모델 "MGIE" 출시

MGIE(MLLM-Guided Image Editing)의 작동 원리

• MLLM을 활용한 명령 해석: MGIE는 MLLM을 사용하여 사용자의 입력으로부터 명확하고 간결한 지시사항을 도출함. 예를 들어 "하늘을 더 파랗게 만들어줘"라는 입력에 대해 "하늘 영역의 채도를 20% 증가시켜라"라는 지시를 생성할 수 있음.
• 시각적 상상력 생성: MGIE는 원하는 편집의 본질을 포착하는 잠재적 표현인 시각적 상상력을 생성함. 이는 픽셀 수준의 조작을 안내하는 데 사용됨.
• 종단 간 훈련 방식: MGIE는 지시 도출, 시각적 상상력 생성, 이미지 편집 모듈을 함께 최적화하는 새로운 종단 간 훈련 방식을 사용함.

MGIE가 할 수 있는 것은?

• 명확한 지시 기반 편집: MGIE는 편집 과정을 효과적으로 안내하는 명확하고 간결한 지시사항을 생성함.
• Photoshop 스타일 수정: MGIE는 크롭, 리사이즈, 회전, 뒤집기, 필터 추가 등 일반적인 Photoshop 스타일 편집을 수행할 수 있으며, 배경 변경, 객체 추가 또는 제거, 이미지 혼합과 같은 더 복잡한 편집도 가능함.
• 전체 사진 최적화: MGIE는 밝기, 대비, 선명도, 색상 균형 등 전체 사진의 품질을 최적화하고, 스케치, 페인팅, 만화 효과와 같은 예술적 효과도 적용할 수 있음.
• 지역 편집: MGIE는 얼굴, 눈, 머리카락, 옷, 액세서리 등 이미지 내 특정 영역이나 객체를 편집할 수 있으며, 이러한 영역이나 객체의 속성(형태, 크기, 색상, 질감, 스타일)을 수정할 수 있음.

MGIE 사용 방법은?

• 오픈 소스 프로젝트: MGIE는 GitHub에서 오픈 소스 프로젝트로 제공되며, 코드, 데이터, 사전 훈련된 모델을 찾을 수 있음.
• 데모 노트북 및 웹 데모: 프로젝트는 다양한 편집 작업을 위해 MGIE를 사용하는 방법을 보여주는 데모 노트북을 제공하며, Hugging Face Spaces에서 호스팅되는 웹 데모를 통해 온라인으로 MGIE를 시험해볼 수 있음.
• 사용자 친화적 설계: MGIE는 사용하기 쉽고 맞춤화하기 유연하게 설계되어 있어, 사용자는 자연어 지시사항을 제공하여 이미지를 편집할 수 있으며, MGIE는 편집된 이미지와 함께 도출된 지시사항을 생성함.

MGIE의 중요성은?

• 지시 기반 이미지 편집 분야의 혁신: MGIE는 AI와 인간 창의성에 중요한 도전적인 과제인 지시 기반 이미지 편집 분야에서 혁신을 이룸.
• 실용적 도구: MGIE는 소셜 미디어, 전자 상거래, 교육, 엔터테인먼트, 예술 등 개인적이거나 전문적인 목적으로 이미지를 생성, 수정, 최적화하는 데 도움을 줄 수 있음.
• Apple의 AI 연구 및 개발 역량 강화: MGIE는 Apple이 AI 연구 및 개발 분야에서 성장하고 있는 역량을 강조하며, AI가 일상적인 창의적 작업을 향상시킬 수 있는 방법을 보여줌.

GN⁺의 의견

• MGIE는 자연어 지시를 기반으로 이미지를 편집하는 혁신적인 AI 모델로, 사용자의 창의적인 아이디어를 시각적으로 구현하는 데 큰 도움이 될 것임.
• 이 도구는 기술적으로 복잡한 이미지 편집 작업을 간소화하고, 사용자 경험을 향상시키는 데 기여할 수 있음.
• Apple의 AI 연구 및 개발 분야에서의 성장을 보여주는 사례