헥스 코드 기반의 통합 색상 제어 기술, Paint-Anything
Paint-Anything: Unified Any-Color Control for Image Generation and Editing
arXiv이미지 생성 및 편집 시 원하는 객체의 색상을 24비트 헥스 코드(Hex)로 지정할 수 있는 'Paint-Anything' 모델이 개발되어, 강력한 색상 제어 기능을 제공합니다.
- 객체 단위의 색상 감독을 통해 헥스 코드를 공유 프롬프트 인터페이스로 학습했으며, 새로운 평가 지표(ACBench)에서 기존 대비 높은 성능 향상을 입증했습니다.
- 전문적인 디자인 작업에서 요구되던 정밀한 색상 제어가 Hex 코드 입력만으로 가능해지면서, 이미지 생성 및 편집의 접근성과 정확도가 크게 향상될 전망입니다.
- 실제 이미지의 그림자 때문에 발생하는 근사치 오류를 보완하기 위해, 모델은 정확한 헥스 값을 가진 순수색 앵커를 고노이즈 단계에 추가하여 학습 안정성을 확보했습니다.
전문적인 디자인 작업에서는 객체의 목표 색상을 임의의 24비트 헥스 값으로 지정하는 정밀한 색상 제어가 필수적입니다. 기존 연구들은 전용 색상 표현이나 특화된 추론 절차에 의존했지만, Paint-Anything은 이를 개선하여 객체 단위의 색상 감독을 통해 Hex 코드를 공유 인터페이스로 학습합니다. 이 모델은 이미지 생성 및 편집 과정에서 헥스 코드 입력을 통해 강력한 색상 제어 기능을 제공하는 것을 목표로 합니다.
Paint-Anything은 실제 이미지를 기반으로 객체 접지(object grounding), 지각적 색상 라벨링, 그리고 편집 쌍 합성 과정을 거쳐 Paint-500K 데이터 파이프라인을 구축했습니다. 특히, 그림자로 인해 발생하는 근사치 오류를 보완하기 위해 순수색 앵커(pure-color anchors)를 도입하여 학습 안정성을 높였습니다. 이 앵커는 고노이즈 단계에서만 사용되며, 낮은 노이즈 단계에서는 자연 이미지를 활용하도록 설계되었습니다.
새롭게 제시된 Any Color (ACBench)를 통해 성능을 측정했을 때, Paint-Anything은 기존 기본 모델 대비 ACBench-T2I 점수를 85.3% 향상시키고, ACBench-Edit 점수를 28.3% 향상시키는 결과를 보였습니다. 또한 비교된 방법 중 가장 높은 평균 CompColor 점수를 달성하며 객체 단위의 헥스 색상 충실도를 입증했습니다.
용어 풀이
- 프롬프트
- AI에게 주는 지시나 질문 글.
- Benchmark
- 모델 성능을 같은 조건에서 비교하려고 만든 시험 문제 모음.