Photoshop NovelAI Plugin
NovelAI로 이미지 생성, 인페인팅, 아웃페인팅을 하는 Photoshop 패널입니다. Photoshop을 벗어나지 않고 생성형 수정을 끝낼 수 있습니다.
내가 한 일
- 생성, 인페인팅, 아웃페인팅, Focused Inpaint 기능을 갖춘 UXP 패널을 만들었습니다.
- UXP 런타임에 없는 이미지 처리 기능을 직접 구현했고, 그중 PNG 인코더는 마스크 경계를 선명하게 유지합니다.
- 한국어 편집 요청을 영어 프롬프트와 권장 강도로 바꿔 주는 Gemini 단계를 선택 기능으로 추가했습니다.
팀이 한 일
- 동료가 생성 엔진으로 NovelAI를 추천했습니다.
무엇인가
Photoshop 안에서 NovelAI 이미지 API를 호출하는 패널입니다(UXP 플러그인, Photoshop 24 이상). 기능은 네 가지입니다.
- 생성: 프롬프트로 새 이미지를 만듭니다.
- 인페인팅: 선택한 영역만 다시 그립니다. Photoshop의 선택 영역이 그대로 마스크가 됩니다.
- 아웃페인팅: 캔버스를 넓히고 빈 영역을 선택해 채웁니다. 전용 API 없이 인페인팅으로 처리합니다.
- Focused Inpaint: 큰 문서에서 선택 영역과 주변 여유분만 잘라 적당한 해상도로 처리한 뒤, 결과를 원래 자리에 합성합니다.
결과는 항상 원래 위치와 크기에 맞춰 새 레이어로 들어오므로, 원본 레이어는 그대로 남습니다.
만든 이유
Photoshop에서 작업하던 이미지에 생성형 수정이 필요하면, 이미지를 내보내 ChatGPT 같은 외부 도구에서 고친 뒤 다시 Photoshop으로 가져와야 했습니다. 수정할 때마다 이 왕복이 반복되었습니다. 이 플러그인은 내보내기, 업로드, 다운로드, 다시 불러오기의 네 단계를 없앴습니다.
NovelAI를 고른 이유는 2D 일러스트 화풍에 특화되어 있어 수정한 부분이 웹툰 그림체와 자연스럽게 섞이고, 인페인팅 전용 모델을 따로 제공하기 때문입니다.
동작 방식
- 그림은 플러그인이 그리지 않습니다. 픽셀은 NovelAI가 생성합니다. 플러그인은 문서를 읽고, 마스크와 요청을 만들고, 결과를 제자리에 배치합니다.
- 인페인팅 품질은 보내는 이미지가 좌우합니다. 빈 영역은 주변 픽셀을 번지게 채워서 보냅니다. 그래야 모델이 흰색이나 검은색 빈칸을 내용으로 읽지 않습니다. API의 크기 규칙에 맞추려고 덧붙인 여백도 생성 대상으로 표시해서, 줄무늬가 생기지 않게 합니다.
- 런타임에 없는 기능을 채웠습니다. UXP에 내장된 인코더는 JPEG만 만들기 때문에 마스크 경계가 뭉개집니다. 그래서 PNG 인코더, zip 해제, base64 변환을 직접 넣었습니다. 이 함수들은 Photoshop과 분리해 두었고 Node로 테스트합니다.
- Photoshop이 멈추지 않습니다. 픽셀을 읽거나 레이어를 배치하는 동안에만 문서를 잠그고, API 응답을 기다리는 동안에는 잠그지 않습니다.
- 오류와 비용을 알기 쉽게 보여 줍니다. 서버 오류와 연결 끊김은 최대 두 번까지 다시 시도합니다. 그 밖의 오류는 이해하기 쉬운 문장으로 알려 줍니다. 유료 크레딧이 드는 크기로 요청하면 실행 전에 미리 표시합니다.
- 프롬프트 개선은 선택 기능입니다. “안경만 지워줘”처럼 한국어로 편집 요청을 적으면, Gemini가 유지할 것, 지울 것, 추가할 것, 영어 프롬프트, 권장 강도를 정해진 형식으로 제안합니다. 사용자가 제안을 확인하고 적용을 눌러야 반영되며, 자동으로 실행되지 않습니다.
- 인증 정보는 이 PC에만 둡니다. 토큰과 키는 UXP 보안 저장소에 보관하고, 매니페스트에서 네트워크 접근을 두 도메인으로만 제한합니다.