AI로 영상 배경 바꾸는 방법
video-to-video AI 모델에 클립과 함께, 새 배경과 그대로 둘 부분을 적은 프롬프트를 보내세요. Sume에서 하는 방법과 확인할 점을 정리했습니다.

AI로 영상 배경을 바꾸려면 video-to-video(편집) 모델에 클립과 함께, 새 배경이 될 장소와 그대로 두어야 할 것을 적은 프롬프트를 보내세요. 예를 들면 “Replace the background with a beach at sunset. Keep the person and their movements the same.”(배경을 해 질 녘 해변으로 바꾸고, 인물과 그 움직임은 그대로 두기) 같은 프롬프트입니다. 모델은 다시 만든 클립을 돌려줍니다. 마스크를 보낼 필요도, 그린 스크린을 쓸 필요도 없지만, 인물이 똑같이 돌아온다는 보장은 없으므로 결과를 확인하세요.
Sume에서는 이 편집이 gemini-omni-flash-1.1의 video-to-video 모드입니다. 아래 내용은 2026-09-28에 확인한 Video Router 문서 (영문), Sume API 레퍼런스, Sume의 API 코드에서 가져왔습니다.
Sume로 영상 배경을 어떻게 바꾸나요?
클립의 공개 HTTPS URL을 video_url에 넣고 model: "gemini-omni-flash-1.1"과 함께 POST /v1/video-router/generate로 보낸 뒤, 새 배경은 prompt에 적으세요. 현재 video-to-video 편집을 지원하는 모델은 이 모델 하나뿐입니다. 나머지 필드, 편집에 이 경로를 쓰는 이유, 결과를 가져오는 방법은 프롬프트로 영상 편집하기에서 다룹니다.
curl -X POST https://api.sume.com/v1/video-router/generate \
-H "Authorization: Bearer $SUME_API_KEY" \
-H "Content-Type: application/json" \
-H "Idempotency-Key: background-edit-001" \
-d '{
"model": "gemini-omni-flash-1.1",
"prompt": "Replace the background with a beach at sunset. Keep the person and their movements the same.",
"video_url": "https://example.com/talking-shot.mp4",
"resolution": "720p",
"mode": "async"
}'프롬프트에는 무엇을 써야 하나요?
이미 있는 클립에 대한 지시문으로 쓰세요. 바꿀 내용을 먼저, 유지할 내용을 그다음에 적습니다. Sume 문서의 편집 예제 “Replace the bottle with an apple. Keep everything else the same.”(병을 사과로 바꾸고, 나머지는 모두 그대로 두기)도 이 형태입니다. 배경이라면 장소, 시간대, 빛을 적은 뒤, 바뀌면 안 되는 것, 즉 인물, 옷차림, 움직임, 카메라를 나열하세요. 고쳐 쓸 만한 예시는 다음과 같습니다.
- 말하는 인물 샷: “Replace the office behind her with a quiet park in the morning. Keep her, her clothes, and her gestures the same.”(그녀 뒤의 사무실을 아침의 조용한 공원으로 바꾸고, 그녀와 옷차림, 몸짓은 그대로 두기)
- 하늘 교체: “Replace the gray sky with a clear sunset sky. Keep the buildings, the street, and the people the same.”(회색 하늘을 맑은 노을 하늘로 바꾸고, 건물, 거리, 사람들은 그대로 두기)
- 제품 클립: “Put the bottle on a marble kitchen counter instead of the plain table. Keep the bottle, its label, and the camera move the same.”(병을 밋밋한 테이블 대신 대리석 주방 조리대 위에 놓고, 병과 라벨, 카메라 움직임은 그대로 두기)
인물과 클립의 나머지 부분은 그대로 유지되나요?
보장되지 않습니다. Sume API 레퍼런스는 편집을 “rewritten by prompt”(프롬프트로 다시 쓴) 원본 클립으로 설명하며, 문서는 인물이나 그 얼굴, 움직임이 바뀌지 않고 돌아온다고 약속하지 않습니다. 쓰기 전에 편집된 클립을 원본과 나란히 놓고 보세요.
아예 문서화되지 않은 것도 있습니다. 원본 클립의 최대 길이, 그리고 출력이 원본의 길이, 프레이밍, 원래 소리를 유지하는지 여부입니다. 문서화된 것은 두 가지입니다. 모델은 항상 오디오를 생성하며 이를 끄는 스위치가 없고, 편집 모드에서는 aspect_ratio가 거부되므로 출력의 화면 비율은 직접 정할 수 없습니다.
영상을 편집해야 하나요, 사진에서 시작해야 하나요?
움직임이 직접 찍은 영상 그대로여야 한다면 영상을 편집하세요. 스틸 이미지로 충분하거나 새로 생성한 샷이어도 괜찮다면 대신 사진에서 시작하세요. 마지막 방법이라면 편집한 스틸을 먼저 공개 HTTPS URL에 올리세요. Image API는 서명된 링크를 반환하는데, 영상 요청은 서명된 URL을 거부합니다.
| 방법 | 시작점 | 결과물 |
|---|---|---|
| 영상 편집 | video_url에 넣은 내 클립과 프롬프트 | gemini-omni-flash-1.1이 다시 만든 내 클립 |
| 사진 편집 | input_references에 넣은 사진과 프롬프트 | AI로 사진 배경 바꾸는 방법에서처럼 새 배경을 입힌 스틸 |
| 사진 편집 후 움직이기 | 편집한 스틸을 클립의 first_frame으로 | 원래 움직임이 아니라 새로 생성한 샷, 모델에 따라 2–30초 |
비용은 얼마인가요?
편집은 해상도에 따라 출력 초당 공급사 정가 × 1.25로 청구됩니다. 기본값인 720p에서는 초당 $0.125이며, 기본적으로 5.5% 에이전트 수수료가 더해집니다. 금액은 제출할 때 워크스페이스 잔액에서 예약됩니다. 이 모델의 다른 해상도 요율은 AI 영상 생성 비용은 얼마인가요?에 나와 있습니다.
출처
관련 글
모델 카테고리의 다른 글
- AI로 낮 영상을 밤으로 바꾸기: 편집, 생성, 색보정
낮 영상을 밤으로 바꾸려면 video-to-video AI 편집을 쓰거나, 스틸 두 장으로 낮에서 밤으로 바뀌는 클립을 생성하거나, 색보정으로 어둡게 만드세요.
- AI 영상 만드는 방법: 텍스트나 사진으로 만들기
AI 영상을 만들려면 출발점을 고르고, 샷을 설명하고, 길이와 화면 비율을 정한 뒤 생성해서 검토하세요. Sume에서 각 단계를 하는 방법을 설명합니다.
- AI 영상 생성 프롬프트 작성법
AI 영상 프롬프트는 샷 하나로 쓰세요. 피사체와 동작, 카메라, 빛, 프레이밍을 담습니다. 템플릿, 예시, 프롬프트 대신 설정에 넣을 항목을 정리했습니다.
- Image to Image AI: 내 사진으로 새 이미지 만들기
Image-to-image AI는 텍스트 지시대로 사진을 새 스타일, 배경, 색으로 다시 그립니다. 무엇이 바뀌고 무엇이 유지되는지, 어떻게 실행하는지 정리했습니다.
작성자 Sume