실험 배경: 왜 굳이 grok인가
최근 AI 영상 생성 퀄리티가 빠르게 올라가고 있습니다. 특히 grok의 영상 생성 기능이 꽤 쓸만하다는 이야기를 듣고, grok 쇼츠 만들기를 직접 테스트 해보기로 했습니다.
이번 실험의 목표는 단순합니다.
- 고양이를 활용한 쇼츠 제작 가능 여부
- 템플릿 기반 vs 연장 기능 성능 비교
- 실제 콘텐츠 제작에 쓸 수 있는 수준인지 판단
결론부터 말하면, 됩니다. 대신 멘탈이 조금 깎입니다.
Grok 쇼츠 만들기_첫 쇼츠 제작
1. grok 접속 및 imagine 기능 사용
- https://grok.com 접속
- 좌측 탭에서 imagine 클릭
- 상단에 마음에 드는 추천 템플릿 선택. 일부러 프롬프트는 따로 넣지 않았습니다.
여기까지는 매우 직관적입니다.
2. 고양이 사진 업로드

- 템플릿 선택 후 이미지 업로드
- 본인 고양이 사진 사용
고양이의 초상권은 집사가 마음대로 씁니다. 🐱
3. 결과
- 약 6초짜리 쇼츠 생성
- 생각보다 자연스러운 움직임
- 밈으로 쓰기 좋은 수준
👉 짧은 영상은 꽤 잘 만듭니다.
Grok 쇼츠 만들기_욕심의 시작: 영상 연장 기능
문제는 여기서 시작됩니다.
6초는 짧습니다.
인간은 만족을 모릅니다.
그래서 grok의 영상 연장 기능을 사용합니다.
영상 연장이란?

- 기존 영상 뒤에 이어지는 영상 생성
- 스토리 확장 가능
이론상:
👉 일관성 있게 쇼츠를 길게 만들 수 있음
현실:
👉 고양이가 갑자기 다른 고양이가 됨
Grok 쇼츠 만들기_클로드 활용: 프롬프트 설계
그래서 여기서 AI를 하나 더 씁니다.
과정
- 만들어진 영사의 마지막 장면 캡쳐
- 클로드에 업로드
- 다음 정보 전달
- 기존 스토리
- 마지막 장면
- 원하는 이어지는 내용
그리고 클로드에게 추가로 요청합니다.
“좋은 프롬프트 만들려면 질문 먼저 해줘”
이게 핵심입니다.
이유
- 바로 프롬프트 만들면 정확도가 낮음
- 질문 → 답변 → 보정 과정 필요
AI도 결국 인터뷰를 해야 일을 잘합니다.
Grok 쇼츠 만들기_프롬프트를 JSON 형식으로 바꾸기
여기 중요한 포인트.
단순 텍스트 프롬프트로 넣으면 결과가 흔들립니다.
이유
- 구조가 없음 → AI모델이 중요 요소를 놓침
- 캐릭터, 배경, 동작이 섞여버림
그래서 JSON으로 바꿉니다.
JSON의 장점
- 역할 분리 가능
- 캐릭터 유지 조건 명확화
- 카메라 / 동작 / 배경 구분 가능
예시 구조:
- character
- scene
- action
- constraints
👉 이렇게 귀찮은 걸 하는 이유는 AI가 덜 헷갈리기 때문입니다.
Grok 쇼츠 만들기 현실: 한 번에 절대 안됨
이제 실제 결과입니다.
- 배경이 바뀜
- 고양이 얼굴 바뀜
- 스타일 붕괴
우리집 고양이가 갑자기 외국 고양이가 됩니다.
그래서 다시 클로드로 갑니다.
반복 루프
- 결과 확인
- 문제 정리
- 프롬프트 수정 요청
- 다시 grok에 그대로 요청
이걸 약 8~10번 반복했습니다.
👉 이게 실제 작업 과정입니다.
Grok 쇼츠 만들기_결과물
최종 결과는 다음과 같습니다.
갑자기 우리집 고양이가 다른 고양이로 변신합니다. 뉘신지?
하지만:
- 컷 편집 실력이 좋다면 컷 편집으로 커버 가능할 수 있습니다.
- 콘텐츠로 사용 가능(만)한 수준입니다.
👉 “쓸 수 있는 실패” 정도입니다.
Grok 쇼츠 만들기 사용 후기 (핵심 정리)
장점
- 3일 무료 사용 가능하며 한 번 결제하면(월30달러_2026년 4월 기준) 크레딧 제한 없이 한 달간 계속 영상을 생성해 볼 수 있습니다. 가성비는 좋은 편이죠.
- 템플릿 기반 생성 매우 쉽습니다.
- 짧은 쇼츠는 퀄리티가 꽤 괜찮게 나옵니다. 반복적으로 뽑기를 해야한다는 단점은 있지만요.
- 속도가 엄청 빠름 : 저런 (허접한)쇼츠 하나 만드는데 약 20초 정도 소요됩니다.
단점
- 영상 연장 기능 불안정 : 아무래도 영상 연장을 사용했을 때 캐릭터 일관성이나 프롬프트 이해도에 제한이 있었습니다.
- 캐릭터 일관성 깨짐 : 참조 이미지를 올려도 캐릭터 일관성을 계속 유지하기는 쉽지 않습니다. 반복 작업이 필요합니다.
어디까지 가능할까
현재 기준으로 판단하면:
가능한 것
- 짧은 밈 영상
- 단순 동작 반복
- 귀여운 쇼츠
어려운 것
- 스토리가 길고 풍부한 영상 : 물론 짧은 영상들을 수십 개 만들어서 마음에 드는 영상을 골라 편집하면 되긴 됩니다.
- 캐릭터 유지 : 어느 정도는 가능합니다. 원하는 이미지를 첨부하고 수많은 반복 작업이 필요합니다.
- 영상 연장 기능을 통해 10초 이상 자연스러운 연결
👉 grok 단독으로 영상 연장 기능을 통해 긴 쇼츠 제작은 아직 무리입니다. 차라리 grok에서 여러 개 뽑아낸 뒤 편집 실력으로 커버하는 게 낫습니다.
중요한 팁 (실험 기반)
- 최소 10번 반복 전제
- 캐릭터 유지 조건을 강하게 명시
- JSON 구조 사용
- 클로드로 프롬프트 보정 필수
- 예전에 만든 영상 히스토리는 하단 그림에 빨간색으로 표시한 부분에 있음. 날아간 줄 알고 식겁하지 마세요. 제가 그랬습니다..

자동화는 아직 환상이고, 반자동이 현실입니다.
결제 관련 주의사항
- 3일 무료 이후 자동 결제
- 반드시 미리 구독 해지 필요
저는 놓쳤습니다.
그래서 한 달 더 쓰게 됐습니다.
👉 대신 더 실험하게 됐습니다.
이걸 기회라고 부를지, 사고라고 부를지는 아직 고민 중입니다.
Grok 쇼츠 만들기_결론
grok은 장난용 쇼츠 제작에는 매우 좋습니다. 그리고 속도가 매우 빠르다는 장점이 있습니다.
하지만:
- 긴 영상 제작은 아직 한계
- 프롬프트 엔지니어링 필수
그래도 가능성은 충분합니다.
AI 영상은 지금도 진화 중입니다.
그리고 저는 그 사이에서 계속 테스트합니다.
왜냐면… 재밌거든요.
다음 글 예고
👉 다음 글에서는 n8n AI 쇼츠 자동화의 현실을 다뤄볼 예정입니다.
👉 [coming soon]
- 본 글은 개인적인 사용 경험과 데이터 분석을 바탕으로 작성되었으며, 개개인의 상태와 환경에 따라 체감은 달라질 수 있습니다.