스토리-플릭: 주제를 입력하면 어린이용 단편 동화 동영상이 자동으로 생성됩니다.

714 0

일반 소개

스토리 플릭스는 사용자가 HD 스토리 비디오를 빠르게 생성하는 데 중점을 둔 오픈 소스 AI 도구입니다. 사용자는 스토리 주제만 입력하면 시스템이 대규모 언어 모델을 통해 스토리 콘텐츠를 생성하고 AI가 생성한 이미지, 오디오 및 자막과 결합하여 완전한 비디오 작품의 출력을 생성합니다. 프로젝트의 백엔드는 Python과 FastAPI 프레임워크를 기반으로 하며, 프론트엔드는 React, Ant Design 및 Vite로 구축됩니다. OpenAI, 알리클라우드, 딥서치 및 기타 모델 서비스 제공업체를 지원하며, 사용자는 텍스트 및 이미지 생성 모델을 유연하게 선택할 수 있습니다. 동화, 단편 애니메이션, 교육용 동영상 제작 등 다양한 용도로 스토리-플릭스는 개발자, 크리에이터, 교육자의 요구를 쉽게 충족할 수 있습니다.

기능 목록

클릭 한 번으로 동영상 생성스토리 주제를 입력하면 이미지, 텍스트, 오디오 및 자막이 포함된 동영상이 자동으로 생성됩니다.
다중 모델 지원OpenAI, 알리윤, 딥시크, 올라마 및 실리콘 플로우 텍스트 및 이미지 모델의 수입니다.
세그먼트 사용자 지정사용자가 스토리 단락 수를 지정할 수 있으며, 각 단락은 해당 이미지를 생성합니다.
다국어 출력글로벌 사용자를 위한 다국어 텍스트 및 오디오 생성 지원.
오픈 소스 배포로컬에서 쉽게 작동할 수 있도록 수동 설치와 Docker 배포를 모두 제공합니다.
직관적인 인터페이스프런트 엔드 페이지는 사용하기 쉽고 매개변수 선택 및 동영상 미리 보기를 지원합니다.

도움말 사용

설치 프로세스

스토리플릭스는 수동 설치와 도커 배포의 두 가지 설치 방법을 제공합니다. 다음은 사용자가 원활하게 환경을 구축할 수 있도록 하기 위한 세부 단계입니다.

1. 수동 설치

1단계: 프로젝트 다운로드
터미널에 다음 명령을 입력하여 프로젝트를 로컬에 복제합니다:


git clone https://github.com/alecm20/story-flicks.git

2단계: 모델 정보 구성
백엔드 디렉토리로 이동하여 환경 구성 파일을 복사합니다:


cd backend
cp .env.example .env

쇼(티켓) .env 파일을 사용하여 텍스트 및 이미지 생성 모델을 구성합니다. 예시:


text_provider="openai"           # 文本生成服务商，可选 openai、aliyun、deepseek 等
image_provider="aliyun"          # 图像生成服务商，可选 openai、aliyun 等
openai_api_key="你的OpenAI密钥"   # OpenAI 的 API 密钥
aliyun_api_key="你的阿里云密钥"   # 阿里云的 API 密钥
text_llm_model="gpt-4o"          # 文本模型，如 gpt-4o
image_llm_model="flux-dev"       # 图像模型，如 flux-dev

OpenAI를 선택하는 경우 다음을 사용하는 것이 좋습니다. gpt-4o 를 텍스트 모델로 사용합니다.dall-e-3 를 이미지 모델로 사용하세요.
AliCloud를 선택하는 경우 다음을 사용하는 것이 좋습니다. qwen-plus 어쩌면 qwen-max(텍스트 모델링) 및 flux-dev(이미지 모델, 현재 무료 평가판 사용 가능, 자세한 내용은알리클라우드 문서).
구성이 완료되면 파일을 저장합니다.

3단계: 백엔드 시작
터미널의 백엔드 디렉토리로 이동하여 가상 환경을 만들고 종속 요소를 설치합니다:


cd backend
conda create -n story-flicks python=3.10  # 创建 Python 3.10 环境
conda activate story-flicks              # 激活环境
pip install -r requirements.txt          # 安装依赖
uvicorn main:app --reload                # 启动后端服务

시작에 성공하면 터미널이 표시됩니다:


INFO:     Uvicorn running on http://127.0.0.1:8000 (Press CTRL+C to quit)
INFO:     Application startup complete.

이는 백엔드 서비스가 실행되었음을 나타냅니다. http://127.0.0.1:8000.

4단계: 프런트엔드 시작
새 터미널의 프런트엔드 디렉토리로 이동하여 종속성을 설치하고 실행합니다:


cd frontend
npm install          # 安装前端依赖
npm run dev          # 启动前端服务

시작에 성공하면 터미널이 표시됩니다:


VITE v6.0.7  ready in 199 ms
➜  Local:   http://localhost:5173/

브라우저에서 액세스 http://localhost:5173/프런트엔드 인터페이스를 볼 수 있습니다.

2. 도커 배포

1단계: 환경 준비
Docker 및 Docker Compose가 로컬에 설치되어 있는지 확인하고, 설치되어 있지 않은 경우 공식 웹사이트에서 다운로드하세요.

2단계: 프로젝트 시작
프로젝트 루트 디렉토리에서 실행합니다:

docker-compose up --build

Docker는 프론트엔드 및 백엔드 서비스를 자동으로 빌드하고 시작합니다. 완료되면 http://localhost:5173/ 프런트엔드 페이지를 봅니다.

사용법

설치 후 사용자는 프론트엔드 인터페이스를 통해 스토리 동영상을 생성할 수 있습니다. 구체적인 작업 흐름은 다음과 같습니다:

1. 프런트엔드 인터페이스에 액세스

브라우저에 입력 http://localhost:5173/스토리-플릭스 메인 페이지가 열립니다.

2. 생성 매개변수 설정하기

인터페이스는 다음과 같은 옵션을 제공합니다:

텍스트 생성 모델 제공자선택 openai및aliyun 등
이미지 생성 모델 제공자선택 openai및aliyun 등
텍스트 모델모델 이름을 입력합니다(예. gpt-4o 어쩌면 qwen-plus.
이미지 모델링모델 이름을 입력합니다(예. flux-dev 어쩌면 dall-e-3.
비디오 언어중국어 또는 영어 등의 언어를 선택합니다.
음성 유형: 남성 또는 여성과 같은 오디오 스타일을 선택합니다.
스토리 주제: 테마를 입력합니다(예: "토끼와 여우의 모험").
스토리 단락 수: 각 세그먼트가 이미지에 해당하는 숫자(예: 3)를 입력합니다.

3. 동영상 생성

매개변수를 입력한 후 '생성' 버튼을 클릭합니다. 시스템이 설정에 따라 동영상을 생성합니다. 생성 시간은 단락 수와 관련이 있으며, 단락이 많을수록 시간이 오래 걸립니다. 완료되면 동영상이 페이지에 표시되고 재생 및 다운로드가 지원됩니다.

주의

생성에 실패하면 .env 파일에 올바른 API 키가 있는지 확인하거나 네트워크 연결이 제대로 작동하는지 확인하세요.
활용 Ollama 설정할 때 ollama_api_key="ollama"추천 qwen2.5:14b 또는 더 큰 모델에서는 작은 모델이 잘 작동하지 않을 수 있습니다.
실리콘플로우의 이미지 모델은 지금까지만 테스트되었습니다. black-forest-labs/FLUX.1-dev호환되는 모델을 선택했는지 확인하세요.

주요 기능 작동

클릭 한 번으로 전체 동영상 생성

인터페이스에서 "늑대와 토끼의 이야기"를 입력하고 3개의 단락을 설정한 다음 "생성"을 클릭합니다. 몇 분 후에 3개의 이미지, 음성 해설 및 자막이 포함된 동영상이 생성됩니다. 예를 들어, 공식 데모 동영상에는 "토끼와 여우"와 "늑대와 토끼"라는 이야기가 나와 있습니다.