LumenX Studio

LumenX Studio

阿里巴巴开源的AI短漫剧一站式生产平台,它能够将小说文本转化为动态视频,打通了从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。ai大模型

#Ai工具箱 #Ai开源项目
收藏
详情页中栏推广

LumenX Studio简介ai在线使用

LumenX Studio 简介ai指的是什么意思

LumenX Studio 是阿里巴巴开源的一个 ai豆包官网免费使用 短漫剧生产平台,由星莲(StarLotus)主导开发与维护。它能把小说文本转化为动态视频下载即梦,覆盖从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。支持本地部署,采用 MIT 协议开源。

LumenX Studio界面截图

LumenX Studio界面截图ai指的是什么意思

核心功能ai大模型

  • 剧本分析:基于 LLM 自动提取角色、场景、道具,生成专业分镜脚本ai破解版免费下载

  • 美术指导:支持自定义视觉风格,保持全片画风统一ai指的是什么意思

  • 可视化分镜:拖拽式分镜编辑器,所见即所得地组合人物、背景与特效造梦次元入口

  • 多模态生成:集成通义万相(Wanx)等模型,支持文生图、图生视频ai大模型

  • 智能视听合成:自动生成角色配音万联摩尔(TTS)、音效(SFX)并合成最终视频

LumenX Studio完整创作链路下载即梦

平台集成了以下完整流程:ai指的是什么意思

资产提取 → 风格定调 → 资产生成 → 分镜脚本构造 → 分镜图生成 → 分镜视频生成豆包官网免费使用

具体流程:ai指的是什么意思

  1. 剧本编辑与实体提取:在左侧剧本编辑器中点击“提取实体”,由 Qwen-Plus 自动提取角色、场景、道具万联摩尔

  2. 风格定调:用 Qwen-Plus 分析剧本适合的风格,或使用预设风格(由正向/负向提示词千问网页版官网入口组成)

  3. 资产生成:为角色生成无背景全身图、三视图、头像特写;为场景和道具生成参考图或参考视频ai指的是什么意思

  4. 分镜图故事版:基于脚本提取分镜脚本,支持二次编辑,并可融入 AI 提示词润色ai在线使用

  5. 分镜视频生成:支持首帧驱动(i2v)和角色动作驱动(r2v)两种模式,支持多 Batch 抽卡ai智能软件怎么用

  6. 分镜视频拼接:审查并选取最佳分镜视频,一键拼接成片千问网页版官网入口

LumenX Studio技术架构下载即梦

  • 前端:Next.js 14 + React 18 + TypeScript + Tailwind CSSai在线使用

  • 后端:FastAPI + Python 3.11+全免费ai人工智能

  • AI 核心:阿里云 Qwen(逻辑)+ Wanx(视觉)豆包官网免费使用

  • 渲染:Three.js(Canvas)+ FFmpeg(视频处理)说的ai

模型接入与运行模式ai人工智

内置了模型接入的工作流,支持接入新模型、更新版本、调整参数。采用本地优先(local-first)的媒体存储逻辑。支持四种运行模式:ai人工智

  • DashScope-only(无 OSS)豆包a i生成

  • DashScope + OSS哪个ai比较懂法律

  • DashScope + Kling 原厂造梦次元入口

  • DashScope + Vidu 原厂密鸽官方

LumenX Studio界面截图

LumenX Studio vs Toonflow vs火宝短剧

对比维度LumenX StudioToonflow火宝短剧 (Drama)
开发方阿里巴巴 / 星莲(StarLotus)HBAI-Ltdchatfire-AI
GitHubalibaba/lumenxHBAI-Ltd/Toonflow-appchatfire-AI/huobao-drama
核心定位AI 短漫剧一站式生产平台面向短剧生产的 AI 工作台全栈 AI 短剧自动化生产平台
技术栈Next.js + FastAPI + Python + Qwen/WanxNode.js + Express + ElectronGo + Vue3 + Gin
开源协议MITApache-2.0开源
核心工作流资产提取 → 风格定调 → 资产生成 → 分镜脚本 → 分镜图 → 分镜视频策划 → 编剧 → 分镜 → 出片(无限画布)角色生成 → 分镜设计 → 视频生成
角色一致性生成无背景全身图、三视图、头像特写作全免费ai人工智能为资产锁定章节事件图谱 + 持久化 Agent 记忆AI 绘画统一风格生成角色形象
剧本/分镜处理LLM 自动提取实体 + 可视化拖拽分镜编辑器三层 Agent 协作(决策/执行/监督)+ 事件图谱驱动智能分镜设计(场景描述、镜头设计、配套图片)
视频生成首帧驱动(i2v) + 角色动作驱动(r2v),支持多 Batch 抽卡接入 GPT-4o、Sora、豆包视频、Nano Banana Pro 等文生视频ai智能软件怎么用 + 图生视频
音频处理自动生成 TTS 配音 + SFX 音效未明确未明确
部署方式本地部署(前端3008/后端8000),支持 DockerWindows/Linux/macOS 安装包、Docker、云端Docker Compose(推荐)、开发模式、传统部署
部署难度中等
特色亮点本地优先媒体存储;仓库级模型接入;DashScope/Kling/Vidu 多模式可选无限画布生产工作台;可编程ai对话聊天系统供应商系统;Skill 文件化配置;批量百集生产DDD 领域驱动架构;一句话生成短剧;素材库+任务追踪
适用场景阿里生态用户、需多模型灵活切换、本地优先存储批量小说推文说的ai生产、需 Agent 智能协作、跨平台部署快速入门、全栈自动化、国内友好轻量部署

开源信息度加ai下载

GitHub 仓库:https://github.com/alibaba/lumenxai在线使用

许可证:MIT License说的ai

开发端口:前端默认 3008,后端 8000全免费ai人工智能

联系方式:GitHub Issues / Discussions,邮件 zhangjunhe.zjh@alibaba-inc.com密鸽官方

相关资讯:ai智能软件怎么用

AI短剧创作平台全免费ai人工智能

AI漫剧制作工具密鸽官方

AI漫剧制作流程及工具全解析造梦次元入口

与LumenX Studio相关工具万联摩尔