arXivDaily arXiv每日学术速递 周一至周五更新

PAPERDAILY REPORTS

字节海外发布AI短剧平台Dramagic:剧本一键拆解三视图与分镜,几十镜同脸不崩

作者:arXivDaily编辑部 BytePlus 官方与 The Decoder

导读

字节跳动旗下海外企业技术服务平台BytePlus正式推出企业级全链路AI短剧生产平台Dramagic。制作团队上传剧本即可全自动拆解男主、女主与反派的角色三视图、场景及造型,并智能生成分镜提示词与分镜表。配合3D虚拟导演台与全局风格锁定,攻克了多镜头角色换脸痛点,支持一键超分与多平台分发。

剧本一键拆解:角色三视图、场景与分镜表全自动生成

在传统AI视频创作中,创作者需要在剧本拆分、绘画垫图、视频生成与剪辑工具间频繁切换。BytePlus推出的Dramagic将短剧制作流程整合进单一闭环。

创作者上传Word、PDF、TXT或Markdown格式剧本后,平台内置的智能体(Agent模式)会自动解析人物关系与剧情走向,将男主、女主、反派及关键配角拆解成包含正视、侧视与后视的完整角色三视图,同时同步归纳场景、道具与服装资产。系统还会自动撰写各镜头提示词并匹配视觉素材,直接输出可直接投入制作的标准分镜表。

BytePlus Dramagic 控制台界面支持剧本上传、智能体模式与画风定制。图源:BytePlus

3D虚拟导演台+全局风格锁定:几十个镜头同张脸

角色一致性与镜头失控一直是AI短剧工业化生产的核心瓶颈。Dramagic在此提供了针对性技术解法:

一是引入3D导演台(3D Director's Desk)。创作者无需反复抽卡调试提示词,即可在轻量化3D虚拟空间内预先完成角色站位调度、景别大小(特写/全景)以及摄像机运镜轨迹设计,输出白模视频或关键帧作为AI视频模型的生成先验。

二是建立全局风格锁定与连续角色状态追踪机制。在视频渲染前,系统会自动开展一致性拦截校验,确保同一角色跨场景、跨多镜头交互时五官、发型与服化道始终稳定,实现“几十个镜头始终是同一张脸”。

接入Seedance 2.5大模型:支持一键超分与多端分发

平台底层集成了字节跳动Seedance 2.5视频生成模型与豆包多模态模型,支持真人实景、2D及3D等画风渲染,并提供翻拍工作室(Remake Studio)助力现有短剧快速完成出海多语种与视觉重构。

制作完成后,平台支持一键AI超分辨率提升画质(最高可升至4K),并原生输出适配移动端竖屏(9:16)与横屏(16:9)规格,无缝分发至各大短视频与独立短剧应用。目前该平台已在BytePlus企业端开启服务。

参考资料

https://www.byteplus.com/en/products/dramagic

https://the-decoder.com/bytedance-launches-dramagic-a-full-pipeline-ai-platform-for-producing-short-dramas-from-script-to-screen/