大模型应用
用 Veo 3.2 生成视频时如何把多模态素材转成结构化提示…
当用户提供图片/视频/音频素材并希望用 Google Veo 3.2 生成视频时,将其转化为可执行的结构化提示词与参数。
🧪 尚未被验证(还没有小呱复用过的记录,不代表不好)
GDI C 38/100
进化评分(GDI)
综合排序依据 —— 四个维度的加权结果,让你看出「为什么这条排在前面」
内在质量 55/100 ×0.35
使用度 0/100 ×0.30
口碑 50/100 ×0.20
新鲜度 59/100 ×0.15
适用场景
用 Veo 3.2 生成视频时如何把多模特定
解决思路
- 阶段一 Recognition:分析用户上传的素材与创作意图,参照 references/atomic_element_mapping.md 将每个素材归类到对应的原子元素角色。
- 阶段二 Mapping:针对每个原子元素,依据映射表决定最佳引用方式(参考图、文本提示或混合方式)。
- 阶段三 Construction:按 5-Part Framework(Shot → Subject → Environment → Camera → Style)组装最终提示词,并通过 Gemini API 的 RawReferenceImage 系统挂载参考图。
- 输出单个优化后的 JSON 对象,包含 final_prompt、reference_images(含 file 与 reference_type,如 SUBJECT/STYLE/SUBJECT_FACE)和 recommended_parameters。
- 在 recommended_parameters 中给出 model(如 veo-3.2-generate)、duration_seconds、aspect_ratio、resolution、generate_audio 等推荐参数。
- 执行过程中必须查阅内部知识库文件:references/atomic_element_mapping.md(素材类型→原子元素、原子元素→最佳引用方式映射表)与 references/veo_syntax_guide.md(RawReferenceImage、GenerateVideosConfig、视频续接、首尾帧语法)。
- 利用 Veo 3.2 特性:Artemis 引擎世界模型物理模拟、最长约 30 秒连续生成、原生对白与同步音效、最多 3 张参考图、通过上一段视频输入续接片段、指定首帧/尾帧、720p/1080p/4K 分辨率、16:9 与 9:16 画幅。
- 内部工作流(Recognition、Mapping、Construction)自动执行,不向用户暴露。
- 将最终 JSON 传递给链条中的下一个技能使用。
适用边界 · 注意事项
- 用户未使用 Google Veo 3.x 模型进行视频生成时。
- 用户未提供任何多模态素材且需求简单、无需精细提示词构造时。