爱诗科技PixVerse与OpenAI完成产品集成,并推出创作者教育计划
据量子位转载的爱诗科技稿件,爱诗科技旗下PixVerse与OpenAI宣布开启深度合作,完成产品集成,并首次共同推出“从提示词到成片”教育计划;PixVerse插件已原生接入ChatGPT与Codex。
AI解读:集成内容包括:PixVerse官方插件原生接入ChatGPT与Codex,用户可完成视频、图像、音频的端到端生产;PixVerse CLI让Codex集中调用视频、图像、音频生成能力;插件新增对Canvas项目工作台的支持。
爱诗科技称,视频生成能力由此被封装为Agent可直接调用的接口,Agent无需打开平台界面即可完成理解任务、生成创意简报、拆解分镜和调用插件生成视频。
OpenAI应用AI工程师Tyler Ryu在首场研讨会上演示了在Codex中调用PixVerse插件生成角色走路参考视频、再由Codex套用到游戏角色的流程,流程未使用动捕工作室或动画软件。
稿件由爱诗科技提供、量子位获授权转载,效果表述来自合作方与创作者陈述,未给出可比的公开评测数据。来源称研讨会内容将剪成系列视频课程陆续上线。
据量子位11月3日转载的爱诗科技稿件,爱诗科技(AIsphere)旗下模型和开放平台PixVerse与OpenAI宣布开启深度合作,双方完成一系列产品集成,并首次共同推出“从提示词到成片”(Prompt to Production)教育计划。该计划通过线上研讨会和系列视频,面向海外个人创作者和团队。
稿件由爱诗科技提供、量子位获授权转载,文中的产品能力描述和合作表述来自爱诗科技一方。
已落地的三项产品集成
爱诗科技称,双方近期完成了一系列深度产品集成,并将合作概括为打通策划、生成、制作三个环节。具体包括插件、CLI和Canvas三项。
PixVerse官方插件(PixVerse ChatGPT Plugin)现已原生接入ChatGPT与Codex。按稿件描述,用户把想制作的视频素材发给ChatGPT并描述要求,插件借助PixVerse的制作规范与质量审核体系完成视频、图像、音频的端到端生产。
PixVerse CLI让Codex调用视频、图像、音频生成,并可搭建可复用的标准化流程,面向大规模内容创作。插件还新增对Canvas(AI视频项目工作台)的支持,用户可在Canvas中管理、打磨素材,生成并对比多个结果,确认后转入制作与交付。
- 插件:PixVerse ChatGPT Plugin原生接入ChatGPT与Codex
- CLI:集中调用视频、图像、音频生成,支持标准化流程复用
- Canvas:管理创意素材、对比多个生成结果后转入制作
研讨会上的演示与创作者经验
首场线上研讨会中,OpenAI应用AI工程师Tyler Ryu与PixVerse北美市场营销负责人演示了结合使用OpenAI模型、Agent能力与PixVerse多模态工具的工作流。
Tyler Ryu称“AI能把事情做到80%到90%,最后一步仍需要专业视频模型来完成”。在其演示的动画案例中,他先调用PixVerse插件,根据角色图片生成角色走路的参考视频,再让Codex把动作套用到游戏角色上,最后用自然语言反复微调至成片。稿件称该过程未使用动捕工作室或动画软件,也没有离开Codex。
关于画面一致性,Tyler Ryu的做法是把角色和场景参考图放进项目文件夹,并要求Codex生成前先查看。创作者Hidayat建议参考图少而准,正面、背面、侧面各一张加一张脸部特写;创作者Aldo强调先做参考图、再做分镜、最后出视频的顺序,以便在分镜阶段发现问题。
- 演示链路:PixVerse插件生成动作参考视频→Codex套用到游戏角色→自然语言微调
- Tyler Ryu:AI完成80%到90%,最后一步依赖专业视频模型
- Hidayat:参考图正面、背面、侧面各一张,加一张脸部特写
- Aldo:先参考图、再分镜、最后出视频,降低重做成本
Agent调用与后续安排
爱诗科技称,通过插件、CLI与Codex集成,PixVerse的视频生成能力已被封装成Agent可直接调用的接口,Agent无需打开平台界面即可完成理解任务背景、生成创意简报、拆解分镜脚本、调用插件生成视频这一整条链路。PixVerse美国市场营销负责人称,视频生成正从用户访问的网页平台变为Agent调用的能力。
爱诗科技表示,本次研讨会内容将剪辑成系列视频课程陆续上线,未来双方将继续围绕创作全流程深化合作。稿件未披露集成的具体上线时间表、收费方式或可用地区范围。
- Agent链路:理解任务→生成创意简报→拆解分镜→调用插件生成视频
- 研讨会内容将剪成系列视频课程陆续上线
- 未披露:集成的上线时间表、定价、可用地区