2026 年 9 月 5 日，开源开发者 Simon Willison 在 ChatGPT macOS 客户端的 Codex 模式下输入了一行自然语言：“调用本地已安装的 Blender 渲染一只骑自行车的鹈鹕”。仅仅耗时 2 分 39 秒，系统便直接返回了一张高质量的 3D 渲染图，并在工作区生成了完整的 pelican-bicycle.blend 原生工程文件与对应的 pelican_scene.py 驱动脚本。
表面看是自然语言生成 3D 图像的体验升级，本质是 AI 编程智能体（Coding Agent）通过直接调用宿主系统的 Python 运行环境（bpy 接口），完成了对专业级 DCC（数字内容创作）软件的完全接管。与传统的文生网格（Text-to-3D）黑盒生成模型不同，这种模式产出的是参数完全可逆、拓扑清晰、可供 3D 设计师二次精修的真实生产力工程。
一句话出图到渐进式迭代的完整实战流程
要让大模型驱动本地 Blender，核心在于给智能体明确的执行路径与环境上下文。智能体不再依靠猜测，而是通过命令行静默模式调用 Blender 内置的 Python 解释器执行代码。
在首次提示中，用户只需给出场景需求： “Use the already installed /Applications/Blender to render a scene of a pelican riding a bicycle”
为了跳过智能体摸索本地环境的探索时间，更高效的引导方式是直接指定标准调用命令： “Use Blender like this: /Applications/Blender.app/Contents/MacOS/Blender --background --python scene.py”
智能体完成首次渲染后，用户可以进行连续的自然语言微调，实现工程资产的渐进式升级：
- 构图与元素丰富：追加提示词 “OK add a background and a lot of flair”，耗时 3 分 51 秒，智能体自动为场景补充了沙滩、风车、气球与彩旗网格。
- 全局光影质感升级：追加提示词 “OK make it a whole lot better”，耗时 5 分 59 秒，智能体调整了 Cycles 渲染管线，将场景重构为海边日落逆光构图，重新计算了羽毛与金属部件的材质折射率。
每一次对话迭代，智能体都会重新保存一份带版本标记的 .blend 文件和 .py 脚本，便于版本比对和回滚。
固化为 Agent Skill：打造可复用的本地 Blender 插件
为了避免每次开新对话都要重新解释 Blender 的调用路径与渲染参数，可以让智能体将实践经验固化为 Codex Skill。
向智能体发送指令： “Create a quick skill that describes how to use the currently installed Blender based on what you learned”
Codex 会自动生成并挂载名为 blender-local 的技能规范文档（SKILL.md）。在此后的交互中，只需输入 “Use your Blender Local skill to build this scene”，智能体就会严格遵守预设的工程规范：
- 环境与执行隔离：必须使用
/Applications/Blender.app/Contents/MacOS/Blender --background --python执行，绝不调用系统自带的全局 Python。 - 场景重构与编辑分流：只有在全新创建场景时才执行清空操作；对已有工程进行修改时，必须通过
bpy.ops.wm.open_mainfile(filepath=...)加载原文件后再进行增量修改。 - 生产级渲染参数模板：默认采用 Cycles 渲染引擎，启用 AgX 色彩管理空间，输出分辨率设定为 1600x1200，并强制开启光学降噪（Denoising）。预览阶段采样率控制在 32 到 48 之间，最终交付精修采样率设为 64 到 96。
- 文件安全性规范：在触发
bpy.ops.render.render()之前必须先保存.blend文件，确保渲染崩溃时不丢失场景数据。
从文生图到图生 3D：结合 ChatGPT Images 2.5 的混合工作流
在 2026 年 9 月 8 日 OpenAI 正式上线 ChatGPT Images 2.5 之后，智能体驱动 3D 建模的能力进一步延伸至“图生 3D”领域。通过 gpt-image-2.5-sunburst（高精编辑模型）与 gpt-image-2.5-flare（快速生成模型），创作者可以先锁定概念图，再交由 Codex 转化为 3D 资产。
在法贝热彩蛋（Fabergé egg）的复刻实验中，工作流展现了惊人的复杂度承载力：
- 生成 2D 概念蓝图：使用提示词 “Generate a photo of a faberge egg that's themed after the TV show Pluribus - research first”，产出具有繁复机械结构和珐琅光泽的概念参考图。
- 多模态解析与代码重建：将图片输入 Codex 并提示 “Use your blender local skill to create a blender model of this faberge egg”。
- 高密度网格生成：智能体自主运行 17 分 51 秒，最终产出的工程文件包含 387 个独立网格（Meshes）、1099 条曲线、783764 个顶点以及 17 种独立材质。
为了便于非本地环境的快速验证，社区还衍生出了基于 WebAssembly 的 .blend URL Viewer 网页工具，允许开发者直接在浏览器端加载并旋转检查智能体生成的 3D 工程。
智能体 3D 建模演进阶段与避坑指南
AI 编程智能体在调用 Blender 过程中，受限于大模型的空间感知盲区与无图形界面（Headless）执行环境，极易踩坑。下表梳理了当前工作流在不同阶段面临的问题与遗留硬伤：
| 阶段 | 核心问题 | 留下的硬伤 |
|---|---|---|
| 几何造型阶段 | 复杂有机体拓扑缺乏连续布线逻辑 | 容易出现共面重叠面导致渲染黑带，依赖大量基础图元拼接 |
| 装配对齐阶段 | 无法直接观察视角，三维空间位置靠数学估算 | 部件常出现穿模、微小悬空或抓握点错位，需人工重新校准 |
| 渲染输出阶段 | 智能体容易混淆终端状态码与实际视觉产物 | 控制台无报错即判定成功，无法自动发现画面裁切与阴影丢失 |
基于上述硬伤，在编写提示词与配置环境时需牢记以下避坑要点：
- 严禁依赖系统 Python 运行 bpy：bpy 是 Blender 内置编译的动态链接模块，使用外部 Python 运行会导致模块找不到而直接报错。
- 平滑着色无法替代几何细分：在提示词中必须强调焦点物体的细分段数（Subdivision Level），否则即便开启 Smooth Shading，物体外轮廓仍会呈现多边形棱角。
- 避免背景任务重复触发：Blender 在执行 Cycles 离线渲染时，控制台可能在几十秒内没有任何字符输出。智能体应采用轮询 Session 机制，切忌判定超时而重复派生渲染子进程。
- 沙箱崩溃防御机制：部分 macOS 环境在沙箱模式下调用图形库可能触发 Exit Code 139（段错误），遇到该错误应提示智能体降级为非沙箱本地进程执行。
- 建立严格的视觉回检闭环：智能体必须将渲染完成的 PNG 重新读入多模态上下文，重点检查悬浮零件、相交面闪烁（Z-fighting）与阴影投射。
综合判断与未解决的硬伤
智能体驱动 Blender 的实质，非“AI 模型端到端的 3D 形状预测”，而是“大模型作为代码编写者去调度确定性图形管线”。
这种模式彻底解决了传统 3D 生成模型无法导出干净材质通道、无法拆分骨骼节点、无法无损二次编辑的致命缺陷。它把“写 Python 脚本建 3D 场景”的门槛直接降为零，让创作者只需专注于美学决策和场景结构指导。
目前尚未完全解决的硬伤在于实时交互反馈的缺失。智能体在没有 Viewport（实时视口）辅助的情况下，是完全基于空间坐标代数计算来“盲调”几何体的。一旦涉及到角色关节的动力学绑定、软体布料解算以及多层复杂遮挡，缺乏视觉即时反馈的智能体往往需要经历数十分钟的反复试错。未来的进化方向必然是让智能体接入能够实时感知视口深度缓冲（Depth Buffer）的多模态闭环系统。
引用来源
- Simon Willison. Using Blender with coding agents on macOS [EB/OL]. (2026-09-05). https://til.simonwillison.net/llms/blender-coding-agents-macos
- Simon Willison. GitHub Repository: gpt-6-astra-blender-pelican-bicycle [EB/OL]. (2026-09-05). https://github.com/simonw/gpt-6-astra-blender-pelican-bicycle
- Simon Willison. Tool: .blend URL Viewer [EB/OL]. (2026-09-09). https://simonwillison.net/2026/Sep/9/blender-viewer
- Simon Willison. Introducing ChatGPT Images 2.5 [EB/OL]. (2026-09-08). https://simonwillison.net/2026/Sep/8/introducing-chatgpt-images-25
- Simon Willison. Tools: blender-viewer online demo [EB/OL]. (2026-09-09). https://tools.simonwillison.net/blender-viewer
