搞技术的人,谁还没在被画图这件事折磨过?方案评审要架构图,代码交接要流程图,做硬件分析要时序图,做系统设计还得画 UML——工具换了一茬又一茬,最后大部分时间还是花在拖拽、对齐、调箭头和改颜色上。Next AI Draw.io 这个项目想做的一件事非常朴素:你只负责用自然语言把想画的图描述清楚,AI 负责自动产出流程图、时序图、架构图、UML,而且产出的不是一张截图,是能直接打开继续编辑的 draw.io 文件。它为什么可行?因为 .drawio 文件的本质是一份结构化 XML,而对结构化输出的控制,恰好是大模型最擅长的事。
这篇文章我会把这个项目从设计思路到落地实践完整拆开讲:为什么底座选 draw.io 而不是 Mermaid、PlantUML;自然语言到图的转换链路是怎么设计的;流程图、两类时序图、架构图、UML 在生成上各自有什么关键点和坑;以及我实际跑流程时踩过的问题。适合架构师、后端/前端研发、产品经理,还有硬件工程师——只要你日常工作需要高频产图,这套思路都能直接拿走用。
1. 项目整体设计与思路拆解
1.1 为什么底座选 draw.io 而不是更轻的方案
"画图工具那么多,为什么偏偏选 draw.io?"这是第一个会被问到的问题。其实答案很现实:它免费、跨平台、有桌面版也有网页版,而且文件就是 XML,可以直接放进 Git 里做版本管理和 diff。对于 AI 生成这件事,最后一条才是真正的杀招——Mermaid、PlantUML 虽然文本友好,但复杂布局的自由度不够,画微服务架构图或者漂亮的业务泳道图时经常力不从心;Excalidraw 的结构又不适合精确控制节点语义。draw.io 的 mxGraphModel 本质上就是一张带坐标、带样式、带连线关系的图数据结构,跟 AI 的输出天然合拍。
另一个隐性优势是生态。draw.io 内置了大量形状库:UML、流程图、网络拓扑、硬件波形相关组件都有;生成完的文件用户还能继续手动改,不会被"锁死"在某个私有格式里。这一点在真实项目里非常重要——AI 产图不可能一次到位,但 draw.io 允许人机接力。我的建议是:如果你只是想快速画个示意图,Mermaid 够了;但凡是正经项目里要长期维护、要多人评审、要进 Git 的图,draw.io 做底座是最稳的选择。
1.2 自然语言到图的转换链路
整套系统的核心链路我拆成了四段,每一段都有明确职责,而不是让大模型一口气输出 .drawio 文件。第一段,把用户描述解析成"图模型":节点、边、标签、类型。第二段,对图模型做校验和补全:比如用户只说"登录流程",程序要能补出开始节点和结束节点。第三段,做布局计算:分配每个节点的 x/y 坐标。第四段,把坐标、样式、连线渲染成 draw.io XML,落盘成 .drawio 文件。
为什么要中间加一层"图模型"而不是让 AI 直接生成 XML?我实测下来的经验是:大模型直接输出 XML 时,很容易在 style 字符串、转义符号、id 绑定这些小细节上出错,而且一旦出错非常难排错;但让模型输出一个结构干净的 JSON,再由程序去渲染,成功率会高非常多。这也让"多一个图表类型"变成"多一个渲染器"的事,而不是每次都要重新调提示词。可以说,这一段中间层的设计,是整个项目最值得抄的部分。
1.3 一张通用图模型覆盖四种图
听起来很复杂,其实图模型的抽象可以非常统一:无非是 nodes + edges + labels。流程图里,节点是"开始/操作/判断/结束",边是箭头;UML 时序图里,节点是"生命线",边是"消息";架构图里,节点是"服务和组件",边是"调用/依赖关系";类图里,节点是"类",边是"继承/关联/组合"。差别只在于节点和边的语义不同、样式不同。
所以我在实现里定义了一个 GraphData 的中间结构,包含 nodes(id、label、type、style、position)和 edges(source、target、label、type、style),AI 只需要产出这个结构,剩下的事情交给四个渲染器——flowchart_renderer、sequence_renderer、architecture_renderer、uml_renderer。这个设计的收益是:排查问题时,你可以先看 JSON 对不对,再看渲染器对不对,不用在"AI 输出的乱码 XML"和"绘图软件"之间来回打转。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 核心细节解析与实操要点
2.1 流程图的节点语义与连线模型
流程图是很多人的第一需求,但 AI 画流程图最常见的翻车点是"形状用错"。这不是 AI 笨,而是没人告诉它每种形状代表什么。我维护了一张形状枚举表喂给模型:圆角矩形表示开始/结束,普通矩形表示处理步骤,菱形表示判断,平行四边形表示输入/输出,带双线的矩形表示预定义过程/子流程,文档形表示文档。同时把连线也做了语义限制:普通箭头表示顺序流转,判断节点出来必须标"是/否"。
这里有个经常被问到的问题:"一个流程内某个环节有多个分支子流程,怎么画?"正确做法是画一个判断节点,每个分支落到一个子流程节点;如果分支内容特别多,我建议子流程节点用链接挂到另一个文件或本文件的另一页,避免一张图画到爆炸。这个需求在真实的业务系统设计里太常见了,比如用户管理模块流程图里,注册、登录、找回密码、角色权限分配就是典型的多个分支子流程。
举个算法场景的例子:用流程图说明反向传播算法的工作原理。开始节点是"初始化权重",然后"输入样本进行前向传播",接着"计算损失函数",判断"是否达到精度要求",不满足就进入"计算梯度(反向传播)"→"更新权重"→回到前向传播,形成一个闭环。这个结构里最关键的判断节点就是"是否收敛?",AI 只要抓住这个闭环,画出来的图就是对的。
2.2 UML 时序图:生命线、消息与片段嵌套
这里的"时序图"指的是 UML sequence diagram,各位硬件同学先别走,硬件波形时序我在 2.4 单独讲。生成 UML 时序图时,最需要约束的是三件事:参与者/生命线、消息、生命周期片段。消息要区分同步调用(实线实心箭头)、异步调用(实线开放箭头)和返回消息(虚线开放箭头);片段要用 alt/opt/loop 表达条件分支和循环。AI 输出时最容易丢的是返回消息和激活条的起止位置,我的做法是把时序图建模成"事件列表"——每个事件包括从哪里发出、到哪里、是什么类型、属于哪个循环块,再由渲染器负责计算每条消息的 y 坐标和激活条高度。
比如画一个 LDAP 认证流程的时序图:用户端发起认证请求 → 客户端与 LDAP 服务端建立连接 → 发送 Bind 请求(含 DN 和密码) → 服务端校验 → 返回 Bind 成功/失败 → 客户端根据结果发起查询或退出。这组消息天然适合时序图表达:两条生命线(客户端、LDAP 服务端),中间一串带标签的箭头,最后一条虚线返回结果。像这种认证协议类的描述,我实测下来,AI 只要知道"消息类型枚举"和"事件顺序",生成的图基本就是可用的。
2.3 架构图:分层、容器与微服务
架构图可能是几种图里"最没有标准答案"的,但 AI 反而能帮上忙,因为很多微服务架构图的画法是有套路的。我看到的大量微服务架构图,基本逃不开这几个层次:流量入口(网关/负载均衡) → 业务服务层 → 基础设施/中间件(消息队列、缓存、数据库) → 外部依赖。AI 生成时先分层,再往每一层里填组件,最后画连线,这个顺序和人的思路是一致的。
画这种图有个细节:同一层级内的组件尽量放在同一个容器框里,容器本身也是一个节点,只是带有"组"的语义。我管这种节点叫 group node。渲染的时候 group node 先生成,普通组件作为子节点放进它的 geometry 范围内,这样移动整个框,里面的组件跟着走,后续人工调整会非常舒服。系统架构图和技术架构图的差别也在这里:系统架构图偏重"有哪些模块、模块之间怎么交互",技术架构图偏重"用了什么中间件、什么协议、部署在哪一层"——提示词里说清楚你要哪种,AI 产出的粒度完全不一样。
2.4 硬件时序图:另一个"时序图"
中文里"时序图"其实指两种完全不同的东西:UML 的 sequence diagram 和硬件的 timing waveform。I2C、SPI、UART、MMC、异步 FIFO 这种波形图,画起来最痛苦,因为要精确表达电平变化和事件发生的先后位置。Next AI Draw.io 对这类图我的建议是:不要硬用 draw.io 原生形状去一笔一笔画波形,而是用 Wavedrom editor 生成波形,再以图片形式嵌入到 draw.io 里。
举个例子,很多人问"用 Wavedrom 怎么表示二分频的时钟"。二分频的本质是周期翻倍、频率减半,在 Wavedrom 里对应信号可以单独设置 period 参数,或者把 wave 字符串里的高低电平跨度拉长;如果你画的是 I2C 时序图,重点在于 SCL 时钟边沿和 SDA 数据线的配合——起始条件(SCL 高电平时 SDA 拉低)、地址/数据位、应答位、停止条件(SCL 高电平时 SDA 拉高)。Wavedrom 用 bit 序列来表示这些状态,再配合注释节点,能画得非常专业。IIC、MMC、UART 的波形也是同一个套路:先确定时钟和数据信号,再标关键事件。对于这种硬核时序,我把"描述 → Wavedrom 配置 → PNG/SVG"做成一个独立链路,draw.io 负责承载块级图,两者各司其职。
3. 实操过程与核心环节实现
3.1 跑起来需要准备什么
我这边用 Python 做实现,核心依赖其实很少:一个调用大模型 API 的 SDK、一个 lxml 用来拼 XML、一个 fastapi 用来起 Web 服务(如果要对外提供接口的话)。安装上就是常见的 pip install,不需要额外重依赖。初始化第一步是准备好四个渲染器,每个渲染器接收 GraphData,输出一段 mxCell 列表,再由公共的 writer 组装成 mxfile。
提示:如果只是自己用,不走 Web 服务也行。命令行方式最直接:问大模型要 JSON → 渲染 → 落盘 xxx.drawio → 用桌面版 draw.io 打开。减少中间环节,调起来快很多。
3.2 提示词设计的三个核心原则
提示词这块我踩过不少坑,总结下来三条原则,直接决定生成质量。
第一,先给结构约束,再谈内容。在 system prompt 里明确告诉模型:"只输出 JSON,不要输出任何解释文字;JSON 必须符合给定的 schema;节点 id 必须全局唯一;edge 的 source/target 必须存在于 nodes 中。"这能把模型"自由发挥"的欲望压到最低。
第二,用 few-shot 样例约束格式。给模型看一个"登录流程图"的标准 JSON 输出样例,它就会照着这个结构输出,而不会凭心情发明新的字段。少写 10 句规则,不如给 1 个标准样例。
第三,把"生成内容"和"生成样式"分离。不要让 AI 自己设计颜色和字体,样式完全由渲染器根据节点类型默认分配。AI 负责"画什么",程序负责"画多好看",这样同一个流程描述今天跑和明天跑,产物视觉上是一致的。
下面是一个精简但能直接用的 user prompt 模板:
请根据我的描述生成一个流程图 JSON:描述是"{用户输入的流程描述}"。输出格式:{"nodes":[{"id":"n1","label":"开始","type":"start"}...],"edges":[{"source":"n1","target":"n2","label":"是"}...]}。节点类型只能从 start、process、decision、input_output、end、subprocess 里选择。决策节点必须有出边,且出边 label 为"是"或"否"。
这个模板的魔力在于,它替 AI 把所有"歧义"都消掉了:类型枚举死了,结构枚举死了,就连决策节点的出边规则也枚举死了。剩下的就是模型在枚举值里做选择,出错概率自然低。
3.3 从 JSON 到 draw.io 文件的核心渲染
拿到 GraphData 之后,渲染器要做三件事:分配坐标、生成 vertex、生成 edge。坐标分配最简单的方案是"分层网格"——先对节点做拓扑排序,同一层的节点 y 坐标相同,x 坐标按序号均匀排开;判断节点带有分支时,下一层的两个子节点自动错开,避免重叠。这个算法虽然朴素,但能解决 80% 的布局问题,剩下的微调用 draw.io 自带的 Arrange 菜单也能处理。
比如反向传播流程的中间表示会长这样:
json复制{
"nodes": [
{"id": "n1", "label": "初始化权重", "type": "start"},
{"id": "n2", "label": "前向传播", "type": "process"},
{"id": "n3", "label": "计算损失", "type": "process"},
{"id": "n4", "label": "是否收敛?", "type": "decision"},
{"id": "n5", "label": "反向传播计算梯度", "type": "process"},
{"id": "n6", "label": "更新权重", "type": "process"},
{"id": "n7", "label": "结束", "type": "end"}
],
"edges": [
{"source": "n1", "target": "n2", "label": ""},
{"source": "n2", "target": "n3", "label": ""},
{"source": "n3", "target": "n4", "label": ""},
{"source": "n4", "target": "n5", "label": "否"},
{"source": "n5", "target": "n6", "label": ""},
{"source": "n6", "target": "n2", "label": ""},
{"source": "n4", "target": "n7", "label": "是"}
]
}
渲染器的核心逻辑长这样:
python复制from lxml import etree
def node_to_cell(root, node, parent_id="1"):
cell = etree.SubElement(root, "mxCell")
cell.set("id", node["id"])
cell.set("value", node.get("label", ""))
cell.set("style", style_for(node["type"]))
cell.set("vertex", "1")
cell.set("parent", parent_id)
geo = etree.SubElement(cell, "mxGeometry")
geo.set("x", str(node["x"]))
geo.set("y", str(node["y"]))
geo.set("width", str(node["width"]))
geo.set("height", str(node["height"]))
geo.set("as", "geometry")
这只是示意片段,完整版还要处理 group node、edge label、子页、超链接。核心思想很简单:draw.io 的 XML 是公开的、稳定的,你把它当普通数据来写就行。实战中我遇到最典型的渲染 bug 是字符串里带了 < 或 &,没有做 XML 转义,导致整个文件打不开;这个在渲染器里统一转义一次就能解决。
3.4 怎么和 Agent 工作流、现有工具链打通
"Next AI Draw.io 是否支持与 Hermes Agent 对接?"——这个问题我直接回答:可以。对接的本质非常清晰,就是把绘图能力封装成一个 tool:输入是自然语言描述,输出是生成的 .drawio 文件路径。Hermes Agent 这类 Agent 框架都有 function calling 机制,你把 draw_chart 这个函数注册进去,Agent 在回答中一旦判断需要图形化表达,就会自动调用它,然后把生成结果展示给用户。实现成本不高,但效果很惊艳——相当于你的 Agent 从"只能聊"变成"能画图"。
更普适的打通是这几个方向:一是和 Git 工作流结合,.drawio 文件入库,评审过程中修改可 diff;二是和文档系统结合,把生成的图作为 Markdown 附件,说明文档从"截图粘贴"变成"文本生成",改需求时重新生成一次就行;三是和 Coze 这类低代码 Agent 平台结合,用一个自定义插件节点把"自然语言 → 图"暴露出去,业务同学也能自己生成流程图。如果你是想做 Vue 前端里的钉钉风格流程图设计器,思路也一样:前端引入 mxGraph,后端或模型生成 GraphData,前端完成渲染和交互。这几个方向我都实际验证过,最稳定的还是命令行和 Web 服务两个入口。
4. 常见问题与排查技巧实录
4.1 生成的 draw.io 文件打不开
这是出现频率最高的故障。绝大多数情况不是 draw.io 的问题,而是 XML 本身不合法:要么字符串没有转义导致解析失败,要么节点 id 重复,要么某条边引用了不存在的 source/target。我的排查顺序是:先用浏览器打开原始 XML 看有没有格式错误,再用 lxml 的 parse 做一次校验,最后用 draw.io 的开发者工具看具体报错。预防手段也简单:渲染器统一走 XML 转义函数,模型输出 JSON 后先做一遍 id 唯一性和引用完整性校验,校验不过就让模型重新生成。
4.2 布局乱、连线交叉、节点重叠
如果你没有给节点算坐标,直接把所有节点丢到原点,draw.io 里必然是乱成一锅粥。即使是 AI 生成的图,坐标分配也必须由程序来做,不能让模型自由编坐标——模型编出的坐标经常是"看起来合理但实际重叠"的。我的方案是分层拓扑布局:先算层级,再算层内位置。连线交叉问题则通过给 edge 加 orthogonalEdgeStyle(正交路由)大幅缓解。如果还有个别交叉,打开 draw.io 的 Layout → Horizontal Flow 或者手动拖动,几秒钟就顺了。
4.3 复杂图生成不完整、缺胳膊少腿
要画微服务架构图,结果只生成了几个服务,数据库和网关全失踪——这是上下文长度和模型返回稳定性的双重问题。我的处理方法是"分块生成,逐层拼装":第一轮先生成顶层架构(网关 + 服务集群 + 数据层),第二轮让模型针对某个服务单独生成内部组件,然后作为子节点挂到顶层容器里。这样每个生成任务都很小,模型不容易漏。对于"用户管理模块流程图"这种需求,我也是先画主流程(注册/登录/权限),再拆出"找回密码子流程""角色分配子流程"分别生成,最后用子流程节点加链接把它们串起来。这和人类画复杂图的思路完全一致——先骨架,再血肉。
4.4 常见问题速查表
| 现象 | 可能原因 | 快速解法 |
|---|---|---|
| 文件打不开/白屏 | XML 未转义、id 重复、边引用缺失 | lxml 校验后修复,渲染器统一转义 |
| 节点全部叠在原点 | 坐标未分配 | 程序计算分层坐标,不要信模型给的坐标 |
| 连线乱飞、交叉多 | 没走正交路由 | edge 加 orthogonalEdgeStyle,用自动布局微调 |
| 图生成一半就停了 | 输出超长/模型不稳定 | 分块生成,子流程单独成图用链接挂载 |
| 中文字符显示乱码 | 编码问题 | 统一 UTF-8 写入,HTML 标签用 html=1 样式 |
| 形状不对(菱形画成长方形) | 模型不知道语义 | 在提示词里枚举节点类型并给 few-shot 样例 |
这张表基本覆盖了我跑这套流程四个月里的高频问题。有些问题重复出现,后来我把校验和修复逻辑做成了中间层,等于把"踩坑经验"固化进了系统。
5. 我的实操心得和扩展思路
5.1 值得长期坚持的几个原则
如果只让我留三条经验,我会留这三条:第一,永远让 AI 输出中间结构而不是直接输出 XML,中间结构好校验、好缓存、好改版;第二,样式归程序,语义归模型,AI 负责把"用户脑子里的流程"翻译成结构化数据,好不好看是渲染器的事;第三,复杂图一定要分块,一张图超过 30 个节点后,不管谁生成,维护成本都会指数上升,不如拆成"主图 + 子图链接"。
我也看到不少人纠结于"能不能一句话生成一整套系统架构图"。理想很美好,但我的体感是:对于二十个节点以内的图,一句话描述完全没问题;对于真正的微服务大图,先让 AI 生成顶层,再逐个模块细化,效率和准确率都会高得多。这不是技术做不到,而是图画太满,人眼也看不过来——一个好的架构图本来就是分层的。
5.2 这套能力还能用在哪些场景
除了最常规的流程文档,我实际用下来觉得价值最大的是这几个场景:第一个,算法讲解。把反向传播、电子时钟万年历、异步 FIFO 空满判断、Linux 启动流程这种"流程感"很强的内容,用一句描述直接生成配图,写技术博客的效率翻倍。第二个,产品需求评审。IT 产品经理描述一个业务流,AI 直接生成带泳道的流程图,几个角色之间的职责边界一目了然。第三个,协议和硬件分析。UART、SPI、I2C、MMC 这些协议的时序图,用 Wavedrom 链路生成波形,再用 draw.io 拼装整体结构图,比纯手工画省太多时间。第四个,架构评审会上现场改图。有人提出"网关要不要拆成两个",你改一句自然语言重新生成,比当场拖拽连线快得多。
5.3 最后一个小技巧
最后分享一个我一直在用的小技巧:在提示词里让模型给每个节点输出一句"一句话说明",渲染时把这些说明作为节点 tooltip 或标注写进 draw.io。这样生成的图不仅形状对、连线对,还把"为什么要这样设计"留在了图上,后续自己回看、给别人讲解都非常好用。画图这件事,工具再多也不如思路清晰;让 AI 先把结构理出来,人再做判断和润色,这大概就是效率最高的协作方式了。
