一种支持创意及图形化的编程辅助方法及系统
摘要文本
本发明公开了一种支持创意及图形化的编程辅助方法,包括以下步骤:获取草图数据和对所述草图数据进行描述的描述语音数据,以构建对应的图像素材集合;录制对草图数据编程操作时的操作需求语音作为指令语音数据,生成对应的代码块;根据编程需求选择素材库中的标准图像素材,并录入对应的操作需求语音以生成可视化代码,对生成的代码块进行编辑和组合以输出用于实现对标准图像素材进行编程操作的代码文本。本发明还提供了一种支持创意及图形化的编程辅助系统。本发明提供的方法能够将复杂枯燥的代码进行图形化并给予灵感支持,从而实现辅助编程的目的。
申请人信息
- 申请人:浙江大学
- 申请人地址:310058 浙江省杭州市西湖区余杭塘路866号
- 发明人: 浙江大学
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种支持创意及图形化的编程辅助方法及系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311600048.1 |
| 申请日 | 2023/11/28 |
| 公告号 | CN117608555A |
| 公开日 | 2024/2/27 |
| IPC主分类号 | G06F8/34 |
| 权利人 | 浙江大学 |
| 发明人 | 陈柳青; 陈云农; 肖树鸿; 李泽健; 孙凌云 |
| 地址 | 浙江省杭州市西湖区余杭塘路866号 |
专利主权项内容
1.一种支持创意及图形化的编程辅助方法,其特征在于,包括以下步骤:获取素材信息,所述素材信息包括草图数据和对所述草图数据变化进行描述的描述语音数据;将描述语音数据转换为文本数据,并输入至预构建的结构化模版中以构建对应的图像提示文本,通过所述图像提示文本生成对应的图像作为第一标准图像素材;提取草图数据中的图像特征作为对应的图像关键点;将所述图像关键点,草图数据以及描述语音数据对应的图像提示输入至Stablediffusion模型,以重构对应的第二标准图像素材,将第一标准图像素材和第二标准图像素材组成图像素材集合;获取用于控制图像素材动作变化的指令语音数据,并将所述指令语音输入至预构建的关系映射模型中,以输出指令语音对应的代码提示文本;将所述代码提示词与实际标准代码进行相似匹配,以构建实际标准代码对应的代码块,所述代码块用于表示指令语音数据对应的实际标准代码;根据编程需求选择素材库中的图像素材,并输入对图像素材进行图像操作的指令语音数据,以输出图像素材操作变化时对应的代码块变化界面,并对代码块进行编辑与组合以输出对应的代码文本。。(来 自 马 克 数 据 网)