一种基于多模态大模型的用户界面代码生成方法、系统及设备
申请号:CN202411439412
申请日期:2024-10-15
公开号:CN119473280A
公开日期:2025-02-18
类型:发明专利
摘要
本发明涉及人机交互和软件工程领域,提供一种基于多模态大模型的用户界面代码生成方法、系统及设备,该方法包括如下步骤:根据UI设计图构建页面转换图;提取UI设计图中的UI组件并分析其功能,得到UI组件分析结果;将页面转换图、UI组件分析结果以及UI设计图进行整合生成提示词;将提示词输入多模态大模型,多模态大模型根据提示词生成用户界面代码。本发明解决了当前UI开发中存在的效率低下、复杂设计难以处理、交互逻辑理解有限等问题。本发明为声明式UI框架的广泛应用和进一步发展提供了强有力的技术支持,推动了整个UI开发生态系统的进步。
技术关键词
代码生成方法
多模态
生成用户界面
生成提示词
构建页面
代码生成设备
代码生成系统
图像分割算法
计算机视觉技术
代码结构
生成页面
实例分割
框架
对象检测
生态系统
处理器
图谱
分析模块