基于双重注意力的图像界面自动生成代码方法及装置
实质审查的生效
摘要
本发明公开了一种基于双重注意力的图像界面自动生成代码方法及装置，使用DSL描述GUI，基于Resnet50提取图像特征，采用双层LSTM提取上下文向量，图像特征与上下文向量联合输入双重注意力模块，分别计算通道注意力和空间注意力，让网络对输入图片的特征多方面进行加权重处理，生成层结合注意力输出分类分数张量，模型输出的DSL序列最后经Compiler编译特定平台源码。本发明提出的融合空间注意力机制和通道注意力双重注意力机制，能够在解码器学习DSL变量关系时，提供当前时间步对应GUI组件空间位置，并按照计算的通道重要程度分配对关键图像特征图的有效关注，极大增强了网络学习能力、提高了图像界面生成代码的准确率。
基本信息
专利标题 ：
基于双重注意力的图像界面自动生成代码方法及装置
专利标题（英）：
暂无
公开（公告）号 ：
CN114463604A
申请号 ：
CN202210027565.3
公开（公告）日 ：
2022-05-10
申请日 ：
2022-01-11
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
李伟余孝琴李澎林余文杰
申请人 ：
浙江工业大学
申请人地址 ：
浙江省杭州市下城区潮王路18号
代理机构 ：
杭州求是专利事务所有限公司
代理人 ：
忻明年
优先权 ：
CN202210027565.3
主分类号 ：
G06V10/82
IPC分类号 ：
G06V10/82 G06V10/774 G06V10/74 G06V10/764 G06N3/04 G06N3/08 G06F8/34 G06F8/41 G06K9/62
法律状态
2022-05-27 ：
实质审查的生效
IPC(主分类) : G06V 10/82
申请日 : 20220111
申请日 : 20220111
2022-05-10 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
