当前位置: 代码网 > 服务器>网络>https > DALLE2

DALLE2

2024年07月31日 https 我要评论
输入是CLIP编码后的文本特征,输出是图像特征,用CLIP编码的图像特征作为监督。输入是CLIP编码后的图像特征,输出是图,用原图做监督。先来看一下整体的框架图。

先来看一下整体的框架图

训练过程包括三个部分:

1、clip训练(用预训练模型即可)

2、prior网络训练 (学习文本特征到图像特征的映射)

输入是clip编码后的文本特征,输出是图像特征,用clip编码的图像特征作为监督

3、decoder网络训练(学习图像特征到图像的映射)

输入是clip编码后的图像特征,输出是图,用原图做监督

(0)

相关文章:

版权声明:本文内容由互联网用户贡献,该文观点仅代表作者本人。本站仅提供信息存储服务,不拥有所有权,不承担相关法律责任。 如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 2386932994@qq.com 举报,一经查实将立刻删除。

发表评论

验证码:
Copyright © 2017-2025  代码网 保留所有权利. 粤ICP备2024248653号
站长QQ:2386932994 | 联系邮箱:2386932994@qq.com