出品开源中国
　　自2021年初以来，AI领域推出大量基于文本到图像的模型（例如DALLE2、StableDiffusion和Midjourney等）。近日，谷歌也公开了一款名为Muse的基于文本生成图像的模型，声称可以实现最先进的图像生成性能。
　　下图均为Muse的基于文本生成的图像
　　一群鱼在海里拼成MUSE字样
　　嘴里叼着MUSE牌子的威尔士柯基
　　带有Muse的拿铁咖啡
　　壁炉中的火焰呈现MUSE字样
　　Muse在离散标记空间中接受掩蔽建模任务的训练：给定从预训练的大型语言模型（LLM）中提取的文本嵌入，训练Muse以预测随机掩蔽的图像标记。使用预训练的LLM可以实现细粒度的语言理解，转化为高保真图像生成以及对视觉概念（例如对象）的理解，比如空间关系、姿势、基数等。
　　总体来说，MUSE的优势在于其FID和CLIP分数更高、生成效率比其他同类模型快得多，且支持开箱即用的蒙版编辑功能（即支持通过蒙版继续编辑已生成的图片）。
　　分数更高：MUSE模型获得了出色的FID和CLIP分数，可定量衡量图像生成质量、多样性和与文本的对齐情况。数据方面，MUSE的900M参数模型在CC3M上实现了新的SOTA，FID得分为6。06。Muse3B参数模型在零样本COCO评估中实现了7。88的FID，以及0。32的CLIP分数。
　　生成效率：由于使用压缩的、离散的潜在空间和并行解码，MUSE模型比其他同类模型快得多。与Imagen和DALLE2等像素空间扩散模型相比，Muse使用离散标记，且需要的采样迭代更少，因此生成效率显著提高；与谷歌自己的Parti等自回归模型相比，Muse使用了并行解码，生成效率也更高。
　　编辑功能：MUSE支持基于蒙版的编辑功能，比如下图，通过在左图创建蒙版并输入热气球，便可生成右边的新图片。
　　另外，Muse团队指出，当今语言和图像人工智能系统的用例存在一些潜在的危害，例如社会偏见或传播错误信息。出于这个原因，该团队并未发布MUSE的源代码和任何公开的Demo演示。
　　在MUSE主页可以看到更多基于MUSE的图像作品，下图为部分MUSE作品预览：

造句：谷歌推出新的文本生成图像模型声称性能为同类最佳
造句：谷歌推出新的文本生成图像模型声称性能为同类最佳

天舟三号完成绕飞对接，为什么要换位置？最终结局是什么？2022年4月20日5时02分，天舟三号货运飞船从核心舱后向端口分离，绕飞至前向端口，并于9时06分完成自动交会对接。天舟三号用了四个小时左右的时间，完成了分离绕飞对接，换句话……请远离心穷的人王尔德曾经说过：在我年轻的时候，曾经以为金钱是世界上最重要的东西。现在我老了，才发现确实如此。诚然，我们生活在俗世中，衣食住行样样都要钱。但你知道吗？这世界上……明天过小年，34人团圆饭，做法简单又美味，照着做省事又省心不知不觉新年的脚步越来越近了。明天就到了北方传统的小年，小年其实并不小，相反小年是拥有极为浓重的年味儿和十分丰富的文化内涵。腊月二十三小年，还是祭祀灶君的日子。灶神是中国民间富……广东女飞人梁小静，百米首次跑进11秒文羊城晚报全媒体记者柴智6月5日，StarAthletics国际短跑系列赛在美国佛罗里达举行。在女子100米决赛中，中国短跑运动员梁小静在顺风4。3米秒超风速的情况下跑出……正当红甩了刘恺威，41岁被豪门退婚，44岁成单身辣妹最近，廖碧儿大秀好身材，晒出了一段穿比基尼的视频，丝毫看不出已经44岁了。评论区一如既往，还是少不了谈及她过去的情感经历。其实廖碧儿在娱乐圈起点还是挺高的，没想到却……穆德里克我的偶像是C罗脖子纹身的含义是仅有天赋还不够北京时间1月15日，切尔西主场击败水晶宫。此役，切尔西刚刚签下的乌克兰攻击手穆德里克亮相斯坦福桥，并在赛前谈到了来到切尔西的目标，自己的偶像以及纹身的含义。来到切尔西的目……一嫁改命张馨予将一张烂牌打成王炸，老公到底是什么来头？本以为何捷是高攀，没想到是低娶。当初张馨予宣布婚讯时，央广军事转发了她的微博，并附文军嫂，你好，给足了张馨予面子。吃瓜群众纷纷疑惑，张馨予的老公到底是什么来头？……谷歌推出新的文本生成图像模型Muse，声称性能为同类最佳出品开源中国自2021年初以来，AI领域推出大量基于文本到图像的模型（例如DALLE2、StableDiffusion和Midjourney等）。近日，谷歌也公开了一款名……CBA第八周周最佳胡金秋ampampamp布莱克尼直播吧1月10日讯CBA官方公布了第八周的周最佳球员，广厦队中锋胡金秋和江苏队外籍球员布莱克尼当选。浙江广厦篮球俱乐部球员胡金秋，本周带领球队取得3战全胜的战绩，场均贡献……腐团儿名媛风穿搭气质拉满，连衣裙显大长腿，自律维持好身材最近，王者荣耀正在举办蒙犽源梦皮肤征集活动，从玩家的参赛作品来看，这次国风设计的源梦皮肤真的是细节满满。王者荣耀给出的主题就是国风，所以参赛的作品要么是以中国古代的神兽为……CBA最新积分榜！辽篮稳居第二，北京反超广东，深圳升至第五！北京90：83同曦，凭借着全队四人得分上双，北京首钢最终以七分的优势有惊无险击败了同曦男篮，拿下比赛的同时也取得了一波四连胜。此役大外利夫的状态十分出色，全场17投8中，砍下了……高质量绿色发展的安吉成果中国小康网讯12月30日，由《小康》杂志社主办的2022第二届中国经济社会高质量发展论坛在线上举行。本届论坛以中国式现代化与高质量发展为主题，邀请了来自全国各地的政府主政者、专……