腾讯混元大模型升级文生图片和代码能力提升

10月26日,腾讯宣布混元大模型升级,正式对外开放“文生图”功能,展示了其在图像自动生成领域的领先能力。升级后的腾讯混元中文能力整体超过GPT3.5,代码能力大幅提升20%,达到业界领先水平。

腾讯对外展示了混元大模型图片生成能力,在语义理解、内容合理和画面质感方面,都做了改善。另外,大模型也用来帮助腾讯内部员工提高效率,减少工作量,用来编写代码。腾讯多个工作平台已经接入大模型。

文生图

在人脸画像方面,输入提示词“生成可爱的亚洲4岁女孩穿着棉质连衣裙,大眼睛,古代中国,摄影风格,汉服”,腾讯混元大模型生成如下:

腾讯认为,大模型很好的理解了“棉质连衣裙”、“汉服”等内容,同时在风格上,也通过建筑和风景等衬托,很好的展示了“古代中国”的风格要求。

此外,输入提示词“一个城市CBD办公楼,现代化设计,高层建筑,玻璃幕墙,近景拍摄,摄影风格,摄影照片”,腾讯混元大模型也交出了比较好的作品。

大模型文生图的难点体现在对提示词的语义理解、生成内容的合理性以及生成图片的效果。针对这三个技术难点,腾讯进行了专项的技术研究,提出了一系列原创算法,来保证生成图片的可用性和画质。

在语义理解方面,腾讯混元采用了中英文双语细粒度的模型。模型同时建模中英文实现双语理解,并通过优化算法提升了模型对细节的感知能力与生成效果,避免多文化差异下的理解错误。

在内容合理性方面,AI生成人体结构和手部经常容易变形。混元文生图通过增强算法模型的图像二维空间位置感知能力,并将人体骨架和人手结构等先验信息引入到生成过程中,让生成的图像结构更合理,减少错误率。

在画面质感方面,混元文生图基于多模型融合的方法,提升生成质感。经过模型算法的优化之后,混元文生图的人像模型,包含发丝、皱纹等细节的效果提升了30%,场景模型,包含草木、波纹等细节的效果提升了25%。

写代码

过去一个月,腾讯混元大模型代码、数学能力大幅提升。经过对32种主流语言代码文件、各类计算机书籍和博客的学习增训,腾讯混元代码处理水平提升超过20%,代码处理效果胜出ChatGPT6.34%,在HumanEval公开测试集指标上全面超过Starcoder、Codellama等业界头部开源代码大模型。

只需输入简单的指令如“帮我用前端语言实现一个贪吃蛇”,腾讯混元便能自动生成可运行的代码,快速制作出一个贪吃蛇小游戏。此外,腾讯混元还支持Python、C++、Java、Javascript等多种语言的指令生成,比如输入“用Python画红色的心形线”,腾讯混元会提供代码库选择、安装命令、绘制代码等具体操作步骤的指引。

腾讯内部目前已经有多个开发平台接入了腾讯混元大模型,工程师们可以使用腾讯混元来进行代码生成、代码补全、代码漏洞检测和修复、表格数据处理、数据库查询等工作。

比如,在IDE编程场景中,腾讯工蜂Copilot通过接入混元大模型,可根据注释生成对应代码,或基于上下文智能补全代码,大大提高了编程效率。混元大模型还可以帮助用户进行代码漏洞检测和修复,保障软件开发过程中的安全性。

腾讯混元大模型持续升级背后,有腾讯自研一站式机器学习平台Angel的支撑。AngelPTM训练框架可提供高效的分布式训练解决方案,训练速度相比业界主流框架提升1倍;自研AngelHCF训练框架,具备从蒸馏、微调、压缩到模型加速的完整能力,支持多种模型并行,保证模型的最小化部署及最大化吞吐,推理速度相比业界主流框架FasterTransformer快1.3倍。

作为实用级的通用大模型,腾讯混元大模型的应用场景丰富多样。目前,超过180个腾讯内部业务已接入腾讯混元,包括腾讯会议等。

THE END
1.腾讯重磅发布,文生视频上线,好不好用?美卫星:中国福建舰甲板出现大裂缝 历史求知所 1339跟贴 讲真,是球网先动手的!!! 新媒体 论背景音乐的重要性!! 新媒体 旁边有个抢活的…怎么办?人都过去了? 新媒体 多喝热水,热水治百病! 新媒体 59跟贴 这滑的挺远的哈,棒棒哒 新媒体 1跟贴 战斗民族糗事汇,每个都是爆笑 新媒体 5跟贴 https://m.163.com/v/video/VFHPMKHLP.html
2.网站地图腾讯于1998年11月成立,是一家互联网公司,通过技术丰富互联网用户的生活,助力企业数字化升级。我们的使命是“用户为本 科技向善”。Founded in 1998, Tencent is an Internet-based platform company using technology to enrich the lives of Internet users and assist https://www.tencent.com/zh-cn/sitemap.html
3.小说,小说网,最新热门小说起点中文网起点中文网,最新热门小说网站,提供玄幻小说、武侠小说、原创小说、网游小说、都市小说、言情小说、青春小说、科幻小说等首发小说,最新章节在线阅读。更多精彩尽在起点中文网小说网。https://www.qidian.com/
4.20241208人和自己打架是很难受的,但总要过了这一关,写文就是写心!文字不能很好表达自己想要表达的那种思想是很痛苦的。 写多不如写少,写少不如写好! 少就是多,多就是少! 再来体会,意义非凡。知识知道的永远比未知的多,文学深似海,你的一滴可有可无。https://www.jianshu.com/p/45c171d533eb
5.腾讯混元大模型再度升级,文生图能力震撼发布,全面实测解析2023 年,大模型的落地按下加速键,文生图便是最火热的应用方向之一。 自从Stable Diffusion 诞生以来,海内外的文生图大模型不断涌现,一时有「神仙打架」之感。每一次技术迭代,都带来了模型生成效果和速度的飞速提升。 就在今天,腾讯混元大模型也宣布了最新进展:文生图能力正式上线。 https://www.php.cn/faq/622784.html
6.腾讯混元大模型升级:新增“文生图”,代码能力大幅提升雷峰网10月26日,腾讯宣布,腾讯混元大模型迎来全新升级,并正式对外开放“文生图”功能,展示了其在图像自动生成领域的领先能力。升级后的腾讯混元中文能力整体超过GPT3.5,代码能力大幅提升20%,达到业界领先水平。 作为实用级的通用大模型,腾讯混元大模型的应用场景丰富多样。目前,超过180个腾讯内部业务已接入腾讯混元,包括腾讯会https://www.leiphone.com/news/202310/qVAm7ejMqj20r678.html
7.腾讯混元大模型升级:新增“文生图”,代码能力大幅提升10月26日,腾讯宣布腾讯混元大模型迎来全新升级,并正式对外开放“文生图”功能,展示了其在图像自动生成领域的能力。升级后的腾讯混元中文能力整体超过GPT3.5,代码能力大幅提升20%。 作为实用级的通用大模型,腾讯混元大模型的应用场景丰富多样。目前,超过180个腾讯内部业务已接入腾讯混元,包括腾讯会议、腾讯http://www.xinhuanet.com/tech/20231026/cfdedd8998a040b1a2511697951201c0/c.html
8.文轩宇1文轩宇 编辑 作者简介 :2009年入住腾讯原创读书网,作品极品妖孽在腾讯男频玄幻总点击第一,玄幻总推荐第一,腾讯总推荐榜第一。 :2009年7月在腾讯读书网发表第一本百万字作品《潜龙天下》,后签约腾讯原创独家作者。 :2009年11月在腾讯读书网发表作品《极品妖孽》现已更新五百余万字(完结)。 https://baike.sogou.com/v23304722.htm
9.腾讯开源文生图大模型,AI给艺术创作者提供灵感还是抢饭碗?腾讯发布针对腾讯混元文生图开源大模型(以下简称为混元DiT模型)的加速库,让推理效率大幅提升,生图时间缩短75%。 混元DiT模型的使用门槛也大幅降低。用户可以基于ComfyUI的图形化界面,使用腾讯混元文生图模型能力。同时,混元DiT模型已经部署至Hugging Face Diffusers通用模型库中,用户仅用三行代码即可调用混元DiT模型,无需下https://www.xianjichina.com/special/detail_549958.html
10.腾讯混元:开源训练代码,升级文生图模型股票频道腾讯混元文生图大模型全面开源训练代码,同时开源 LoRA 小规模数据集训练方案与可控制插件 ControlNet,构建更具想象力的开源生态。 【腾讯混元文生图大模型全面开源训练代码】 今日,腾讯混元文生图大模型宣布全面开源训练代码,同时对外开源混元 DiTLoRA 小规模数据集训练方案与可控制插件 ControlNet。 https://stock.hexun.com/2024-06-21/213263099.html
11.腾讯文生文模型将开源下一代视频模型时长将超30秒关于混元逐步开源的原因,腾讯混元模型应用负责人张锋告诉第一财经记者,大模型应用很多场景需要私有化,这种情况下只提供API(接口)不太能满足需求。腾讯混元文生图负责人芦清林则告诉记者,若业界不开放大体量的FounDiTion model(DiT基础模型),因数据及资源成本问题,独立研究人员乃至大型实验室都难以做出来,很多优化工作无法https://wap.eastmoney.com/a/202405173080096035.html
12.腾讯元宝上线长文AI精读智东西8月7日消息,腾讯推出的AI原生应用“腾讯元宝”已上线长文精读能力。当用户上传论文、财报、研报等专业内容的URL链接或文件,除获得文字概括总结外,还可进入深度阅读模式,对长文进行精读。该模式可提供核心内容概览及模块化解析,生成总结性图表,辅助用户快速理解https://zhidx.com/news/42269.html
13.文新院与腾讯大苏网展开战略合作,推动应用型新闻传播人才培养模式3月28日,文学与新闻传播学院院长王勇、副院长彭耀春及学院部分教师,赴腾讯江苏总部,与腾讯大苏网总裁艾芳及其高管团队商谈战略合作事宜。双方商谈决定即将开展多种形式的合作,共同推动三江学院应用型新闻传播人才培养模式创新。 总体合作方面,双方将共同成立腾讯企鹅新媒体学院,启动产学研合作模式;共同向教育部申报开设“网https://www.sju.edu.cn/sjxyll/de/00/c4172a56832/page.htm