图生GIF玩转表情包,联发科技、慧鲤联手打造生成式AI应用新体验

近日,联发科技重磅发布最新一代旗舰移动芯片天玑9300,业内首创的全大核芯片设计,以及与生成式AI技术的结合成为发布会的最大亮点。慧鲤作为联发科技生成式AI的重要生态合作伙伴,现场展示了AI防眩光、图生GIF等生成式AI在移动端的最新应用。凭借软硬件技术体系的完美结合,慧鲤正在与联发科技等芯片巨头加速开辟移动端生成式AI新图景。

图生GIF新体验,玩转表情包更简单

随着人工智能大模型及生成式AI技术与应用的逐步完善,对芯片也提出了更高要求。最新发布会上,联发科技详细展示了合作伙伴慧鲤生成式AI在其最新手机芯片上的成果,并首次实现了端侧LoRA融合,让大模型技能可在本地扩展。

最让人眼前一亮的是慧鲤的图生GIF动图(Image to GIF)功能。基于慧鲤成熟的LoRA训练体系,精准学习不同用户的faceID特征,即使叠加各种抽象的艺术风格LoRA,仍能保证人物辨识度和特征多样性。用户只需要输入text prompt,即可任意选择各类画面风格,设计不同微表情图像,自由玩转个人专属表情包。

慧鲤利用独特的生成技术,结合天玑9300支持的生成式AI端侧技能扩充技术“NeuroPilotFusion”,在基础模型上持续融合不同专业技能,扩展各项生成式AI应用和功能,并在移动终端装置上实现LoRA成果。突破性兼顾了多张生成图之间的效果稳定性,和对不同表情prompt的高保真还原度:保持背景、主体不变的情况下生成不同的高质量表情图片。同时,配合生成式AI算子加速,处理速度更快。

生成式AI防眩光技术,还原真实美感

发布会现场还演示了慧鲤生成式AI防眩光技术。借助叠加去眩光和内容生成功能,手机拍摄可以更好地还原真实世界的光感,拍摄效果更真实唯美。

传统拍摄极易出现镜头眩光伪影,尤其是遇到镜头脏污、硬件特性等客观因素,往往会严重影响画质呈现效果,并且对拍摄者来说这种情况很难完全避免。

慧鲤利用vision Transformer搭建起高效的AIGC算法模型,在高效检测并去除各种光点耀斑的同时,可以正确生成并复原被耀斑遮挡的内容,以达到去眩光的拍摄效果。值得一提的是,慧鲤还针对图像内容实现了全局编码,可以针对镜头脏污眩光、花瓣形等镜头眩光等多种眩光形态进行去除与修复,最终实现高质高效地相机侧应用。无论是室内、室外,抑或路灯下、烛光边,眩光还原可以排除各种光源干扰。

慧鲤生成式AI与天玑9300的技术融合,正在为移动端AI解锁更多精彩玩法。随着AI大模型在终端用户市场的加速普及落地,慧鲤将与联发科技进一步加强软硬件产品合作,用更先进的技术和应用,为用户带来更美好的生成式AI移动新体验。