联发科的天玑9400旗舰芯片标志着其在端侧AI领域的新突破。这款第二代全大核SoC,不仅在AI性能上领先于竞争对手,还首次实现了手机端生成式AI功能,极大拓展了移动设备的应用潜力。通过与生态系统的协同合作,天玑9400展现了其强大的AI处理能力,为市场注入了更多创新动力。

先进技术创新,开启“端侧视频”和“端侧训练”的新篇章

天玑9400还带来了多项震惊整个行业的前沿技术,首发了端侧视频生成应用,这在整个业界包括云端都是最前沿的功能。据介绍,天玑9400的NPU 890通过内建时域张量(Temporal Tensor)硬件指令加速技术和端侧高画质Diffusion Transformer(DiT)技术,在端侧实现了类似Sora的视频生成功能,开创了手机端侧AI生成视频的新篇章。

从生成图像到生成视频,这是AI技术上的一大跨越,意味着端侧AI从此拥有了像云端一样理解物理世界规则的能力,可以期待天玑这项技术的成熟和进化,这或许将带来一场手机应用生态和手机生产力角色的巨大变革。

智慧的AI体验,一定是个性化的服务。基于强悍的端侧算力和生成式AI能力,天玑9400首发端侧LoRA训练,可以让用户利用个人资料在端侧训练和生成个性化内容,并建立专属于个人的AI数字分身。整个过程无需连网,既保护了用户隐私,又实现了AI的专属个人化,无限地拓展创意。这是智能手机和应用升级为智能体化的关键,在保护用户隐私的前提下,智能体化的手机会基于个人数据越来越懂用户的偏好、习惯,甚至在未来会理解用户的情感和行动趋势。

联发科还与虹软合作,基于端侧个性化模型训练,打造了生成式AI修图解决方案,让搭载天玑9400的手机拥有更好的AI修图效果。

天玑让AI更懂你,先进生成式AI让创意更随心

天玑9400还带来了一系列的端侧AI应用底层技术创新。天玑9400的Stable Diffusion性能相较前代提升了2倍,可以根据用户照片的身体姿态,生成各种颇具创意的动图,让用户在手机端侧就可以轻松发挥创造力。

联发科还和小红书深度合作,首发推出端侧SDXL高清风格图,可以将用户的个人照片通过端侧的AI处理生成各种风格的魔幻照片,而且相比云端平均生成时长还要快2倍,本地AI运算快速的优势体现出来了。

此外,联发科还和全民K歌深度合作,首发推出端侧AI纯净人声萃取技术,通过天玑AI音源分轨技术,将K歌时的人声提取出来,再搭配stable diffusion算法做人声还原,可以打造出纯净动听的歌声,然后再搭配音乐混音, 可以为用户提供媲美专业录音室的的K歌作品,让唱歌爱好者用手机就可以享受媲美专业录音室级别的效果。

同时,天玑9400的端侧长文本处理能力大幅提升,支持32K Tokens,提升到上一代的8倍,极大的提升了端侧大语言模型的沟通能力。这意味着可以录入更多的内容给生成式AI应用,人机沟通更加不受限,AI也变得越来越聪明,可以快速学习更丰富的知识来生成更准确的内容。

更惊艳的是,天玑9400端侧多模态AI运算性能达到业界第一的50 Tokens每秒,可以大幅度减少用户等待内容生成的时间。基于强大的端侧多模态AI运算性能,天玑9400可以理解与推理图片的内容,还可以理解图片中文字和数字的相对关系,并根据用户的喜好提供更加个性化的服务。

联发科技与面壁智能合作,提升端侧多模态AI的理解和推理能力,只需要用手机拍一张图,就可以让AI帮你解题。除了做数学题,还可以实现更多场景应用,比如点餐,只需要拍一张菜单照片,智能体AI就可以根据你的喜好帮你点餐。

今年,联发科提出的天玑端侧AI技术路线包括“芯片、模型、应用”三个维度。为了满足用户在端侧对不同应用和大模型的需求,天玑9400与阿里云、百川智能、百度智能云、Google、零一万物、面壁智能、Meta、Microsoft、腾讯混元等全球领先的大模型厂商深度合作,实现了对这些主流大模型的深度适配优化,让用户自由选择不受限。

在面向应用开发者的天玑AI先锋计划推动和引领下,目前已经有海量AI先行者加入到天玑AI生态中,共同探索端侧AI技术创新路线和应用前景,天玑在端侧AI的领导和行业聚合效应无疑正在为端侧AI用户带来更多可能性。

NPU性能称霸,以最强端侧AI构筑“智能体化”坚实基底

看天玑9400的AI性能提升。天玑9400搭载联发科全新的第八代AI处理器NPU 890,AI性能和能效都有着飞跃式的提升。在苏黎世ETHZ AI Benchmark v6.0 芯片AI性能的测试中,天玑9400以绝对高分的成绩一骑绝尘,相比友商芯片直接就是倍数级的领先。此外,天玑9400相较于上一代功耗降低可达35%。AI性能第一、功耗大幅降低,轻松拿下最强手机NPU。联发科对于低功耗的重视真是刻到了骨子里,毕竟只有更好的功耗控制,才有更大的潜力运行各类创新的AI应用。

天玑9400统治级的AI性能已经远超一般迭代的范围,但联发科花费这么大的力气提升AI其实并不意外。早在今年上半年联发科就召开了开发者大会MDDC 2024,与众多合作伙伴联合发布了《生成式AI手机产业白皮书》,诠释了手机发展与变革的新趋势,手机和AI应用的智能体化是未来手机进化的主要路线,移动芯片毫无疑问是这一场变革的关键。联发科作为端侧AI的率先布局者和引领者以及端侧AI生态的建设者,在AI技术和能力上的巨大投入是必然。

面向AI手机和AI应用智能体化这一关键趋势,天玑9400集成了MediaTek天玑AI智能体化引擎,可将传统AI应用程序升级为更先进的智能体化AI应用。联发科正在积极与开发者合作,为 AI智能体、第三方应用程序和大模型之间提供统一的标准接口,实现AI跨应用串联,从而高效地运行边缘AI计算和云服务。天玑AI智能体化引擎具备自主化、推理化和行动化三大特性,可以自主感知环境理解目标,可根据环境的变化调整策略以及支持多个智能体交流和协作,作为集成于天玑9400中的先进AI技术,一经发布就受到了行业的广泛关注。

同时,该技术还可缩短AI产品的开发周期,有利于加速构建应用更丰富、体验更出色的天玑AI生态。

不论端侧AI技术发展的如何快速,能够落地到端侧应用,带给用户最智能、智慧的体验才是最终目的。在天玑开发者大会上,联发科联合众多合作伙伴发布了天玑AI先锋计划,用端侧AI生态的基础设施建设为AI应用大爆发埋下了第一个伏笔。天玑AI智能体化引擎则为应用开发者带来了更加便捷的解决方案,可以加快移动应用大面积智能体化的进程。

发布会上,联发科发布天玑AI智能体化引擎先锋计划,在未来将联合荣耀、OPPO、vivo、小米、传音等多个业界重磅合作伙伴,携手打造先进的智能体化AI应用体验。这便是联发科为端侧AI应用大爆发埋下的第二个伏笔。联发科正在从芯片、开发者解决方案、终端合作构建全链路的智能体化AI应用创新环境。相信很快,在天玑AI生态深刻而广泛的推进作用下,端侧AI应用将迎来无比繁荣的景象,各种最懂用户的端侧智能体化应用将带来全面智慧的AI生活体验。

生成式AI的普及正在彻底改变移动产业,联发科凭借天玑9400在这一领域占据了领先地位。其出色的AI能力和强大的NPU,推动了智能手机向更高智能化的方向迈进。未来,随着AI技术的进一步成熟,智能手机将成为我们智慧生活的重要一部分,而天玑9400则是推动这一进程的核心力量。