高通AI白皮书发布,混合AI能否让AI触手可及?_环球观点
众所周知,高通是目前手机、汽车、XR头显与眼镜、PC和物联网的参与者与
PConline太平洋科技 2023-06-18 06:57:36
随着Chat GPT近半年的关注度爆发,大家对于AI的应用有更多的想法和期待。而除了目前讨论广泛的服务器或者企业端应用外,未来如何将AI更深度结合到手机、汽车、个人电脑和物联网终端上,也成为行业和用户新的焦点。
【资料图】
6月16日,高通技术公司正式发布了白皮书《混合AI是AI的未来》,深入阐述混合AI架构的领先优势,终端侧AI将如何赋能生成式AI实现规模化扩展,以及高通如何凭借终端侧AI领导力、全球化规模和生态系统赋能,让混合AI成为现实。本文将先为大家带来高通关于混合AI的技术和想法
混合AI的优势
目前的AI运算主要分为终端侧和云端两种,前者对终端的AI性能要求高,后者对网络的要求高,且成本也较高,目前主要用于企业或者专业领域。混合AI指终端和云端协同工作,在适当的场景和时间下分配AI计算的工作负载,以提供更好的体验,并高效利用资源。在一些场景下,计算将主要以终端为中心,在必要时向云端分流任务。而在以云为中心的场景下,终端将根据自身能力,在可能的情况下从云端分担一些AI工作负载。
而高通的混合AI将支持生成式AI应用开发者和提供商利用边缘侧终端的计算能力降低成本。混合AI架构或仅在终端侧运行AI,能够在全球范围带来高性能、个性化、隐私和安全等优势。混合AI架构可以根据模型和查询需求的复杂度等因素,选择不同方式在云端和终端侧之间分配处理负载。
在以终端为中心的混合AI架构中,云端仅用于处理终端侧无法充分运行的AI任务
随着强大的生成式AI模型不断缩小,以及终端侧处理能力的持续提升,混合AI的潜力将会进一步增长。参数超过10亿的AI模型已经能够在手机上运行,且性能和精度达到与云端相似的水平。不久的将来,拥有100亿或更高参数的模型将能够在终端上运行。混合AI策略适用于几乎所有生成式AI应用和终端领域,对推动生成式AI规模化扩展,满足全球企业与消费者需求至关重要。
混合 AI 方式适用于几乎所有生成式 AI 应用和终端领域,包括手机、笔记本电脑、XR 头显、汽车 和物联网。这一方式对推动生成式 AI 规模化扩展,满足全球企业与消费者需求至关重要。
高通为何发力混合AI
基于基础模型的生成式AI迅速兴起,正在驱动新一轮内容生成、搜索和生产力相关用例的发展, 覆盖包括智能手机、笔记本电脑和 PC、汽车、XR 以及物联网等终端品类。混合AI架构将赋能 生成式AI在上述这些终端领域提供全新的增强用户体验。
众所周知,高通是目前手机、汽车、XR头显与眼镜、PC和物联网的参与者与领导者之一,并且其终端侧AI技术之前已经应用在多个不同领域,再加上高通在无线连接技术上的领先,与众多行业的参与者、用户有着紧密的联系,因此,高通对推动混合AI规模化扩展独具优势。
搭载骁龙平台的终端能够推动混合AI扩展至跨不同细分领域和层级的数十亿产品
高通的AI引擎和软件栈为加速终端侧AI推理提供了解决方案,并具备行业领先的性能和能效优势。凭借一系列基础研究,以及跨AI应用、模型、硬件与软件的全栈终端侧AI优化,我们的持续创新让公司始终处于终端侧AI解决方案的最前沿。
高通的全栈AI
编辑点评:AI发展的最终目标必然是为更多用户提供不同的服务,因此无论是技术开发、使用难度还是成本方面的门槛都要进一步下降。我们目前还无法评估高通混合AI在实际应用中能带来多大影响,但所有新技术的普及都要依赖于不同参与者的努力,未来才可能成为我们生活中的触手可及的体验。
众所周知,高通是目前手机、汽车、XR头显与眼镜、PC和物联网的参与者与
6月17日,第25届上海国际电影节金爵奖颁奖典礼正式举行。胡歌、大鹏分
分币大家都熟悉,一般的分币都是单独的,或者整刀的,拿起来配册的一般
花卉万千,每种花卉对环境的适应能力都不一样,有些花卉扔在土里面就能
IT之家6月17日消息,LG去年今年4月份推出了“魔方屏”DualUp显示器,型
最新宣布,新宝马X5M雷霆版和X6M雷霆版正式上市,各推出1款雷霆版车型
新智元报道 编辑:编辑部【新智元导读】谷歌的新AI模型,直接解决了
1、中国测字术很重要的几个构成方式:观形、会意、拆(拆开字型笔画)
近年来,TVB剧集被当地传媒、网友普遍看衰,嘲讽、抵制声此起彼伏,另
直播吧6月17日讯 2023LPL夏季赛常规赛EDG对阵LNG的比赛正在进行,首局
全媒体记者魏海洋报道为弘扬中华民族敬老、尊老、助老的优良传统,提高
习惯性流产是指妇女连续两次以上出现流产的病变现象。它可能会伴随着多
1、看:拿一瓶红酒,先不用打开,用下面几种方法来看红酒的好坏:(1)
四川九牛的总积分增长至17分,先赛1场的情况下与前二还有4分差距,追赶
突发!龙湾超高层10 8亿元起拍地块,终止交易···,龙湾,楼面价,商品