高通AI负责人:云端难以完成所有生成式AI负载,“混合AI模式”是合理方向-天下网标王
正在阅读:

高通AI负责人:云端难以完成所有生成式AI负载,“混合AI模式”是合理方向

扫一扫下载界面新闻APP

高通AI负责人:云端难以完成所有生成式AI负载,“混合AI模式”是合理方向

高通称,云端并非生成式AI全部图景,在手机、电脑、物联网等“端侧”,高通存在机会。

图像拍摄:匡达

界面新闻记者 | 彭新

“在云端完成所有生成式AI所需的工作负载,是难以实现的。”6月16日,高通技术公司产品管理高级副总裁兼AI负责人Ziad Asghar接受界面新闻记者等采访时称,云端处理存在成本的乘数效应,用户进行查询的次数越多,模型规模就越大,也就会导致云端的成本不断上升。不仅如此,应用数量和用户数量的增加,也会导致成本的提高。因此,高通更倡导所谓“混合AI”模式。

由ChatGPT引发的人工智能大潮席卷科技行业,科技巨头急切寻找其中位置。以手机芯片闻名的高通坚称,云端并非生成式AI全部图景,在手机、电脑、物联网等“端侧”,高通存在机会。

Ziad Asghar称,在高通理念中,混合AI的优势在于结合云端和终端的各自优势:一方面,对隐私和安全要求比较高的终端侧工作负载,可以继续通过边缘云,完全在终端侧完成。同时,通过在云端和边缘侧终端分布工作负载,我们能够大幅度减少云端的处理量。另一方面,对于其它较大负载的AI模型处理工作,可以通过云服务供应商完成。

Ziad Asghar还认为,外界对于云端处理生成式应用仍存在隐私疑虑,而终端侧处理恰恰能够解决这一问题。“比如用户发出一个查询,终端接收之后能够独立完成推理,那么所有相关的查询信息和数据都会留在终端上。”

实际上,与“人工智能”一词已与GPU巨头英伟达深度绑定相比,高通对于自研AI技术的应用,多用于网络信号处理、图形、音频优化等。Ziad Asghar称,高通长期专注于脉冲神经网络(SNN)领域研究,对AI已有15年以上的研发历程,无论时手机上搭载的骁龙芯片、人脸识别还是卷积神经网络等,均有高通AI能力。

“我们的独特优势在于,骁龙计算平台拥有专用的硬件单元,能够原生支持生成式AI在本地使用,这与目前市场上其他的产品完全不同。”Ziad Asghar说。

2023年世界移动通信大会(MWC)期间,高通展示了其在安卓手机运行文生图Stable Diffusion模型的能力。Stable Diffusion是一个近期流行的AI模型,能够基于文本输入来创作图像。该模型参数超过10亿,此前主要限于在云端运行。不过,与ChatGPT模型的上千亿参数相比,Stable Diffusion在数据规模上存在较大差异。

“许多关键的生成式AI模型,比如文本生成图像、自然语言处理、编程、图像理解、图像创作等,模型规模一般在10亿到100亿参数之间。”Ziad Asghar称,他介绍,未来几个月内,高通将有望支持参数超过100亿模型在终端侧运行。

“针对Stable Diffusion,我们所采用的是8位整数运算(INT8),去年年底在第二代骁龙8移动平台上,我们已经进一步支持了4位整数运算(INT4)能力。”Ziad Asghar称,高通从硬件、软件以及工具设计上,均致力于发挥在端侧的人工智能优势。

随着算法愈加复杂,计算量越来越大,高通认为,手机、汽车、无人机,以及万亿级的物联网设备都需要具有更强的人工智能能力。Ziad Asghar介绍,在云端服务器上训练的模型,一般采用32位浮点运算(FP32),意味着完成模型推理需要大量的处理工作。高通希望通过整数运算模式和量化技术进行AI推理,加快获取模型推理结果速度。

智能手机市场行情不佳,以销售手机芯片为主的高通正遭遇挑战。5月4日,高通公布第二财季财报,其营收同比下滑17%至92.8亿美元,净利润同比下降42%至17.04亿美元。其中QCT(半导体业务)部门核心业务手机芯片销量下降17%至61.1亿美元。市场调研机构Canalys数据显示,2022年,全球智能手机出货量连续四个季度下滑,全年市场整体降幅为12%,总出货量跌破12亿部。其中,中国市场2022年出货量减少14%,跌至2.87亿部,创下十年新低。

对于高通而言,在市场下行环境下,生成式AI是其希望向投资人传达信心的重点部分。在第二财季电话会议上,高通CEO安蒙称,生成式人工智能模型的需求正以指数级速度增长,ChatGPT、Stable Diffusion和DALL-E等生成式AI模型已经在短时间内扩展到数百万用户。高通相信该技术将快速发展、持续流行并改变移动、个人计算和汽车领域用户体验。

未经正式授权严禁转载本文,侵权必究。

高通

4.8k
  • 高通:任命Baaziz Achour为高通技术首席技术官
  • LambdaTest完成3800万美元融资,高通创投参投

评论

暂无评论哦,快来评价一下吧!

下载界面新闻

微信公众号

微博

高通AI负责人:云端难以完成所有生成式AI负载,“混合AI模式”是合理方向

高通称,云端并非生成式AI全部图景,在手机、电脑、物联网等“端侧”,高通存在机会。

图像拍摄:匡达

界面新闻记者 | 彭新

“在云端完成所有生成式AI所需的工作负载,是难以实现的。”6月16日,高通技术公司产品管理高级副总裁兼AI负责人Ziad Asghar接受界面新闻记者等采访时称,云端处理存在成本的乘数效应,用户进行查询的次数越多,模型规模就越大,也就会导致云端的成本不断上升。不仅如此,应用数量和用户数量的增加,也会导致成本的提高。因此,高通更倡导所谓“混合AI”模式。

由ChatGPT引发的人工智能大潮席卷科技行业,科技巨头急切寻找其中位置。以手机芯片闻名的高通坚称,云端并非生成式AI全部图景,在手机、电脑、物联网等“端侧”,高通存在机会。

Ziad Asghar称,在高通理念中,混合AI的优势在于结合云端和终端的各自优势:一方面,对隐私和安全要求比较高的终端侧工作负载,可以继续通过边缘云,完全在终端侧完成。同时,通过在云端和边缘侧终端分布工作负载,我们能够大幅度减少云端的处理量。另一方面,对于其它较大负载的AI模型处理工作,可以通过云服务供应商完成。

Ziad Asghar还认为,外界对于云端处理生成式应用仍存在隐私疑虑,而终端侧处理恰恰能够解决这一问题。“比如用户发出一个查询,终端接收之后能够独立完成推理,那么所有相关的查询信息和数据都会留在终端上。”

实际上,与“人工智能”一词已与GPU巨头英伟达深度绑定相比,高通对于自研AI技术的应用,多用于网络信号处理、图形、音频优化等。Ziad Asghar称,高通长期专注于脉冲神经网络(SNN)领域研究,对AI已有15年以上的研发历程,无论时手机上搭载的骁龙芯片、人脸识别还是卷积神经网络等,均有高通AI能力。

“我们的独特优势在于,骁龙计算平台拥有专用的硬件单元,能够原生支持生成式AI在本地使用,这与目前市场上其他的产品完全不同。”Ziad Asghar说。

2023年世界移动通信大会(MWC)期间,高通展示了其在安卓手机运行文生图Stable Diffusion模型的能力。Stable Diffusion是一个近期流行的AI模型,能够基于文本输入来创作图像。该模型参数超过10亿,此前主要限于在云端运行。不过,与ChatGPT模型的上千亿参数相比,Stable Diffusion在数据规模上存在较大差异。

“许多关键的生成式AI模型,比如文本生成图像、自然语言处理、编程、图像理解、图像创作等,模型规模一般在10亿到100亿参数之间。”Ziad Asghar称,他介绍,未来几个月内,高通将有望支持参数超过100亿模型在终端侧运行。

“针对Stable Diffusion,我们所采用的是8位整数运算(INT8),去年年底在第二代骁龙8移动平台上,我们已经进一步支持了4位整数运算(INT4)能力。”Ziad Asghar称,高通从硬件、软件以及工具设计上,均致力于发挥在端侧的人工智能优势。

随着算法愈加复杂,计算量越来越大,高通认为,手机、汽车、无人机,以及万亿级的物联网设备都需要具有更强的人工智能能力。Ziad Asghar介绍,在云端服务器上训练的模型,一般采用32位浮点运算(FP32),意味着完成模型推理需要大量的处理工作。高通希望通过整数运算模式和量化技术进行AI推理,加快获取模型推理结果速度。

智能手机市场行情不佳,以销售手机芯片为主的高通正遭遇挑战。5月4日,高通公布第二财季财报,其营收同比下滑17%至92.8亿美元,净利润同比下降42%至17.04亿美元。其中QCT(半导体业务)部门核心业务手机芯片销量下降17%至61.1亿美元。市场调研机构Canalys数据显示,2022年,全球智能手机出货量连续四个季度下滑,全年市场整体降幅为12%,总出货量跌破12亿部。其中,中国市场2022年出货量减少14%,跌至2.87亿部,创下十年新低。

对于高通而言,在市场下行环境下,生成式AI是其希望向投资人传达信心的重点部分。在第二财季电话会议上,高通CEO安蒙称,生成式人工智能模型的需求正以指数级速度增长,ChatGPT、Stable Diffusion和DALL-E等生成式AI模型已经在短时间内扩展到数百万用户。高通相信该技术将快速发展、持续流行并改变移动、个人计算和汽车领域用户体验。

未经正式授权严禁转载本文,侵权必究。

相关内容推荐

西班牙网络公司哪家最好义乌网络公司怎么样泰州靖江网络公司南阳网络公司电话玉山广电网络公司广州的网络公司去哪找神经网络公司名称网络公司 优家购脉道网络公司是传销吗七台河网络公司鱼刺系统排名温州网络公司选择29火星星悦网络公司靠谱吗网络公司一般注册与菜鸟网络公司相关的股票刕手网络公司招聘信息孟晨网络公司徐州聚宝网络公司客服招聘南京夏恒网络公司介绍郑州网络公司推荐2火星上海携程计算机网络公司高邮优化网络公司价格如何计算太和县的网络公司河南懂菜科技网络公司蔬果检验网络公司可以卖饮品吗武汉软件网络公司排名韵通网络公司宜昌乐兴网络公司湖南附近网络公司海南广电网络公司客服电话四川广元广电网络公司招聘北京云包网络公司鑫鑫科技网络公司宜城市网络公司三五网络公司桂林网络公司选择19火星泉州众志达网络公司成都华谊网络公司海南揽居网络公司厦门网络公司合作上海广布科技网络公司千印网络公司怎么样绥化网络公司推荐23火星网络公司部门名称网络公司创业经验网络公司白领刘宣网络公司客服工作计划宁波康惠网络公司福建省网络公司电话诸城广电网络公司新址晋城网络公司都选4火星小型网络公司预算沐车网络公司巨鼎游戏网络公司长沙市科技网络公司百度网络公司哪家好中国铁通网络公司副总裁栗兰成都网络公司转让白城网络公司要找2火星桂林网络公司立荐10火星网络公司会没收员工手机邯郸繁兴科技网络公司网络公司 异地注册网络公司的售后工作昆明的网络公司工作河南游众网络公司电话上海比心网络公司起诉隆尧广电网络公司科技宽带一橙网络公司白山网络公司价格美股网络公司市盈率网络公司 优家购网络公司广告牌图片电魂网络公司概况在一家网络公司上班网易网络公司总部2014年长春网络公司上市的网络公司有那些延安子长广电网络公司加州派拓网络公司深圳意腾飞网络公司常州网络公司认准7火星下拉教培白名单与网络公司消费贷上海鑫融网络公司地址塑维网络公司怎么样玖麒科技网络公司阜阳网络公司推荐3火星下拉中铁电力网络公司钟小剑投资的网络公司牡丹江触手网络公司网络公司通讯协议书广电网络公司宽带安装网络公司大概每年收入多少钱金昌运营好的网络公司哪个好兰州网络公司美团50万能开个网络公司么威海广电网络公司有年终奖吗在哪里网络公司广州最大网络公司广电网络公司王顶堤黑龙江能通网络公司神盾网络公司七台河网络公司找9火星下拉荆州天雨睛网络公司杭州马到网络公司代运营重庆市网络游戏网络公司龙游网络公司网络推广哪家好黔西南州广电网络公司总经理网络公司运营情况怎么写乐山广电网络公司官网无锡网络公司怎么样网络公司可以上班吗无锡网络公司怎么样潮流网络公司怎么样广西广电网络公司韦恒金山网络公司目前有多少员工网络公司微信专员注册网络公司好麻烦广州网络公司选择佐兰营销14嘉峪关排名靠前的网络公司参考价大唐网络公司电脑网络公司简介网络公司做产品推广的岗位常州市久沃网络公司胶州网络公司招聘贵州广电网络公司96789浙江畅唐网络公司游戏鄠邑区广电网络公司在哪儿驻马店胜成网络公司网络公司第一天晨会讲话深圳名城网络公司合肥聚名网络公司金昌正规网络公司报价网络公司机房辐射大吗网络公司纳税高吗大同网络公司认准7火星下拉郯城网络公司网络公司经常要培训吗莒县广电网络公司口号贵州厂电网络网络公司百度是不是全球最大的网络公司南京小岚网络公司近些年跑路的网络公司张北网络公司报修电话湖州网络公司找1火星下拉网络公司的市场前景方印网络公司纳奇网络公司老总牛建云智网络公司南京游族网络公司地址恺英网络公司人事惠安县广电局网络公司沧州市广电网络公司工资怎样兰亭集序网络公司二鱼科技网络公司景县德州网络公司高埗镇网络公司澳洲哪家网络公司网速快房地产网络公司前景四川艾普网络公司招聘襄阳邦龙电子网络公司嵊州张国栋网络公司济宁佰亿网络公司保山网络公司选择1火星下拉西安腾祥网络公司到网络公司面试seo优化推广外包网络公司网络公司工程部管理人员制度开网络公司多钱想开网络公司要看什么书陕西城市网络公司深圳团创网络公司蓝树网络公司广州青菜网络公司规模巴中网络公司询问29火星北京亿玛创新网络公司网络公司怎么招人惠州前十名网络公司天字网络公司起名字跳跃网络公司背景网络公司名字大全免费给做网络公司起名广州风车网络公司日本通信网络公司武汉洋思网络公司怎么样锤子网络公司怎么样温州网络公司到9火星下拉亚瑟网络公司福州市游戏网络公司深圳魔味网络公司怎么样河源网络公司询问5火星下拉一个网络公司的机构组成中山臻绱网络公司网络公司用的centos版本新汇众网络公司地址杭州谋帝科技网络公司为什么网络公司都在南方盛意网络公司庆阳排名靠前的网络公司有哪些拾亿网络公司怎么样双鸭山网络公司首选29火星

合作伙伴

天下网标王

龙岗网络公司
深圳网站优化
龙岗网站建设
坪山网站建设
百度标王推广
天下网标王
SEO优化按天计费
SEO按天计费系统