2024年7月26日，中国国际数字娱乐产业大会(CDEC)旗下ChinaJoy AIGC大会于ChinaJoy期间在上海举行。大会从技术、应用等全生态角度共同探讨了AIGC技术下的内容产业新业态和未来发展趋势，聚焦AIGC如何助力产业升级、如何提升AIGC场景应用、如何促进人机融合等。
高通技术公司副总裁兼产品、合作伙伴和技术市场全球负责人 Mike Roberts 在大会上发表了主题演讲。他指出，终端侧生成式AI已经到来，高通公司作为终端侧AI的领导者，在AI领域有着超过15年的投入，借助强大的硬件和软件支持组合、异构计算优势、以及全球范围内的领先边缘侧布局，高通的产品和技术已支持出货超过25亿台AI赋能终端，赋能广泛的行业领域和生成式AI体验，正在推动实现让智能计算无处不在。
以下为演讲全文：
大家好，很高兴第四次参加ChinaJoy。我很荣幸代表高通，与大家分享我们正在如何助力让智能计算无处不在。作为终端侧AI的领导者，高通在人工智能领域有着超过15年的投入，拥有行业领先硬件和软件解决方案覆盖广泛边缘终端，并且拥有跨NPU、CPU和GPU的卓越异构计算能力、领先的软件优化、以及能效。此外，我们还在全球范围内拥有无与伦比的边缘侧布局和高达数十亿的用户设备数量，覆盖智能手机、PC、汽车、XR、边缘网络设备等等。同时，我们也与微软、谷歌、百川、腾讯、字节跳动等众多生态合作伙伴共同推动AI技术的创新和应用。
生成式AI不仅是不可或缺的个人助手，也在众多领域展现出了巨大的商业价值。预计每年可带来2.6万亿到4.4万亿美元的经济效益，大约相当于2023年上海GDP的5倍。然而，推动生成式AI的规模化发展面临诸多挑战。以成本为例，基于生成式AI的搜索单次推理成本是传统网络搜索的约10倍。目前，我们还处于生成式AI应用的早期阶段，新的应用不断涌现，包括图像和视频创作、文本摘要、对话聊天机器人等。再考虑到未来需要使用AI推理的数十亿用户数，这个总体需求量就会非常惊人。预计2024年至2028年，生成式AI相关的token生成量将增长150 倍，云端的推理需求将超过训练需求。如果还保持当前的AI处理方式，到2030年AI可能会消耗全球3.5%的电力，这足以为上海这样的大城市供电约35年。
那么我们应如何应对这一挑战?为了实现规模化扩展，AI处理的重心正在向边缘侧转移，最终目标是实现混合AI，让云端和边缘侧终端能够协同处理工作负载，并使用高性能连接来实现更加强大、高效、优化的AI。如果将 20% 的生成式 AI 工作负载转移到终端侧，预计到 2028 年将节省 160 亿美元的计算资源成本。
让我们分别看看终端侧和云端的AI处理。终端侧主要支持100亿参数级别的大模型。终端侧AI处理具备众多优势，不仅能够提高性能和效率，还能确保隐私和安全性，同时提供即时性、低时延、高可靠性和个性化的用户体验。另一方面，中心云能够支持运行参数超过千亿级别的超大模型。在中心云上，用户可以轻松地对模型进行开发、部署和训练，实现资源聚合和极致性能。
基于此，面对各个垂直领域对生成式AI用例日益增长的需求，高通推出了面向计算性能的系统级解决方案。提供系统级解决方案的理念植根于高通公司的DNA之中，也是我们作为一家公司应对诸多挑战的关键。这一解决方案包括我们專爲生成式AI全新打造的神經網絡處理器(NPU)，同時，我們還將NPU與CPU、GPU整合到一起。比如，我們已經在PC端推出的高通Oryon CPU，未來還將擴展到手機、汽車等更多終端品類;此外，我們推出了高通Adreno GPU，我們在這款定制化GPU上已經投入了超過十年的研發。
我們針對不同計算需求，策略性地使用適宜的處理器，從而提升系統性能，實現異構計算。異構計算讓我們能夠實現最佳應用性能、能效和電池續航。如今，終端側AI已經廣泛應用于各類消費終端和各行各業，包括邊緣網絡設備、汽車、以及制造車輛的工業機器人等。在此，我想重點談談兩種主要的終端類型：智能手機和PC。
我們最新的第三代骁龍8旗艦移動平台已經賦能諸多手機廠商合作夥伴推出了豐富的終端側AI體驗。上個月，我們的合作夥伴微軟以及其他領先PC廠商，推出了20多款搭載骁龍X Elite和骁龍X Plus平台的最新Windows 11 AI+ PC，這些設備已經實現了實時翻譯、實時轉譯、AI照片編輯、文本總結、寫作輔助等豐富的AI功能。
讓我們先從智能手機的角度來談談這些終端側AI用例。我們與合作夥伴攜手在他們推出的旗艦智能手機上，爲用戶帶來了生成式AI功能，將骁龍的AI能力直接呈現給消費者。三星Galaxy S24系列借助終端側AI，以先進的實時翻譯功能，將手機通話實時翻譯成用戶首選語言，打破語言障礙，促進無縫的跨文化交流。此外，OPPO Find X7 Ultra集成了出色的終端側AI特性，讓用戶能夠將照片中不需要的物體或人物消除，且無需連接互聯網。榮耀Magic6系列的智慧成片功能則能夠利用相冊中的照片和文本提示生成視頻。
接下來，讓我們聊聊PC領域的應用。 在PC方面，我們與djay Pro等衆多公司展開了合作。djay Pro是一款全球領先的混音應用，經過我們雙方的合作優化，現在可以在骁龍X Elite的NPU上運行，讓用戶能夠利用Neural Mix實時分離和操作人聲、樂器、鼓等不同音軌。
現在，讓我們將目光轉向汽車制造商和其他服務提供商，他們可以根據需求提供特性升級和新服務。中國的汽車市場有著全球領先的發展速度。在網聯汽車中使用生成式AI服務，能夠賦能我們的合作夥伴打造全新特性，擴展他們的産品，並爲駕駛員和乘客提供更佳體驗。網聯汽車能夠支持各種軟件定義特性和服務，也將重新定義出行體驗。
高通還在引領終端側AI在物聯網領域的應用。一個具體的用例是工廠車間，工廠車間中數據處理的低時延至關重要，因爲即使是最微小的錯誤也需要即刻關注。通過多模態AI助手，我們可以使用視覺、文本和語音處理爲工廠車間的工人提供實時幫助。
我們還提供了高通AI軟件棧這一全面的統一解決方案，以支持廣泛的垂直領域和合作夥伴。高通AI軟件棧旨在幫助開發人員優化和部署AI模型，它集成了我們自主的高通神經網絡處理SDK、以及模型壓縮和量化工具——高通AI模型增效工具包(AIMET)。
綜上所述，憑借強大的硬件和軟件支持組合，高通的産品和技術已支持超过25亿台AI赋能终端的出货。随着我们不断缩小云端和终端侧AI之间的差距，未来这一数字将继续快速增长。最后，非常欢迎大家来到ChinaJoy骁龙主题馆E4参观体验。谢谢大家!