没想到吧,让你一秒变纸片人的爆火AI特效,背后还有这么多知识点( 二 )


但这又引发了新的问题——在云端计算 , 就会受到网络环境的影响 , 导致额外的时延和其他变化 , 也没有办法满足离线需要 。
所以第三种思路 , 就是直接从SoC硬件厂商这一侧解决问题 。
以最常见的高通骁龙移动平台为例 , 其搭载的高通AI引擎 , 就在硬件这一侧 , 实现了AI计算的加速 。
高通AI引擎有啥不一样?高通AI引擎 , 其实就是内置于骁龙移动平台的一套完整软硬件AI解决方案 。
在硬件方面 , 高通AI引擎采用多核异构计算方案 , 包含:

  • Hexagon向量处理器
  • Adreno GPU
  • Kryo CPU
因此 , 通过智能调度CPU、GPU和向量处理器来进行AI运算 , 高通AI引擎能充分发挥出不同架构处理器的优点 , 在实现高算力的同时 , 最大限度保证能效 。
而在软件方面 , 高通AI引擎的软件工具包括:骁龙神经处理SDK、Android NN和Hexagon NN 。利用这些软件工具 , 像视频平台这样的算法开发方 , 就能够快速接入高通AI引擎 , 充分探索AI算法的性能边界 。
事实上 , 快手和高通早在骁龙765移动平台推出时就展开了合作 。针对App在移动平台的性能、功耗、扩展性和兼容性等方面的需求 , 高通神经处理SDK能够以软件的方式提供支持 , 并释放CPU工作负载 , 通过Hexagon处理器来实现AI加速 。并且 , 双方还在模型量化压缩方面开展了合作 , 在提升模型性能和能效的同时 , 确保AI处理的精确度 。
由此带来的效果可以直接用一组数据体现:手绘滤镜帧率(FPS)提升56% , 功耗降低32%
而在今年 , 随着新一代骁龙778G移动平台的推出 , 双方的合作还在进一步加深 。核心围绕的 , 就是第6代高通AI引擎
骁龙778G支持的第6代高通AI引擎包含高通Hexagon 770处理器 , 算力可达12TOPS , 性能较前代平台实现翻番 。为便于大家参照:苹果A14为11TOPS 。
此外 , 骁龙778G采用的全新Qualcomm Spectra ISP , 支持每秒处理20亿像素 , 能够为高通AI引擎运行特效算法提供额外加持 。
快手Y-tech AI工程组负责人边红昌针对这项合作 , 还表示:
与高通技术公司的出色合作帮助快手突破了AI算法的性能边界 。我们很高兴能够与高通继续协作 , 充分发挥骁龙高端芯片的强大异构计算能力 。通过增强神经网络性能并提升输出质量 , 我们将能为用户提供更具吸引力的应用和更高价值 。”
“AI大厂”高通?说起高通 , 或许你的印象还停留在“一家手机芯片厂” , 长于游戏和图形 。
但从手绘滤镜这个案例中 , 就不难看出 , 其实高通早已是一家AI大厂 , 还是App开发商们乐于携手合作的那种 。
事实上 , 早在AI方兴未艾之时 , 高通就已经将AI视为技术发展的重点 。
在2007年 , 高通旗下的Qualcomm Research就启动了首个人工智能项目 , 并于2018年正式成立Qualcomm AI Research 。
2015年 , 搭载第一代高通AI引擎的骁龙820发布 , 正式引入高通Hexagon向量扩展内核 , 以支持更强大的AI处理能力 。
在历经6年的逐年迭代之后 , 今年同样搭载第6代高通AI引擎的骁龙888 Plus , 已经实现了高达


以上关于本文的内容,仅作参考!温馨提示:如遇健康、疾病相关的问题,请您及时就医或请专业人士给予相关指导!

「四川龙网」www.sichuanlong.com小编还为您精选了以下内容,希望对您有所帮助: