您好!欢迎访问江南官方体育app下载网站(JN).注册登录
产品搜索:
江南官方体育app下载网站(JN).注册登录
当前位置:首页 > 产品中心 > 32位ARM核Cortex系列
+     低压差线性稳压器
+     白光LED驱动
+     MOSFET
+     32位ARM核Cortex系列
+     CMOS逻辑电路
Arm Kleidi助力AI开发者加速创新-【32位ARM核Cortex系列】
发布时间:2024-08-12 03:07:30 来源:江南官方体育APP下载 作者:江南app官方网站

  在持续快速发展的人工智能 (AI) 时代,我们坚定地支持全球数百万开发者,确保他们能够获得所需的性能、工具和软件库,从而顺利地打造下一波令人惊叹的 AI 体验。

  为此,我们推出了,这是一项广泛的软件和软件社区参与计划,旨在加速 AI 发展。其中的第一个举措是推出面向热门 AI 框架的软件库。这使开发者可以直接取得ArmCPU 的出色 AI 功能,而如今全球从云端到边缘侧的大多数 AI 推理工作负载都在这些 Arm CPU 上运行。开发者可以借助 Arm 超过 20 年的架构创新,从Armv7架构首次引入高级单指令多数据 (SIMD) 扩展以支持机器学习 (ML) 工作负载,到如今的 Armv9架构在 Arm CPU 上囊括了加速和保护高级生成式 AI 工作负载的功能,这些创新持续推动 AI 能力和性能的提升。

  Kleidi软件库包含面向 AI 工作负载的 KleidiAI 和面向运行于 Arm CPU 上出色的计算机视觉工作负载的 KleidiCV。该软件库可以被直接嵌入到热门的 AI 框架中,开发者无需进行任何操作。如此一来,开发者可以轻松地启用 Arm CPU 的 AI 功能,从而快速构建 AI 应用,并在尽可能广泛的设备上实现最出色性能。

  为了应对设备类型、神经网络和推理引擎的爆发式增长,KleidiAI 是我们所给出的解决方案。它由一系列高度优化的 AI 内核组成,可在生成式 AI 等用例中实现高性能。KleidiAI 的优势在于,我们不会给开发者额外增加工作量,而是直接与领先的 AI 框架合作,包括 MediaPipe(通过 XNNPACK)、LLAMA.cpp、PyTorch(通过 ExecuTorch)和 TensorFlow Lite(通过 XNNPACK),以集成 KleidiAI。这不仅加快了开发流程,并释放了 AI 性能,为开发者提供了默认的高性能,使他们能够顺利地打造出色的 AI 体验。KleidiAI 还提供了前瞻性的兼容性,随着我们推出更多的技术,这将确保开发者能够充分利用未来 AI 加速机会。

  与此同时,我们正在与 Unity 合作开发 Sentis,这是一个端侧 AI 推理引擎,可让游戏开发者在所有支持 Unity 游戏引擎的设备上打造创新的 AI 游戏体验。在集成 KleidAI 后,Unity Sentis 成功启用了 int4 量化功能,将模型内存占用率降低了 72.5%,同时在运行 Phi-2 LLM 时性能提升了 660%。

  KleidiCV 能够加速许多摄像头用例中的计算机视觉管线。OpenCV 是全球最大的计算机视觉库,包含 2,500 多种算法,为数十万开发者提供支持。基于 KleidiCV 集成,OpenCV 发现各种图像处理任务的典型性能提升高达 75%。作为我们与 OpenCV的战略软件合作关系的一部分,我们还首次将安卓构建引入 Maven Central,这是一个面向 Java 开发的开源软件组件、软件库的资源库。

  Arm Kleidi 专注于加速 CPU 上的 AI 功能,因为在大多数情况下,所有 AI 工作负载都会从CPU 上开始运行。这使得 CPU 成为开发者在为其 AI 工作负载设定目标时的最便捷路径。因此,我们为开发者提供的这一路径性能越出色,他们就更有可能在开发过程中继续使用 CPU 并将其作为目标。此外,随着 LLM 变得更小更高效,越来越多的 AI 工作负载将适合在 CPU 上处理。最终,开发过程将变得更加顺畅、无缝,进而优化开发者的 AI 工作负载性能。

  Arm Kleidi 的推出再次突显了 Arm 作为端侧生成式 AI 计算平台的领先地位。它使开发者无需学习额外的工具和技能,就能够在非常广泛的硬件中获得 Arm CPU 的出色 AI 性能。随着我们不断创新,持续为新一代 AI 打造前沿架构,开发者未来将能够获得更强大、更先进的 AI 功能。对于最终用户来说,这意味着更快速、更智能、更具交互性、更沉浸式、更安全的出色 AI 体验。

  Arm Kleidi 的推出只是一个开端,我们未来还计划推出更多软件库、计算内核和引擎集成。我们将持续在 Arm 平台上构建 AI 的未来。

江南官方体育app 上一篇:2023年ARM将全面转向64位 下一篇:ARM、谷歌一起动手落后5年后安
江南官方体育app 江南官方体育APP下载 新闻中心 产品中心 江南app官方网站 联系我们 网站地图
产品关键词: 低压差线性稳压器 | DC/DC转换器 | AC/DC转换器 | 电源管理单元 | 霍尔开关
白光LED驱动 | 音频功放 | 电压检测 | Li-ion电池充电管理 | 场效应管 | 模拟开关
Copyright [c]2018 江南官方体育app下载网站(JN).注册登录 版权所有 All Rights Reserved.
备案号:粤ICP备170082978号-17 技术支持:江南官方体育app
地 址:深圳市宝安区航城大道航城创新工业园
    A5栋二楼2016-218
联系人:刘先生 13424245917
    张先生 13751282129
电 话:0755-86249117
传 真:0755-26502485
邮 箱:info@ztevone.com