什么是GPU容器共享技术cGPU

网站编辑2022-01-20 11:50:39424

  什么是GPU容器共享技术cGPU?GPU容器共享技术cGPU是阿里云首创的基于内核虚拟GPU隔离的容器共享技术。即多个容器共享一张GPU卡,从而实现业务的安全隔离,提高GPU硬件资源的利用率并降低使用成本。

  
  为什么选择cGPU?
  
  更加开放
  
  适配开源标准的Kubernetes和NVIDIA Docker方案。
  
  更加简单
  
  无需重编译AI应用,运行时无需替换CUDA库,升级CUDA、cuDNN的版本后无需重新配置。
  
  更加稳定
  
  相较于CUDA层API以及一些cuDNN非开放的API的多变和不稳定性,针对NVIDIA设备的底层操作更加稳定和收敛。
  
  完整隔离
  
  支持GPU的显存和算力隔离。
  
  无实例限制
  
  能够适用于GPU裸金属实例,虚拟化实例,vGPU实例等各种GPU实例。
  

  cGPU架构图


  
  为了提高GPU硬件资源的利用率,需要在单张显卡上运行多个容器,并在多个容器间隔离GPU应用。
  
  cGPU通过自研的内核驱动为容器提供虚拟的GPU设备,在保证性能的前提下隔离显存和算力,为充分利用GPU硬件资源进行训练和推理提供有效保障。您可以通过命令方便地配置容器内的虚拟GPU设备。
  
  以上就是关于“GPU容器共享技术cGPU”的相关介绍,如果亲们还有什么不清楚的问题,可以直接咨询我们的在线技术客服!典名科技期待与您合作!

最新推荐

右侧广告图1
  • 轻量容器服务 2核2G

    轻量容器服务提供了一种在云中运行容器化应用程序的简单方法

    ¥85.00/年

    典名专属折扣

  • 轻量容器服务 2核1G

    轻量容器服务提供了一种在云中运行容器化应用程序的简单方法

    ¥59.00/年

    典名专属折扣

  • P100GPU计算型实例gn5

    依托全球28个地域的分布式算力资源和弹性服务能力,EGS可支撑企业快速构建跨区域计算网络,同时通过阿里云各类配套功能如容器服务、ESSD云盘、NAS服务,云安全等云产品生态的无缝集成,结合cGPU等加速方案和服务软件,有效降低了GPU集群使用门槛,帮助开发者简化训练与推理流程,显著提升计算资源利用率,助力企业降低IT成本,专注核心业务创新。

    ¥1847.50/月

    折扣优惠,官网折上折

右侧广告图2