“硅仙人”吉姆・凯勒吐槽英伟达 CUDA:是树沼,而非护城河

2024-02-20 13:26IT之家 - 故渊

IT之家 2 月 20 日消息,有“硅仙人”称号的吉姆・凯勒近日发布推文,表示“CUDA 是树沼,而非护城河,X86 也是树沼”。

凯勒在后续推文中表示:

CUDA 毫无美感,只是粗暴地堆砌而成。

基本上没有人会写 CUDA,即便是写了相关代码,其执行速度也不快。

这也是为何 Triton、Tensor RT、Neon、Mojo 孕育而出的原因。

IT之家注:CUDA 工具包是 NVIDIA 为开发人员提供的一个软件套件,它让开发人员使用 NVIDIA 的图形处理单元(GPU)来运行通用计算任务,特别是那些需要大量并行处理能力的任务。

凯勒认为 CUDA 像 X86 一样,英伟达为了确保软件和硬件的向后兼容性,逐步增加功能的过程中拖慢了性能,增加了程序开发的难度。与此同时,许多开源软件开发框架可以比 CUDA 更高效地使用。

就连 Nvidia 本身也有不完全依赖 CUDA 的工具。

例如,Triton Inference Server 是 Nvidia 的一款开源工具,可简化人工智能模型的大规模部署,支持 TensorFlow、PyTorch 和 ONNX 等框架。

Triton 还提供模型版本化、多模型服务和并发模型执行等功能,以优化 GPU 和 CPU 资源的利用率。

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家所有文章均包含本声明。

文章价值:
人打分
有价值还可以无价值
置顶评论
    热门评论
      文章发布时间太久,仅显示热门评论
      全部评论
      请登录后查看评论
        取消发送
        软媒旗下人气应用

        如点击保存海报无效,请长按图片进行保存分享