CUDA真是NVIDIA绝对牢不可破的生态吗?_湖北省黄冈市蕲春县新非婴儿服装股份公司

  • 官方通报贵州厦蓉高速三都往榕江大桥垮塌,因持续强降雨诱发山体滑坡导致,目前情况如何?
  • 黄晓明上戏考博落榜,本人回应「明年再战」,怎样看明星对高学历的追求?上戏博士有多难考?
  • CUDA真是NVIDIA绝对牢不可破的生态吗?_湖北省黄冈市蕲春县新非婴儿服装股份公司

    诚信为本,市场在变,诚信永远不变...
    热门分类: 第一系列 | 第二系列 | ......>>更多
    公司动态 当前位置: 首页 > 新闻动态 > 公司动态

    CUDA真是NVIDIA绝对牢不可破的生态吗?

    添加时间:2025-06-24 19:55:15

    有人说,我做一款AI芯片,只要原生支持PyTorch就好了呀,用户直接用PyTorch跑模型,根本接触不到CUDA呀。

    没错,一般的用户只要在PyTorch层面做应用,但是总是有新的模型架构出来,这些架构都需要做特定的性能优化才能在一个芯片上得到较高的性能,这时候就涉及到算子开发了。

    比如说一开始LLM在GPU上的性能不好,后来社区针对Nvidia GPU做了flash attention等的优化才把LLM的性能提升到了比较可观的程度。

    CUDA已经被各种开源AI框…。

    CUDA真是NVIDIA绝对牢不可破的生态吗?