NVIDIA 发布用于 Apache Spark 的 cuDF skills
2026年10月14日,NVIDIA 发布用于 Apache Spark 的 cuDF skills。据 NVIDIA 开发者博客介绍,该方案用 AI 智能体重写 Apache Spark UDF,通过 Spark SQL 表达式、RapidsUDF 接口或 JNI 调用自定义 CUDA kernel 三种方式消除 CPU 回退,实现 20 倍以上加速。cuDF skills for Apache Spark 将重写拆成测试、转换、基准测试和优化四个带验证反馈的环节。文中提到,一家大型消费科技公司用该流程改造了 30 多个生产 UDF,其中一个 UDF 影响 3000 多个作业,改写后提速 22 倍。目前尚无后续发展事实。
匹配字段标题