NVIDIA RAPIDS cuDF如何赋能AI加速数据科学
随着 AI正帮助各行各业推动创新和提高效率,何赋基于海量的加据科高质量数据来训练各种模型是充分发挥 AI 应用潜力的必经之路,正因如此,速数数据科学家们面临着日益增长的何赋工作负载需求,迫切需求寻找高效趁手的加据科工具以应对挑战。
Pandas 是速数一个灵活而强大的 Python数据分析和处理库,由于其是何赋一款非常易于使用的 API,成为了数据科学家的加据科首选。然而,速数随着数据集大小的何赋增长,Pandas 在纯 CPU系统中的加据科处理速度和效率方面就会遇到困难。
对于面向数据分析工作的速数 DataFrame 软件库,除了 Pandas,何赋目前还有一颗冉冉上升的加据科开源新星——Polars。相比于主要依赖单线程执行的速数 Pandas,Polars 在处理大数据集时的速度通常比其快 5 到 10 倍。
尽管 Pandas 和 Polars 在数据处理领域各有所长,但是处理超大数据集不仅需要极致发挥 CPU 的能力,也需要 GPU发挥作用。在这一背景下,NVIDIA 发布了 RAPIDS cuDF 库,用于加载、连接、聚合、过滤和以其他方式操作数据,充分利用了 GPU 大规模并行处理能力的优势。
RAPIDS 是一套开源的 GPU 加速 Python 程序库,旨在改进数据科学和分析工作流。RAPIDS cuDF 是一个 GPU DataFrame 程序库,其提供了一个类似 Pandas 的 API,用于加载、过滤和操作数据。cuDF 的早期版本只适用于 GPU 开发工作流程。而 NVIDIA 也在持续对这一应用进行更新。
现在 RAPIDS cuDF 可以为 950 万 Pandas 用户带来 GPU 加速,而无需他们更改代码,根据数据集大小为 5 GB 的分析基准测试结果,处理时间缩短到原来的 1/150。而由 RAPIDS cuDF 驱动的全新 GPU 引擎已经可将 NVIDIA GPU 上的 Polars 工作流速度最高提速 13 倍,这意味着仅在一台机器上数据科学家就能实现在数秒内处理数亿行数据。
借助 RAPIDS cuDF,数据科学家现在可以在他们首选的代码库上全速运行数据处理。此外,随着数据集规模不断增长,处理工作占用更多内存,在 NVIDIA RTX 加持的 AI 工作站和 PC 上的运行也实现了显著的速度提升。相比于基于传统 CPU 的解决方案,在工作站中配合使用 cuDF 和 NVIDIA RTX 5880 Ada 架构 GPU,可以将性能提升多达 100 倍。
通过以下博客了解更多关于 RAPIDS cuDF 的最新信息,解锁在 AI 应用与解决方案中加速数据分析探索的创新灵感。
无需更改代码即可将 Pandas 提速近 150 倍
Pandas 是 Python 生态系统中最流行的 DataFrame 程序库,但它的速度会随着 CPU 上数据量的增加而变慢。现在只需一条命令,用户就可以在无需更改代码的情况下,使用 cuDF 将加速计算引入到其 Pandas 工作流中。根据数据集大小为 5 GB 的分析基准测试结果,处理时间缩短到原来的 150 分之一。
点击阅读《无需更改代码,RAPIDS cuDF 将 Pandas 提速近 150 倍》了解更多 cuDF 将统一的 CPU/GPU 体验引入 Pandas 工作流并为其带来顶尖性能的详细信息。
RAPIDS cuDF 驱动的 Polars GPU 引擎
最高提速 13 倍
RAPIDS cuDF 驱动的 Polars GPU 引擎现已发布公测版,为各行各业的数据科学家和工程师提供了一种适用于中等规模数据处理的强大工具。该引擎最高能够将 NVIDIA GPU 上的 Polars 工作流速度提速 13 倍,可以在不产生分布式系统开销的情况下,高效处理数亿行规模的数据集。Polars GPU 引擎直接内置在 Polars API 中,使所有用户都能轻松访问。
点击阅读《RAPIDS cuDF 驱动的 Polars GPU 引擎发布公测版》了解更多将 NVIDIA 加速计算引入 Polars 显著提升加速性能的详细介绍。
使用 RAPIDS cuDF 加速预处理工作流
突破数据科学的瓶颈
随着 AI 和数据科学的不断发展,快速处理和分析大量数据集的能力将成为各行业实现突破的关键差异化因素。无论是开发复杂的机器学习模型、执行复杂的统计分析还是探索生成式 AI,RAPIDS cuDF 都可为新一代数据处理奠定基础。
点击阅读《解密 AI 如何加速数据科学工作流》了解更多相关信息,预见 RTX AI 将如何为未来的工程师创造无限可能。
GTC 2025 将于2025 年 3 月 17 至 21 日在美国加州圣何塞及线上同步举行。
(责任编辑:百科)
-
近日,基于 飞腾腾珑E2000 CPU打造的自主可控DCS(分散控制系统)等主辅机系统,在华电江苏望亭电厂顺利完成部署投运。该型自主可控DCS是国内首批在CPU硬件底层实现内置TCM的电力工控系统,代
...[详细]
-
一、空调的供电应有专用线,在专用线路中应设有断路器或空气开关。供电导线、保险丝都应符合有关规定,不能随意更改。 二、为防止绝缘破损造成漏电危险,如有条件,可设置漏电保护器,其动作电流为15-30毫安,
...[详细]
-
由于部分消费者黄金周旅游返程后消费需求的释放以及十月份婚庆、家装消费的升温,家电市场销售也显得动力十足。记者日前从国美、苏宁等家电连锁卖场了解到,推动这场热销余温的主角,是年龄结构集中在70年代末、8
...[详细]
-
总造价超过2000万元、誉为“奥运中央空调项目第一大单”的北京奥运媒体村一期工程日前正式签约格力家用中央空调。明年8月,来自全球各地的新闻媒体记者将在格力家用中央空调营造的优质生活环境中度过激动人心的
...[详细]
-
DFT离散傅里叶变换)在信号处理领域具有广泛的应用,但在使用过程中也常会遇到一些误区。以下是对DFT常见误区的总结以及相应的解决方案:常见误区混叠现象: 误区描述:在采样过程中,如果采样频率不足,可能
...[详细]
-
“健康”与“节能”一直是近几年空调市场的两大主题词。08空调冷冻年度伊始,业内企业围绕健康概念相继出招。不过,专家指出,究竟什么样的空调才能称之为健康空调目前国家还没有统一标准。业内企业应该摒弃过于“
...[详细]
-
新家在市区同人花园的陈先生,最近花四万元买了一套家用中央空调。据一百家电卖场销售主管戴志珍介绍,9月份以来,他们卖场家用中央空调成了空调销售的主力军。由于美观和节省空间,近年来家用中央空调在温州市场升
...[详细]
-
海信空调的“变频空调,舒适有礼”活动将在全国同步展开,“十一”期间,凡购买海信空调即有礼品赠送,购买海信鼎系列直流变频空调更有价值400元的大礼相赠。据了解,以鼎系列直流变频为代表的海信空调产品,在刚
...[详细]
-
滁州网讯全媒体记者刘 晨 通讯员王 松)今年以来,市公管局聚焦市场主体的急难愁盼问题,通过“线上+线下”送政策、“台账+制度”清资金、“抽查
...[详细]
-
虽已进入秋季,但“金九银十”的空调市场依然是消费者关注的热点。十一黄金周期间,因装修旺季的到来,尤其是因“舒适风”新品批量上市及全线产品自清洁化的刺激,海尔空调销量再创新高。自清洁空调上市1年多已成
...[详细]

奥拓电子亮相2024世界显示产业创新发展大会
空调行业2008冷冻年开盘呈现四大特点—万维家电网
实录:专家谈空调产品质量与售后服务问题—万维家电网
200国蒙特利尔签定保护臭氧新协议—万维家电网
缓存对大数据处理的影响分析
