NVIDIA的Project Aether提升Apache Spark效率
realtime news Mar 19, 2025 00:26
NVIDIA推出Project Aether，通过GPU加速简化Apache Spark工作负载，大幅减少企业全球范围的处理时间和成本。
全球企业将从NVIDIA的最新创新Project Aether中受益，该项目承诺将彻底改变公司处理海量数据分析工作负载的方式。据NVIDIA称，通过将NVIDIA的GPU加速与Apache Spark相结合，Project Aether旨在简化数据处理，提供可观的时间和成本节省。
加速数据处理
Apache Spark是数据分析的重要工具，通过NVIDIA的RAPIDS加速器获得进一步增强。这种增强允许公司在无需进行代码修改的情况下更有效地管理庞大的数据集。最近推出的Project Aether进一步自动化了Spark工作负载的GPU加速优化，大大减少了所需的人工努力。
一年工作可在数日内完成
Project Aether自动化了从CPU到GPU驱动计算的过渡，这一过程传统上是劳动密集型的。通过使用AI优化Spark作业配置，公司现在可以在短短数日内完成往往需要一年的工作。这种自动化对于同时管理成千上万个Spark作业的企业至关重要。
案例研究：澳大利亚联邦银行
澳大利亚联邦银行（CBA）是这种技术受益的一个例子。面对其Spark工作负载的显著延迟和成本挑战，CBA转向了NVIDIA的GPU解决方案。该银行实现了640倍的性能提升，将处理时间从几年减少到数天，成本降低了80%以上。
这种效率使得CBA每天能够处理4000万笔交易，提升了他们的客户服务能力和欺诈检测流程。该银行还计划利用这些工具通过更好地了解客户参与来改进其数字服务。
全球采用与生态系统
NVIDIA的RAPIDS加速器通过AWS、Google Cloud和Microsoft Azure等主要云提供商广泛可用，使其能够被全球用户所访问。戴尔科技公司也已将这一解决方案整合到其Data Lakehouse中，从而进一步扩大其影响范围。
希望利用Project Aether的企业可以通过NVIDIA申请访问，该公司提供进行大规模Spark工作负载迁移所需的工具。
Image source: Shutterstock