其他行业 · AI应用
利用AI加速欺诈检测
美国国税局(IRS)面临在超过3TB的海量数据中高效检测欺诈的挑战。为此,他们采用了先进的AI工具和高性能GPU基础设施,具体使用基于 NVIDIA GPU 的 Cloudera,并利用 NVIDIA RAPIDS 优化代码。这种战略方法带来了显著的速度提升,将处理时间从数周缩短至数小时,并实现了实时欺诈分析。结果,IRS 实现了工作负载效率提升5倍,复杂数据处理加速20倍,基础设施成本降低50%,最终增强了其法律和合规能力。
初期工作负载加速
5倍
来源披露
优化后处理速度提升
20倍
来源披露
工程与数据科学工作流改进
10倍
来源披露
01
业务背景
美国国税局(IRS)面临在超过3TB的海量数据中高效检测欺诈的挑战。为此,他们采用了先进的AI工具和高性能GPU基础设施,具体使用基于 NVIDIA GPU 的 Cloudera,并利用 NVIDIA RAPIDS 优化代码。这种战略方法带来了显著的速度提升,将处理时间从数周缩短至数小时,并实现了实时欺诈分析。结果,IRS 实现了工作负载效率提升5倍,复杂数据处理加速20倍,基础设施成本降低50%,最终增强了其法律和合规能力。
02
遇到的问题
美国国税局需分析数十年积累的超3TB数据以检测欺诈,但现有CPU计算能力不足,整夜运行失败,且手工拼接无法实现实时欺诈检测。
03
AI 解决方案
采用基于NVIDIA GPU的Cloudera平台,利用NVIDIA RAPIDS重写CPU上的复杂任务代码并插入Spark接口,实现分布式GPU加速;同时使用Apache Spark和图分析构建大规模关系图,通过AI和机器学习算法分析图,快速识别欺诈模式。
- 1部署Cloudera on NVIDIA GPUs,无需代码修改即实现5倍加速。
- 2NVIDIA数据科学家审查IRS代码,发现部分复杂数据结构任务仍在CPU运行。
- 3编写GPU加速代码并集成到Spark的RAPIDS接口。
- 4在分布式Spark集群上运行新代码,实现20倍速度提升。
- 5使用Spark和图分析构建包含节点和边的大图,应用机器学习算法检测欺诈。
04
实施结果
初期工作负载加速:5倍(5倍)
优化后处理速度提升:20倍(20倍)
工程与数据科学工作流改进:10倍(10倍)
基础设施成本降低:50%(降低50%)
数据处理时间缩短:从数周/数月缩短至数小时/分钟(缩短至数小时/分钟)
05
风险与边界
未披露
“The Cloudera and NVIDIA integration will empower us to use data-driven insights to power mission-critical use cases.”
Joe Asaldi · Technical Branch Chief of Research and Applied Analytics and Statistics, IRS
信息来源
1 个来源页面内容为结构化改写;关键结论应可追溯到以下材料。