2023年9⽉18⽇，可信企业AI数据公司Cloudera宣布，成功助力上汽大众搭建车辆数据监控平台，通过其车联网业务满足收集和监控智能车辆数据的监管要求。上汽大众通过部署Cloudera Data Platform（CDP）进行车辆数据监控作业，在核心跑批作业性能上实现了显著提升。同时上汽大众也实现了数据运营效率的优化，节省了高达 67% 的存储空间，提升了车辆监控效率并优化了车辆数据管理，进而推动数据运存的降本增效。

近年来，随着新能源汽车的迅猛增长，车辆监控信息数据量呈现出指数级的增加；同时，国家对于新能源汽车监控信息共享也提出了进一步号召，这就需要车企对相关数据监测有更好的计算能力、存储、传输和应用。

在这样的背景下，上汽大众大数据平台团队于2017年开始基于大数据技术构建全新用于车辆数据监控的平台，以赋能新能源车辆关键业务发展。2022年，上汽大众将数据平台升级，数据存储及作业性能实现了进一步优化。首先，HBase存储空间减少了约73TB，节约了67%的空间使用，这得以大大提升其车辆数据监控的作业效率；其次，总集群文件数减少约8千万，约优化原有文件数的75%。此外，在核心报表及跑批业务上也实现了明显的性能提升，批量作业性能平均提升2.5倍，最高可达6.6倍。这些性能升级，均保证了上汽大众对车辆监测数据链可以实现完整的存储和详细的分析，并且充分满足国家车辆数据管理相关法律法规的要求。除此以外，上汽大众还基于此数据平台搭建了面向车主的上汽大众APP，为广大车主带来更智能的汽车服务，包括远程查看车辆实时状态、智能导航服务等。该平台上线不到两年⽤户已达600万。

上汽大众数据库大数据平台负责人谢聪表示：“上汽大众从2017年起开始引入Cloudera的CDH，并在2018年构建了数据湖。在2022年，仅用了六个月的时间，上汽大众成功将数据平台升级至CDP，成为国内汽车行业中首批升级的企业。我们所搭建的车辆数据监测平台能轻松实现海量数据存储，完善车辆数据监测及分析；而这些数据也将进一步助力我们更好地服务车主，并推动上汽大众车联网业务的持续发展。CDP作为成熟的大数据平台，有效帮助我们解决了日益增长的实时数据存储、管理、计算等难题。未来，我们也将进一步解决存算分离问题以及计算和存储增速不一致问题，以实现基于工作负载的变化达到最佳的性能资源平衡。”

Cloudera大中华区副总裁王刚表示：“在车联网市场大力发展的当下，从国家到行业对智能汽车的数据监测管理都颇为关注。如何存储、管理海量数据并从中获得洞察，是汽车企业发展的重要课题。实践证明，Cloudera为上汽大众构建的数据平台助其实现了数据存储以及批量作业性能的全面优化，为加速构建车联网生态奠定了坚实基础。未来，我们将持续支持上汽大众，为新能源汽车及车联网发展提供数据驱动力。”

展望未来，上汽大众还将继续扩展采用CDP的更多功能，持续利用湖仓一体优势升级监测数据平台，为智能网联汽车服务创新打下坚实的数据基础。

供稿：Cloudera肯睿