快速计算丨在混合云上使用Alluxio可为您节省的基础设施投入成本 →

010-82449668

EN 中文

吉利汽车 x Alluxio 应用案例

关于吉利汽车

吉利汽车主营乘用车及核心零部件的研发、生产和销售。公司主要拥有三类业务,即乘用车、汽车零部件的研发、生产和销售,以及知识产权许可。公司乘用车业务形成了三个子品牌系列:吉利、几何及领克(合营公司)品牌。公司汽车零部件业务包括发动机、变速箱及售后零部件。其中,售后零部件包括常用件、通用件和保养件。截至2020年6月30日,公司已获得包括国家技术发明奖二等奖、中国汽车工业科学技术进步奖一等奖在内的各类科技奖励36项,公司已承担9项国家级及省部级研发项目,包括4项国家科技重大专项,公司主要业务为乘用车及核心零部件,公司已掌握了一系列具有自主知识产权的核心技术,大部分核心技术均为国内领先。

 

遇到的挑战

吉利利用公有云(包括华为云、阿里云和腾讯云)和私有云(包括百度云、阿里云和华为云)。部署在公共云和私有云中的集群为不同的业务分布托管不同的工作负载。业务数据定期从关系数据库导入到HDFS/OSS进行进一步处理和分析。不同业务集群(HDFS和OSS)之间的数据通信和同步面临以下挑战:
  • Kerberos+Ranger的跨集群信任配置复杂繁琐,促使吉利甚至为了业务分析的方便而禁用了安全功能;
  • 不同集群之间的数据通信和同步需要大量的数据操作(脚本开发、维护、故障排除);
  • 将数据从本地数据中心迁移到云端,涉及到大量复杂的数据迁移任务的管理和操作。

 

Alluxio的解决方案和价值

在了解了吉利的现有架构和遇到的困难之后,Alluxio给出了以下方案:

 

Alluxio的以上解决方案体现出了很大的价值:
  • 无缝实现接口转换:hdfs cli通过alluxio scheam访问oss,可以正执行读、写、mkdir、cp、mv等hdfs操作,以实现现有hdfs和新的oss之间的数据流转,同时不改变业务方使用hdfs cli的用户习惯;
  • 与现有安全机制能力集成,简化安全配置,实现统一的安全管控;
  • 统一命名能力,支持计算引擎跨不同集群/存储系统的统一数据访问;
  • 智能缓存加速能力,增强Spark等计算引擎的查询性能。