如今,几乎每天都有千百万辆汽车行驶在路上
在车联网时代,这些日产数十 TB 的海量数据
对于车企来说可谓是个极大的挑战
可是,为何丰田却能一枝独秀呢?
原来,背后竟是 TA 在默默撑腰!
近期,丰田互联(北京)科技开发有限公司(丰田互联)基于 Amazon Web Services (AWS) 开发的数据湖——Toyota Big Data Center China已正式上线!丰田互联的目标是为丰田汽车在中国的生产厂、经销商和用户提供完整的车联网解决方案,利用移动终端与车载终端的互联互通技术,对车辆信息进行收集、分析、处理和应用,从而为客户提供更好的服务,增强客户安全和车辆拥有体验,让汽车使用更加愉快并充满乐趣!
Toyota Big Data Center China 可以存储、处理上千万辆丰田汽车每天在行驶过程中产生的数十 TB 数据,推动丰田汽车的车联网解决方案在中国市场大规模落地。通过对海量数据的存储、分析,Toyota Big Data Center China 可以为用户提供各种创新的服务,例如,帮助驾驶员更安全地使用汽车,依据驾驶行为数据帮助车主获得汽车保险折扣等。在 AWS 技术专家团队的帮助下,丰田互联在 5 个月内完成了这一项目的开发及部署,并借助 AWS 强大的云服务和功能大大降低了云资源使用成本。
丰田互联(北京)科技开发有限公司
丰田互联(北京)科技开发有限公司(以下简称“丰田互联”)是 TOYOTA Connected Corporation 的全资子公司,也是 TOYOTA 中国 Connected 战略的重要支柱,负责丰田汽车在中国市场车联网系统的开发和营运,在北京和广州设有办事处。
面临的挑战
今天,汽车工业正处于每百年一次巨大变化的时期。随着物联网的普及,计算机、自动化、电气化等新领域的技术创新不断发展,汽车概念本身也正在发生巨大变化。过去,我们通过“拥有”一辆汽车来享受“行驶”的乐趣和价值;现在,我们通过“使用”汽车来获得更多安全、可靠、舒适和便捷的服务,“汽车”正在从单纯的交通工具演变成移动设备,而使这一切从梦想变为现实的基础就是“车联网”技术。
从 2019 年开始,丰田汽车希望在中国市场全面推广车联网服务,为所有新上市的汽车标配了车载数据通信模块(DCM),成功实现在用户同意的情况下将车辆数据全部传输到后台的车联网系统。车联网服务的全面落地,首当其冲面临的就是海量数据的存储、处理和分析问题。丰田汽车 2019 年在中国全年销量超过 162 万辆,中国市场保有量超过 1115 万辆。行驶的车辆每天不断地生成新数据,随着联网汽车数量不断增长,这些汽车每天将产生数十亿条消息,生成 TB 级的数据。为了给用户提供更好的车联网服务,丰田互联希望通过搭建数据湖,构建一个能够实时存储、处理、分析数据的管理平台,为稳定、可靠、高效的车联网服务系统打好基础。
为什么选择 AWS?
丰田互联选择 AWS 主要基于技术和服务两方面的因素。
在技术上,Toyota Big Data Center China 的架构设计遵循丰田互联母公司数据湖系统的设计原则:采用无服务器架构、能快速进入市场、低延时、实时接收和存储 PB 级的数据(包括关系和非关系型数据)、具有分析和预测功能。
作为车联网系统的核心,Toyota Big Data Center China 的关键功能包括数据注入、解码、转换和分析。在数据注入方面,首先要解决的问题是如何快速、低成本地摄取和存储各种结构和非结构化的数据。Amazon Simple Storage Service(Amazon S3)恰好可以完美地满足这一需求,因为它具有优异的可伸缩性和高可用性,可以存储和检索任意规模的数据,并且提供了 99.999999999% 的持久性。
在 Toyota Big Data Center China 中,来自联网车辆的实时遥测数据被摄取到 Amazon Kinesis Data Streams(Amazon KDS) 中,通过 AWS Lambda 处理以使其具有可读性,而“原始副本”则通过 Amazon Kinesis Data Firehose 保存到 Amazon S3中。在解码流程中,进入 Amazon Kinesis Data Stream 的数据由 AWS Lambda 函数完成对输入消息的逐位解码,并将已解码的数据压缩后存入“已解码的 Amazon S3 桶”中。之后利用 Amazon EMR 的大规模并行处理功能,对解码后的消息进行数据转换和加工,再依据应用需求对数据进行进一步的分析处理,最终高效地完成从实时数据注入、解码到分析、应用的全流程。
在服务上,丰田汽车的车联网项目是全球性的,中国数据湖系统的架构和平台也需与全球统一。丰田汽车和 AWS 正在开展全球协作,采用 AWS 庞大的云服务组合扩展丰田的行驶服务平台,帮助丰田工程师开发、部署和管理下一代数据驱动的行驶服务。AWS 在大数据方面有一套完整的解决方案,可以存储任意规模的结构化和非结构化数据,并对原始数据进行查询、处理、实时分析和机器学习等,帮助企业利用数据做出更好的决策。丰田在 AWS 中国区域可以选用与 AWS 海外区域相同的数据湖解决方案,因此 AWS 成为丰田互联构建数据湖系统的理想选择。
获得的成效
从 2019 年启动项目,仅用了 5 个多月的时间,Toyota Big Data Center China 项目就顺利完成并上线运行,开始为中国市场的丰田汽车用户提供车联网相关服务。图 1 是基于 AWS 的 Toyota Big Data Center China 架构示意图。
图 1-Toyota Big Data Center China基于AWS的架构示意图
选择 AWS 给丰田互联带来的最大好处是成本节省,这主要体现在两个方面:
其一是云资源使用成本的节省。Toyota Big Data Center China 是一个庞大的项目,需要处理海量的数据,利用 AWS 丰富的功能建立起成本优化模型,丰田互联极大地降低了云资源的使用成本。例如,通过制定数据生命周期策略,经过设定的存储周期之后,将数据从 Amazon S3 移动到 Amazon S3 Glacier,从而将数据存储成本降低了 6 倍,更进一步地将数据从 Amazon S3 Glacier 移动到 Amazon S3 Glacier Deep Archive,成本又降低了 4 倍。另一方面,采用 AWS 无服务器架构和 AWS Lambda、Amazon Kinesis、Elastic Load Balancing、Amazon ECS等技术,Toyota Big Data Center China 实现了架构的自动灵活扩展,在每日的出行高峰期可以自动扩展满足系统的性能要求,在空闲时段则缩减规模,降低成本。
其二是系统的运维成本大幅度降低。于 AWS 构建的业务系统实现了高度自动化运维,极大地节省了人力成本。
在业务层面,稳定、可靠、高效的车联网服务系统也有助于丰田汽车为中国用户提供更好的服务。一旦用户选择开通车联网服务,经销商就可以根据车辆的使用数据,主动与客户联系,为客户提供更好的服务。比如,如果通过车联网发现客户的车辆存在小问题,经销商就可以主动提醒客户在驾驶过程中注意,并及时到店维修。
丰田互联副总经理光武小叶子介绍说,“数据已经成为企业的血液,善用数据,车联网将引领未来出行方式的变革。依托 AWS 丰富而强大的大数据分析服务,Toyota Big Data Center China 能够简化开发,快速进入市场,实现实时接收、存储和处理 PB 级的关系及非关系型数据,助力丰田汽车为中国用户提供一流的车联网服务。我们也将借助丰田在全球与 AWS 针对未来出行技术的进一步探索,不断深化与 AWS 在中国的合作,携手加速创新,更好地服务中国用户。”
“AWS 在与全球车联网、自动驾驶等领域的客户的合作中形成了深厚的积累。我们看到,全球的汽车行业客户正在利用云、大数据、人工智能和机器学习、物联网等技术改变其运营模式,并通过数据加速产品开发、优化制造流程和改善客户体验。”AWS 大中华区企业业务拓展部总经理凌琦表示,“利用 AWS 的全球优势,我们在中国也在加大投入,深耕汽车行业,助力客户进行数字化转型和创新。丰田互联借助 AWS 广泛而深入的云服务在车联网领域的创新探索,对整个汽车行业以及众多其它行业,都有着重要的借鉴意义。”
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.