亚马逊云科技助力纳斯达克通过 Amazon S3 为数据管理赋能

如今,亚马逊云科技已助力150万客户成为数据驱动型企业。以供应链的数字化升级为例,顺丰利用亚马逊云科技可大规模扩展的对象存储服务 Amazon S3 构建数据湖,将园区内大量的前端感知设备。
硬件设备 亚马逊 AWS
2023-04-28 07:16:56  |   作者:admin  |   来源:转载 亚马逊云科技

亚马逊云科技助力纳斯达克通过 Amazon S3 为数据管理赋能

如今,亚马逊云科技已助力150万客户成为数据驱动型企业。以供应链的数字化升级为例,顺丰利用亚马逊云科技可大规模扩展的对象存储服务 Amazon S3 构建数据湖,将园区内大量的前端感知设备。
硬件设备 亚马逊 AWS
2023-04-28 07:16:56
作者:admin
来源:转载 亚马逊云科技

如今,亚马逊云科技已助力150万客户成为数据驱动型企业。

以供应链的数字化升级为例,顺丰利用亚马逊云科技可大规模扩展的对象存储服务 Amazon S3 构建数据湖,将园区内大量的前端感知设备,包括摄像头、物联网 IoT 设备、地磁、多模达等收集的信息汇总到数据湖中。依托 Amazon S3 云对象存储近乎无限的存储能力,为数据驱动运营提供坚实的数据基础。

20230428-3.png

通过使用亚马逊云科技计算、存储、数据分析、容器、机器学习和安全等服务,顺丰供应链改进了园区运营流程,提升了运营效率,园区车辆日吞吐量提升40%-60%,员工作业效率提升30%,调度员和安检员工作量减少50%。

亚马逊云科技的另一个客户纳斯达克也通过 Amazon S3 为数据管理赋能。

由于自动化交易平台涌入市场,交易速度和交易量持续增长,2014年,纳斯达克为了扩大规模、提高性能并降低运营成本,从旧式本地部署数据仓库迁移到由 Amazon Redshift 集群赋能的数据仓库。随着时间推移,越来越多的交易导致数据大量增加,同时,纳斯达克开始规划开发新架构以持续实现生态系统期望的性能标准和卓越运营。

2018年,纳斯达克选择在 Amazon S3 上构建新的数据湖,这使该公司能够将计算和存储分开,并独立扩展每项功能。纳斯达克通过集成亚马逊云科技 IAM 策略、Amazon S3,还可在多个亚马逊云科技账户间提供全面的访问控制功能。此外,纳斯达克使用 Amazon S3 来存储关键的金融数据,并将其移至 Amazon S3 Glacier,从而能够以较低的成本进行归档。

2019年1月,纳斯达克参加了亚马逊云科技的 Data Lab,在为期四天的实验中,纳斯达克使用 Amazon Redshift 作为计算层,重新设计了其提供分析的方式。因此,纳斯达克开始使用 Amazon Redshift Spectrum,这是一项赋能智能湖仓架构的功能,可以直接查询数据仓库和 Amazon S3 数据湖中的数据。

如此一来,洞察生成时间缩至最短,赋能斯达克经济研究团队可以进行数据分析,并对数据运行复杂的查询。起初是以性能为重点的解决方案,现在变成了团队间共享的多用途数据湖。借助基于 Amazon S3 和 Amazon Redshift 的新型智能湖仓架构,纳斯达克每天能够处理的记录数量轻松地从300亿条跃升至700亿条,并且较之前提前5小时达到90%的数据加载完成率。此外,通过优化其数据仓库,纳斯达克运行 Amazon Redshift 查询的速度加快了32%

鉴于良好的系统体验,纳斯达克于2022年已成功将其六大美国期权交易市场之一纳斯达克 MRX 的核心交易系统迁移至亚马逊云科技。此次成功迁移标志着纳斯达克为全球资本市场构建下一代技术基础设施之旅中一个重要的里程碑。

无论是在数据基础架构、统一分析还是业务创新上,从连接数据湖和数据仓库到跨数据库、跨域共享,如今亚马逊云科技“智能湖仓”架构在企业中的实践,已经为企业构建现代化数据平台提供了一条可供遵循的路径,我们将协同 Amazon S3 与 Amazon Redshift 等更多技术和产品,进一步推进底层数据架构的现代化演进,为企业乃至全行业带来更大的价值。