当前位置: 首页 > 科技观察

【CIO案例】金融公有云:美国金融业监管局使用AWS云每天分析750亿笔交易

时间:2023-03-14 10:02:03 科技观察

【.com快译】大约三年前,美国金融业监管局将工作负载迁移到亚马逊云环境。当时,大多数企业都在寻找更容易实现的目标:将相对容易传输的应用程序转移到云端。但FINRA对此并不满意。“我们从一开始就将最关键的系统迁移到AWS,”FINRA执行副总裁兼首席信息官SteveRandich解释说,他曾担任纳斯达克证券交易所和花旗银行的首席信息官。“我们直接选择迁移关键的数据密集型服务。”兰迪奇称其为FINRA的“皇冠上的明珠”。FINRA每天都需要在纽交所记录订单和相关信息,这意味着其单日事件处理量高达750亿。据Randich称,FINRA在一天内处理相当于Visa和MasterCard六个月的交易数据。同时,FINRA还需要存储这部分信息,以供后续每日、每周甚至每月的分析。记录总量高达万亿,存储总量达到20PB左右。为了应对这一挑战,FINRA选择了一个新的IT执行中心——AWS。为什么要迁移到云端作为股票市场的主要政府监管机构,美国证券交易委员会(SEC)在即将出台的法规中提出了更严格的数据收集和分析要求。根据Randich的说法,这也是FINRA决定使用云服务的主要驱动因素之一。该机构遗留的专用数据仓库设备继续表现良好,但Randich对其适应FINRA未来用例的能力持怀疑态度,“着眼于未来,我们很快意识到我们需要一个不同的解决方案来满足新的要求”,他在拉斯维加斯举行的AWSre:Invent大会上发表演讲时说。FINRA评估了多家服务提供商。传统基础设施提供商试图说服他,强调这种规模的数据库无法在公共云中运行。然而在概念验证评估之后,美国金融业监管局认为AWS比其竞争对手“领先多年”,Randich表示这一优势正在增长。FINRA执行副总裁兼首席信息官SteveRandich提出了云迁移决策的四项基本原则:-自给自足:Randich不想依赖任何顾问或供应商。FINRA建立了自己的知识体系来管理其AWS云。-公共云与私有云:目前,大多数金融服务机构更喜欢使用私有云。“我们的观点是,为什么你必须拥有、管理和支持这么多商品硬件?”他质疑道,“为什么不遵循摩尔定律的指导呢?”以往经验》主张选择私有云。-开源:Randich密切关注HBase和Hive的发展,它们倾向于使用开源数据库标准,而不是由供应商控制并需要购买许可证的专有数据库。-不只是上传:相反,他决定重写现有应用程序并针对特定平台进行调整,以最大限度地发挥云计算的优势。基于以上考虑,FINRA现在使用各种亚马逊云服务:从EC2虚拟机到弹性容器服务,再到Lambda计算;虚拟私有云,Route53和DirectConnect负责网络连接;DynamoDB、关系型数据库服务(简称RDS等数据服务)、简单存储服务(简称S3)、Glacier、弹性块存储(简称EBS);KeyManagementService(简称KMS)、IdentityandAccessManagement(简称IAM)等安全工具;加上简单队列服务(简称SQS)和简单通知服务(简称SNS)等应用功能。借助云计算带来的显着成本节约,FINRA得以摆脱专有基础设施带来的预算压力,进而实现基于大规模商业成本的交易处理和存储。Randich表示,目前云业务系统的交互查询性能是原有平台的400倍。“最初的计划就像是每天做几次谷歌搜索,这显然是不能接受的。”他解释说,“现在我们可以在几秒甚至一秒内完成如此大规模的操作。”FINRA还能够以自动化的方式快速上线并关闭数千个节点,以应对“闪崩”等极端市场事件,而且整个过程“对正常使用几乎没有任何影响,而我们往往只是在我查看了我意识到资源需求激增的日志。2015年,Randich表示他开始意识到云环境中的网络安全水平要优于内部环境。服务,他总结道。原标题:金融监管机构使用AWS的云每天分析750亿笔交易,原作者:BrandonButler