内容字号:默认大号超大号

段落设置:段首缩进取消段首缩进

字体设置:切换到微软雅黑切换到宋体

服务器_已备案域名查询_安全稳定

2021-06-08 22:28 出处:欧普曼云计算 人气: 评论(0

服务器_已备案域名查询_安全稳定

编者按:我们今天听到的是全球大型金融机构汇丰银行的消息。他们与谷歌云工程师密切合作,淘客是什么意思,使用定制工具和自动化优先的方法,将他们的传统数据仓库转移到BigQuery,使他们能够在数据分析能力方面取得巨大飞跃,并确保数据的高保真性。

在汇丰,我们为3900万客户提供个人和在线服务,从消费者到企业,遍布66个国家。我们在21个国家维护数据中心,拥有94000多台服务器。由于内部基础设施支持我们的业务,我们不断遇到容量挑战,这实际上成为创新的拦路虎,并最终成为业务限制。我们的团队希望对数据做更多的工作,企业软件平台,以创造更好的产品和服务,但我们拥有的技术工具不允许我们发展和探索。而且数据还在不断增长。从2014年到2018年,我们只有一个数据仓库增长了300%。

我们拥有大量数据,但如果我们无法从中获得见解和业务价值,拥有所有这些数据又有什么意义呢?我们希望以最适合客户的方式灵活地为客户提供服务。

我们知道,转向云计算将使我们能够存储和处理更多数据,但作为一家全球银行,我们正在移动复杂的系统,这些系统也需要安全。这是一个团队的努力来创建项目的范围和战略,并在最后得到了回报。我们的云迁移现在使我们能够使用敏捷的DevOps思维方式,因此我们可以快速失败并交付更小的工作负载,同时还内置了自动化。这种迁移还帮助我们消除了技术债务,建立了一个数据平台,让我们专注于创新,大数据共享平台,而不是管理基础设施。在这一过程中,我们发明了新技术并构建了可以在继续迁移时使用的流程。

规划云移动我们选择了云迁移,因为我们知道我们的业务需要云功能才能真正发挥其数字潜力。我们选择了googlecloud,特别是BigQuery,因为它在大小数据集上都非常快,而且我们可以使用SQL接口和连接表来与之交互。我们必须将数据及其模式移动到云中,而不必手动管理每一个细节和错过我们设定的时间表。我们的数据仓库是巨大的、复杂的、任务关键型的,不容易适应现有的参考体系结构。我们需要提前计划并实现自动化,以确保迁移是高效的,并确保我们能够简化数据和流程。

我们迁移的第一个遗留数据仓库是在15年的时间内建成的,30年的数据包括数百万个事务和180 TB的数据。它运行了6500个提取、转换、加载(ETL)作业和2500多个报告,从大约100个来源获取数据。云迁移的选择通常涉及到重新设计或者提升和转移,云服务器价位,但是我们决定了一个不同的策略:移动和改进。这使我们能够充分利用BigQuery的能力,包括它的能力和弹性,帮助解决我们的能力限制的基本问题。

在云计算的第一步,我们开始通过映射练习创建我们的云战略,这也有助于启动内部团队之间的变更管理过程。我们选择架构决策记录作为我们的迁移方法,这些记录基于技术用户旅程,我们使用一个敏捷板来绘制。用户旅程包括"更改数据捕获"、"产品事件处理"或"缓慢更改维度"等内容。

这些都是典型的数据仓库主题,在进行迁移时必须解决,我们还有其他更具体的金融服务行业主题。例如,我们需要确保数据仓库在特定时间点具有一致的黄金数据源。我们也考虑了业务影响,所以我们首先优先考虑移动存档和历史数据,以便立即从旧系统中卸下负载。我们还致力于在早期建立度量,并引入新的概念,比如管理查询和配额,人工智能本科,而不是管理硬件,以便数据仓库用户为向云的转变做好准备。

分享给小伙伴们:
本文标签: 服务器备案域名查询安全稳定

相关文章

评论

发表评论愿您的每句评论,都能给大家的生活添色彩,带来共鸣,带来思索,带来快乐。

签名: 验证码: 点击我更换图片

评论列表