建造

云大师用trek10重新称赞他们的数据

为了帮助他们验证他们的POC并执行实施的一些职务,ACG决定在Trek10带来数据工程专家。

云大师用trek10重新称赞他们的数据

云大师是一个想要推动想要加速云旅程的云和企业的个人的个人学习平台。从公司的最早阶段开始,他们的眼睛已经成为在线云训练的世界领导者。

作为他们的用户飙升,云大师开始寻找扩大其产品的方法,并于2019年底宣布收购Linux学院,为世界上最有效的云学习平台铺平了道路。

几乎过夜,云大师已成为一个更大的公司,具有日益增长的数据和基础设施需求。此外,两家公司拥有不同的预先存在的数据管理系统。将Linux Academy和云大师带到一起,充分利用他们的大部分数据,需要从地上创建一个新的统一数据架构的云大师。

云大师的数据工程团队为新数据平台组成了坚实的概念证明,该概念为新数据平台进行了重新示造了两家公司的数据,存储和分析了两家公司的数据。由于这种架构将成为新数据平台的基础,多年来,他们想要搞定,他们希望尽快运行。

“我们正在积极定义我们数据平台的未来架构。 Trek10认识到,他们花了时间来了解我们,了解我们团队和我们业务的需求。“ - 云大师的工程副总裁Alexandre Barreto

为了帮助他们验证他们的POC并执行实施的一些术区,云大师决定在Trek10带来数据工程专家。

有意的数据

最基本的变化是云大师想要制作的是他们思考数据采集的方式:他们希望使数据更具结构化和易于消耗的分析团队。

“遗留数据仓库中没有使用这么多数据,即分析团队很难使用。通过我们的PoC,我们想开始向自己询问为什么我们需要这个,它来自哪里,分析团队将如何消耗它。我们希望定位我们的数据平台,以提供最好的解决方案,因为云大师的需求增长和发展。“ - 云大师的工程副总裁Alexandre Barreto

云大师的新数据摄取系统会将所有传入数据放入平台,在那里它将被转换和过滤。原始数据(第1层)是标准化的 - 一个云大师使用的DynamoDB,用于数据管理,而Linux学院使用RDS,这需要不同的摄取方法 - 进入Tier 2数据,该数据存储在数据湖中。然后将一些数据作为Tier 3数据转换为准备用于分析消耗。所有数据都存储在S3中,可以使用Athena或Redshift光谱快速分析它。

“信任我们的数据工程团队在Trek10人民中很棒。他们很容易与之合作,非常知识。没有挑战,大或小,徒步旅行者忍不住。“ - 云大师的工程副总裁Alexandre Barreto

这些碎片到位了

云大师需要从计划阶段到仅几个月的生产准备就绪。 Trek10在实施工作中投入,加快构建关键功能并提供云大师的过程,更多的时间专注于策划数据集。

对于云大师的数据工程团队发生了许多变化,他们对新方向感到充满信心是很重要的,因为他们将成为维护它和建立它多年的人。从项目的最早阶段来看,重点是确保云大师的数据工程师感到熟练,他们通过Trek10的支持,他们建立了新的系统。

“Trek10理解我们在哪里以及我们需要的地方。他们运行了一个研讨会来收集我们的要求,让我们在同一页面上获得我们所带来的新技术,并突出我们需要考虑的内容。“ - 云大师的工程副总裁Alexandre Barreto

云大师展望未来

当Alexandre Barreto考虑到云大师的接下来是什么时,他立即融入了云大师和Linux学院平台的优势和益处。 “我们希望为我们的用户提供数百名新课程,测验和考试,以及在所有三个主要云提供商的实践实验室和云游乐场等功能,提供最全面的云学习体验。”

从数据工程角度来看,亚历山大很兴奋继续发展他们的数据平台,使自助服务能力快速地滚动新来源,并继续使操作数据更容易通知业务决策。

“我在我们的团队中非常有信心以及我们到目前为止建造的内容,”亚历山大说。 “云大师各个方面的数据的重要性是指数增长的。我们竞争的能力将越来越多地推动我们可以利用数据,应用分析和实施新技术。我们的数据平台是支持所有这些的基础片段。“