Twitter Plots Hadoop集群转移到Google云平台

发布时间：2021-11-17 09:21 所属栏目：125 来源：互联网

导读：Twitter已概述计划将其大量的Hadoop数据处理平台移动到Google云，以提高社交媒体网站的基础架构的弹性。该公司众所周知，经营多个Hadoop集群，其中包含300多个PB的数据，并在2017年1月（通过其工程博客）进行了录制，以确认其中最大的节点包括10,000个节点。

Twitter已概述计划将其大量的Hadoop数据处理平台移动到Google云，以提高社交媒体网站的基础架构的弹性。

该公司众所周知，经营多个Hadoop集群，其中包含300多个PB的数据，并在2017年1月（通过其工程博客）进行了录制，以确认其中最大的节点包括10,000个节点。

这些集群传统上传统上运行在Twitter自己的数据中心，并且用于进行数据仓库和处理任务，并支持微博平台内部工作的实时方面。

在2018年5月3日发布的后续帖子中，该公司表示，它现在与谷歌合作，将其冷库和灵活的Compute Hadoop集群转移到搜索巨头的云平台中。

“在过去的几年里，我们一直在评估我们的平台和基础设施，需要确保我们能够保持越来越多的服务需求，”Twitter CTO ParagAl，在博客文章中。

（编辑：ASP站长网）