Twitter se ha asociado con Google Cloud para el procesamiento y análisis de datos

Después de una exitosa asociación de dos años con Google, Twitter ahora está extendiendo el acuerdo para utilizar aún más el servicio en la nube de Google para su análisis de datos.. Con esto, Twitter utiliza muchas de las herramientas de Google Cloud, como BigQuery, Dataflow, NoSQL y Machine Learning para analizar cientos de petabytes de datos de usuario todos los días.

Twitter usa Google Cloud para el procesamiento de datos

Twitter se ha asociado con Google Cloud para el procesamiento y análisis de datos

Twitter es una plataforma con millones de usuarios que publican miles de millones de tweets todos los días. Esto equivale a grandes almacenes de datos sobre las actividades de cada usuario, lo que puede no ser útil para todos.

Pero Twitter utiliza estos datos para mejorar sus servicios y hacer que su plataforma sea más atractiva que nunca. Por lo tanto, debe elegir un socio que pueda manejar y procesar estos datos de manera efectiva.

Y estreché la mano de Google Cloud en 2018 y lo usé para procesar sus datos fríos y clústeres de Hadoop Hasta la presente fecha. Ahora anunció la extensión este acuerdo, que ahora incluye mover datos fuera de línea para procesarlos y analizarlos mediante el aprendizaje automático y otras herramientas.

Twitter tiene cientos de petabytes de datos de millones de usuarios todos los días. Esto incluye más de diez puntos de datos como su actividad, me gusta, tweets, retweets, etc. El procesamiento puede ser una tarea pesada, que Google Cloud, con sus herramientas, puede hacerlo de manera eficaz. Esto incluye el uso de BigQuery para almacenar datos, Mesa grande para NoSQL, Flujo de datos para análisis de datos en streaming, etc.

Este procesamiento y análisis automático reduce la carga de trabajo de los científicos e ingenieros de datos internos de Twitter, quienes tenían que hacer la mayor parte del trabajo, como extraer, convertir, cargar y modelar datos a través de programas personalizados. Antes de Twitter, Ford se registró para usar la nube de Google para el procesamiento de datos la semana pasada.