Twitter has moved data analysis tasks to Google Cloud

202102twitter developer

Після першої співпраці між Google Cloud і Twitter у 2018 році вчора сторони оголосили, що підпишуть чергову угоду про співпрацю. Виявляється, відповідно до останнього, Twitter перенесе завдання обробки та аналізу даних у GCloud.

Twitter вперше просунув проєкт Partly Cloud у 2018 році. Він приніс холодне зберігання даних та кластери Hadoop на Google Cloud Platform (GCP). Через успішну співпрацю двох сторін Twitter вирішив піти далі. Тепер він переносить офлайн-аналіз, обробку даних та завдання машинного навчання до Google Data Cloud. Останній швидше проаналізує дані про використання користувачів на платформі Twitter та покращить сервіс.

Twitter зазначив, що за діями користувачів стоїть велика кількість точок даних. Вони включають твіти, лайки та ретвіти. Щодня платформа даних Twitter повинна перетравлювати та сортувати кілька трильйонів подій, обробляти сотні петабайтів даних та понад 10 кластерів.

Чому багато компаній обирають Google Cloud?

На новому етапі співпраці Twitter використовуватиме сервіси Google Data Cloud, включаючи платформу зберігання даних BigQuery, службу потокового аналізу даних Dataflow, службу баз даних NoSQL Cloud Bigtable та інструменти машинного навчання для аналізу цих даних користувачів. Раніше інженерам Twitter та вченим з даних доводилося писати програми для вилучення, перетворення, завантаження (ETL) та моделювання даних. Тепер вони можуть робити запити за допомогою SQL у BigQuery. Це не тільки пришвидшує обробку даних, аналіз та прийняття рішень у Twitter, але також технологія ML прискорює інновації продуктів.
Однак Twitter – не єдина компанія, яка передає свою роботу Google. Минулого тижня Google також підписав автовиробника Ford. Останній використовуватиме Google Cloud як основного хмарного провайдера для інтеграції сервісів Google та обчислювальних систем Android в автомобілі Ford. Ford також використовуватиме Google Cloud AI та технологію машинного вивчення та аналізу даних, розроблятиме бізнес-процеси та споживчі додатки.

What's your reaction?
Cool
0
Cool
Happy
0
Happy
Shaking
0
Shaking
Interesting
0
Interesting
Sad
0
Sad
Angry
0
Angry
Read Gizchina on Google News

Did you like the article? Thanks to the editors!

Share with friends

I have always been interested in IT technologies. And since my previous many years of professional activity (which is design and pre-press preparation) is not possible without their help, it so happened that everything that was related to computers (for example, collecting and modernizing "hardware", as well as configuring software ) I always had to do it myself.

Well, with the advent of gadgets in our lives, the scope of my interests expanded to include them as well.

I like to study and analyze the capabilities of various devices, and for many years, before buying anything new, I always study the capabilities of each potential model for a long time and carefully, spend quite a long and painstaking work, read reviews, reviews and comparisons.

The reward for my time is usually that most of the time I really do get the best of what I can get within my budget.

Rate the author
(There are no ratings yet)
GizChina.Com.Ua

Report an error

Text to be sent to our editors: