Google превратил трафик облачных хранилищ в завораживающие произведения искусства

28.12.2018      9320

Выявление тенденций в облачных хранилищах для создания визуальных эффектов превратило скучные данные о трафике в наглядные и увлекательные картины. Визуализация миллиардов запросов облачного хранилища позволяет исследовать трафик между пользователями и регионами.

Визуализация трафика

Для своих мероприятий Cloud Next Google начала искать способ привлечь людей и рассказать им о хранении данных. «Мы хотели получить опыт, который бы привлек людей к теме хранилища», – сказал Крис Тэлботт, руководитель отдела маркетинга продуктов Cloud Storage в Google. В то же время компания хотела выяснить, может ли визуализация хранилища, реализованная другим способом, помочь им эффективнее обслуживать своих клиентов.

Облачная проницательность

Задача оказалась не простой, учитывая, что речь шла о трафике облачных хранилищ. Но в результате у исследователей получился набор визуализаций, которые оказываются полезными, а порой просто завораживающими.

«Основное ожидание от технологии хранения заключается в том, что вы вводите байты и получаете байты обратно. Но хранилище устроено умнее, чем вы думаете. В масштабе облачной платформы оно дает нам представление о том, как мир взаимодействует с триллионами фрагментов контента», – пишет команда Google Cloud в своем блоге о проекте.

Чтобы доказать эти утверждения, разработчики взяли информацию о трафике за неделю и выяснили, можно ли найти какие-нибудь полезные шаблоны для своих клиентов, включая компании Spotify, Vimeo и Motorola. Данные были агрегированы и анонимны. Крис Тэлботт сравнил информацию, собранную для проекта, с типами данных, которые можно получать с автомобилей, проезжающих через пункт сбора пошлин. Так, они могли отслеживать направление движения автомобилей, сколько их проехало и в какое время, но не могли определить марку или водителя.

Некоторые из визуализаций показывают, сколько информации пересылали в течение дня и как она перемещалась от пользователя в определенной стране до одного из 18 регионов мира, в котором Google Cloud хранит свои данные, или наоборот.

 

 

На изображении выше приведен пример визуализации трафика для четырех стран. «Пузырьки» обозначают размер пакета, стрелки показывают, в каком направлении он двигался, и можно наблюдать, как эта информация меняется в течение дня. Цвет объектов не несет смысловой нагрузки и добавлен лишь для удобства восприятия.

Другие изображения показали, насколько нестабильным может быть трафик хранилища. Каждая радиальная диаграмма представляет 24 часа запросов страны. Всплески наружу обозначают пакеты, направляемые к пользователю, а всплески внутрь представляют данные, направляемые от пользователя к региону Google Cloud. Цвета обозначают регион, из которого проходили данные: красный – Азия, желтый – Европа, синий – Северная Америка.

 

 

Некоторые из этих визуализаций могут помочь клиентам Google Cloud улучшить обслуживание своих собственных пользователей, в том числе, благодаря управлению трафиком. Более ясное понимание того, где находятся клиенты, также позволит поставщикам повысить качество своих услуг. Google Cloud изучает вопрос о том, сможет ли регулярно предоставлять такие сведения в будущем.

Неожиданные корреляции

Некоторые выводы, полученные из визуализаций, стали неожиданными. Группа изучила, насколько коррелирует цифровой трафик между странами, и в некоторых случаях шаблоны были вполне предсказуемы. Например, в странах, расположенных рядом и работающих в одних и тех же часовых поясах, часто наблюдается схожая структура трафика.

Но обнаружились и некоторые неожиданности. Так, трафик Италии и Южной Африки сильно коррелирован, как и в странах Карибского бассейна и Канаде. Тэлботт назвал эти взаимосвязанные пары «цифровыми друзьями» и сказал, что их раскрытие было удивительной и довольно интересной частью проекта. Что заставляет компании и пользователей в Южной Африке действовать схожим образом с Италией? У Google пока нет хорошего ответа на этот вопрос.

 

 

В приведенном видео трафик хранилища меняется в течение дня для разных стран. Пузырьки перемещаются вверх или вниз, в зависимости от направления трафика, а их размер соответствует объему информации. «Рассмотрение запросов облачного хранилища с течением времени показало нам четкую закономерность, эта схема дала нам возможность сопоставлять страны, и каждая корреляция давала представление о связях по всему миру», – заявляет команда разработчиков.

Напомним, что в Google недавно анонсировали проект облачной роботизированной платформы Google Cloud Robotics, которая сочетает элементы ИИ, робототехники и облака.


Автор:
Обозреватель


Используете ли вы визуализацию данных в своей работе?


Не использую (40%, 4 голосов)
40%
Визуализация исходных данных (30%, 3 голосов)
30%
Визуализация окончательных результатов (30%, 3 голосов)
30%
Визуализация результатов первичной обработки (20%, 2 голосов)
20%
Визуализация выборки (20%, 2 голосов)
20%
Визуализация промежуточных результатов (20%, 2 голосов)
20%

В избранное Подписаться на ответы Сортировка: Древо развёрнутое
Свернуть все
В этой теме еще нет сообщений.
Оставьте свое сообщение

См. также

GitHub опубликовал статистику по языкам и проектам за 2022 год

Новость ИТ-новость Языки программирования Разработка

В статистическом отчете репозитория названы самые популярные языки программирования среди пользователей платформы, а также данные об активности аудитории сервиса.

01.12.2022    1230    VKuser24342747    11       

Инспекторы смогут проводить дистанционные проверки через смартфон

Новость ИТ-новость Мобильные приложения

Минэкономразвития представило мобильное приложение, которое позволит осуществлять надзорные мероприятия бизнеса без посещения офиса. Программа работает через Госуслуги.

28.11.2022    1195    VKuser24342747    0       

«Яндекс» представил бесплатный сервис для быстрого поиска в облаке

Новость ИТ-новость Облачные технологии

Сервис Managed Service for OpenSearch от платформы Yandex Cloud предназначен для оптимизации поисковых систем и проверки стабильности и безопасности работы приложений. Услуга доступа в режиме Public Preview.

24.11.2022    1454    VKuser24342747    1       

В декабре начнут действовать новые правила регистрации доменов .RU и .РФ

Новость ИТ-новость Роскомнадзор

С 12 декабря Роскомнадзор получит право прекращать делегирование домена, если он оформлен нелегально, или на сайте содержится запрещенная в России информация.

23.11.2022    1199    VKuser24342747    1       

Stack Overflow запустил проект для оффлайн-доступа к форуму

Новость ИТ-новость Разработка

Проект под названием Overflow Offline позволяет скачать актуальную версию архива вопросов и ответов по разработке ПО. По объему данных база форума уступает только «Википедии».

02.11.2022    1168    VKuser24342747    1       

Минцифры запустило магазин российского ПО из реестра ИТ-решений

Новость Импортозамещение ИТ-новость

Маркетплейс «Руссофт» стал доступен для всех пользователей. С его помощью можно подобрать программы от отечественных разработчиков для решения корпоративных задач бизнеса.

21.10.2022    1644    VKuser24342747    4       

В ноябре начнется создание российского государственного аналога GitHub

Новость ИТ-новость

Правительство озвучило дату запуска эксперимента по разработке отечественного репозитория ПО. Исходники программ, в том числе разработанных для госорганов, будут публиковаться в нем под открытой лицензией.

19.10.2022    2390    VKuser24342747    14       

OpenAI опубликовала код системы распознавания речи Whisper

Новость Искусственный интеллект ИТ-новость

OpenAI открыла исходный код эталонной реализации на базе фреймворка PyTorch и набор уже обученных моделей для использования под лицензией MIT. Нейросеть используется для перевода речи в текст.

28.09.2022    2679    VKuser24342747    0       

Вторая версия среды разработки для плат Arduino вышла из бета-теста

Новость ИТ-новость Микроэлектроника

Arduino IDE 2.0 получила стабильную версию, в которой появилась поддержка автодополнения кода и темная тема. Разработка заняла несколько лет. Программа распространяется бесплатно.

23.09.2022    2669    VKuser24342747    0       

Основатель движения свободного ПО выпустил руководство по языку C

Новость Linux ИТ-новость Языки программирования

Ричард Мэттью Столлман, основатель Фонда свободного программного обеспечения, представил руководство по языку C и расширениям GNU. Пособие доступно всем желающим и предназначено как для опытных, так и начинающих программистов.

19.09.2022    2220    VKuser24342747    0       

«Ростелеком» предложил создать национальную экосистему на базе «Авроры»

Новость Импортозамещение ИТ-новость Мобильные приложения

Провайдер считает, что государственная мобильная экосистема поможет обеспечить технологическую независимость и экономический подъем страны. А ОС «Аврора» наиболее перспективная разработка для достижения этих целей.

15.09.2022    2164    VKuser24342747    5       

Яндекс выложил в открытый доступ инструмент для разработки мобильных приложений

Новость ИТ-новость Мобильные приложения Яндекс

Фреймворк DivKit от Яндекса стал доступен как open source решение. Инструмент позволяет менять интерфейс приложений без скачивания обновлений и значительно ускоряет мобильную разработку.

02.09.2022    1846    VKuser24342747    0       

Группа компаний «Астра» представила собственную мобильную ОС

Новость Linux ИТ-новость Мобильные приложения

Доработанная ОС Astra Linux Special Edition может быть запущена на большом числе мобильных устройств, в том числе на планшетах и смартфонах с процессорами на архитектурах ARM, «Эльбрус» и x86-64.

25.08.2022    1512    VKuser24342747    1       

В России разработаны меры для решения проблемы нехватки ИТ-специалистов

Новость ИТ-новость

Вице-премьер Дмитрий Чернышенко сообщил, что сейчас экономике страны не хватает 1 млн ИТ-специалистов. Способы преодоления дефицита закреплены в программе нацпроекта «Цифровая экономика»

05.08.2022    1661    VKuser24342747    11       

Яндекс открыл доступ к фреймворку для создания приложений с микросервисной архитектурой

Новость GitHub ИТ-новость Яндекс

Инструмент Userver опубликован как бесплатное open source решение. Яндекс уже несколько лет эффективно его использует в своих приложениях Go, «Еда», «Лавка», «Доставка» и другие. Фреймворк находится в стадии бета – переезда на открытую разработку.

02.08.2022    2517    VKuser24342747    19       

Бизнес сможет использовать повышающий коэффициент для расходов на покупку ПО

Новость ИТ-новость

Принят закон, который позволяет компаниям учитывать расходы на отечественные программы и радиоэлектронное оборудование с коэффициентом 1,5. Решения должны быть включены в соответствующие реестры и относиться к ИИ.

26.07.2022    2275    VKuser24342747    0       

Минэкономразвития тестирует миграцию с Windows 10 на Astra Linux

Новость ИТ-новость

Министерство проводит эксперимент, в ходе которого сотрудники используют российскую ОС Astra Linux вместо Windows 10. По словам главы департамента, эксперимент проходит успешно.

11.07.2022    1840    VKuser24342747    0       

Вышла версия открытого текстового редактора Vim 9.0

Новость ИТ-новость

В приложение добавлен скриптовый язык с поддержкой компилируемых функций для создания плагинов, улучшена проверка правописания и автодополнения, предоставлен выбор цветовых схем.

07.07.2022    2005    VKuser24342747    0       

 «Яндекс» открыл доступ к SmartCaptcha и нейросети по генерации текстов 

Новость ИТ-новость Яндекс

Компания открыла доступ к алгоритму SmartCaptcha, который защищает сайт от спама и DDoS-атак, а также к проекту YaLM 100B, способному писать тексты на английском и русском языках. 

29.06.2022    2260    VKuser24342747    0       

«Яндекс» предложил разработчикам пройти диагностику технических навыков

Новость Кадровые агентства, подбор персонала ИТ-новость Яндекс

Компания запустила сервис, при помощи которого можно получить оценку своих технических навыков от специалистов «Яндекса». Тестирование включает онлайн-интервью и решение задач с реальных собеседований. 

27.06.2022    2180    VKuser24342747    1       

GitHub открыл доступ всем разработчикам к ИИ-помощнику Copilot по подписке

Новость GitHub Искусственный интеллект ИТ-новость

Github Copilot стал общедоступным, но для его использования пользователю репозитория нужно приобрести подписку. Хотя некоторые разработчики могут пользоваться инструментом бесплатно.

24.06.2022    3858    VKuser24342747    1       

В России планируют учредить Федерацию спортивного программирования

Новость ИТ-новость

Минцифры и Минспорта подписали меморандум, в котором закреплено сотрудничество ведомств по развитию в стране спортивного программирования и проведение первого официального чемпионата.

21.06.2022    2766    VKuser24342747    6       

Microsoft окончательно прекратила поддержку Internet Explorer

Новость Интернет ИТ-новость

Microsoft прекратила выпуск обновлений для своего браузера Internet Explorer, а с августа начнет удалять приложение из актуальных версий Windows. Эксперты полагают, что из-за этого пострадает много бизнес-пользователей.

17.06.2022    3267    VKuser24342747    4       

В России начал работу отечественный сервис мониторинга сбоев

Новость Импортозамещение Интернет ИТ-новость

Российская компания BrandAnalytics запустила платформу «Детектор сбоев», предназначенную для отслеживания работоспособности сайтов и сервисов, в том числе русскоязычных.

16.06.2022    2118    VKuser24342747    0       

Минцифры запустило систему отслеживания поддельных сайтов

Новость Безопасность Интернет ИТ-новость

Информационная система под названием «Антифишинг» способна обнаруживать мошеннические веб-ресурсы, которые выглядят как официальные сайты госорганов, компаний и соцсетей.

14.06.2022    2966    VKuser24342747    0