Google превратил трафик облачных хранилищ в завораживающие произведения искусства

28.12.2018     

Выявление тенденций в облачных хранилищах для создания визуальных эффектов превратило скучные данные о трафике в наглядные и увлекательные картины. Визуализация миллиардов запросов облачного хранилища позволяет исследовать трафик между пользователями и регионами.

Визуализация трафика

Для своих мероприятий Cloud Next Google начала искать способ привлечь людей и рассказать им о хранении данных. «Мы хотели получить опыт, который бы привлек людей к теме хранилища», – сказал Крис Тэлботт, руководитель отдела маркетинга продуктов Cloud Storage в Google. В то же время компания хотела выяснить, может ли визуализация хранилища, реализованная другим способом, помочь им эффективнее обслуживать своих клиентов.

Облачная проницательность

Задача оказалась не простой, учитывая, что речь шла о трафике облачных хранилищ. Но в результате у исследователей получился набор визуализаций, которые оказываются полезными, а порой просто завораживающими.

«Основное ожидание от технологии хранения заключается в том, что вы вводите байты и получаете байты обратно. Но хранилище устроено умнее, чем вы думаете. В масштабе облачной платформы оно дает нам представление о том, как мир взаимодействует с триллионами фрагментов контента», – пишет команда Google Cloud в своем блоге о проекте.

Чтобы доказать эти утверждения, разработчики взяли информацию о трафике за неделю и выяснили, можно ли найти какие-нибудь полезные шаблоны для своих клиентов, включая компании Spotify, Vimeo и Motorola. Данные были агрегированы и анонимны. Крис Тэлботт сравнил информацию, собранную для проекта, с типами данных, которые можно получать с автомобилей, проезжающих через пункт сбора пошлин. Так, они могли отслеживать направление движения автомобилей, сколько их проехало и в какое время, но не могли определить марку или водителя.

Некоторые из визуализаций показывают, сколько информации пересылали в течение дня и как она перемещалась от пользователя в определенной стране до одного из 18 регионов мира, в котором Google Cloud хранит свои данные, или наоборот.

 

 

На изображении выше приведен пример визуализации трафика для четырех стран. «Пузырьки» обозначают размер пакета, стрелки показывают, в каком направлении он двигался, и можно наблюдать, как эта информация меняется в течение дня. Цвет объектов не несет смысловой нагрузки и добавлен лишь для удобства восприятия.

Другие изображения показали, насколько нестабильным может быть трафик хранилища. Каждая радиальная диаграмма представляет 24 часа запросов страны. Всплески наружу обозначают пакеты, направляемые к пользователю, а всплески внутрь представляют данные, направляемые от пользователя к региону Google Cloud. Цвета обозначают регион, из которого проходили данные: красный – Азия, желтый – Европа, синий – Северная Америка.

 

 

Некоторые из этих визуализаций могут помочь клиентам Google Cloud улучшить обслуживание своих собственных пользователей, в том числе, благодаря управлению трафиком. Более ясное понимание того, где находятся клиенты, также позволит поставщикам повысить качество своих услуг. Google Cloud изучает вопрос о том, сможет ли регулярно предоставлять такие сведения в будущем.

Неожиданные корреляции

Некоторые выводы, полученные из визуализаций, стали неожиданными. Группа изучила, насколько коррелирует цифровой трафик между странами, и в некоторых случаях шаблоны были вполне предсказуемы. Например, в странах, расположенных рядом и работающих в одних и тех же часовых поясах, часто наблюдается схожая структура трафика.

Но обнаружились и некоторые неожиданности. Так, трафик Италии и Южной Африки сильно коррелирован, как и в странах Карибского бассейна и Канаде. Тэлботт назвал эти взаимосвязанные пары «цифровыми друзьями» и сказал, что их раскрытие было удивительной и довольно интересной частью проекта. Что заставляет компании и пользователей в Южной Африке действовать схожим образом с Италией? У Google пока нет хорошего ответа на этот вопрос.

 

 

В приведенном видео трафик хранилища меняется в течение дня для разных стран. Пузырьки перемещаются вверх или вниз, в зависимости от направления трафика, а их размер соответствует объему информации. «Рассмотрение запросов облачного хранилища с течением времени показало нам четкую закономерность, эта схема дала нам возможность сопоставлять страны, и каждая корреляция давала представление о связях по всему миру», – заявляет команда разработчиков.

Напомним, что в Google недавно анонсировали проект облачной роботизированной платформы Google Cloud Robotics, которая сочетает элементы ИИ, робототехники и облака.


Автор:
Сергей Кравченко Обозреватель


Используете ли вы визуализацию данных в своей работе?


Не использую (40%, 4 голосов)
40%
Визуализация исходных данных (30%, 3 голосов)
30%
Визуализация окончательных результатов (30%, 3 голосов)
30%
Визуализация результатов первичной обработки (20%, 2 голосов)
20%
Визуализация выборки (20%, 2 голосов)
20%
Визуализация промежуточных результатов (20%, 2 голосов)
20%

Избранное Подписка Сортировка: Древо развёрнутое
Свернуть все
В этой теме еще нет сообщений.
Оставьте свое сообщение

См. также

«Ростех» внедрит в вузах России учебного промышленного робота с исходниками на GitHub

Новость GitHub Робототехника

Госкорпорация «Ростех» создала компактного робота для обучения студентов вузов и колледжей. Исходный код для управления устройством выложен на GitHub, учебные заведения могут дорабатывать его под свои нужды. 

сегодня в 09:50    97    VKuser24342747    0       

Microsoft призвала пользоваться PowerShell вместо CMD

Новость Infostart Software Partners Маркет Новости компаний

Microsoft порекомендовала пользоваться инструментом PowerShell вместо классического интерпретатора CMD (cmd.exe). Разработчики не будут заниматься доработкой CMD, но оставят его в системе для обеспечения совместимости. 

вчера в 09:56    421    user1015646    2       

Из реестра российского ПО могут удалить ОС на ядре Linux

Новость Linux Минкомсвязь

Правила, которыми руководствуется Минкомсвязь, запрещают добавлять в реестр ПО с компонентами, которые распространяются по свободным лицензиям GPL и MPL.

02.06.2020    494    user1015646    8       

Опубликован релиз платформы Electron 9.0.0 для создания приложений на базе движка Chromium

Новость Linux

Создатели обновления повысили эффективность обработчика событий окна в Linux, улучшили просмотрщик PDF и многое другое.

01.06.2020    604    SKravchenko    0       

Microsoft планирует объединить UWP и Win32-приложения при помощи проекта Reunion

Новость Новости компаний

Reunion призван объединить платформу разработчиков Windows, которая в настоящее время разбита между Win32 и универсальной платформой Windows (UWP).

29.05.2020    606    SKravchenko    0       

«Яндекс» запустил бесплатную облачную платформу для разработки нейросетей

Новость Искусственный интеллект Облачные технологии

«Яндекс» запустил новый сервис DataSphere, позволяющий проводить в облаке ресурсоемкие вычисления для машинного обучения. Во время тестирования услуга полностью бесплатна для разработчиков. 

29.05.2020    880    VKuser24342747    1       

В Беларуси заработал сервис видеоконференций на основе российской облачной платформы

Новость Облачные технологии Стартапы

Сервис видеоконференцсвязи на базе российской облачной платформы IVA MCU запустили в Беларуси. Услуги предоставляет республиканский провайдер облачных услуг beCloud. 

28.05.2020    468    user1015646    0       

Microsoft открыла исходники для 37-летнего языка GW-BASIC

Новость Новости компаний Языки программирования

Microsoft представила исходный код интерпретатора языка программирования GW-BASIC. 37 лет назад он был одним из самых популярных языков для написания программ и игр. 

28.05.2020    648    VKuser24342747    2       

Создатель Linux отказался от Intel в пользу AMD

Новость Linux Микроэлектроника

Линус Торвальдс стал использовать для работы компьютер на базе процессора AMD. Предыдущие 15 лет он отдавал предпочтение ПК на компонентах Intel. 

27.05.2020    854    user1015646    9       

Microsoft Build 2020: переход в онлайн и главные анонсы

Новость Infostart Software Partners Маркет Новости компаний

Компания Microsoft на конференции Build 2020 представила не только технологии будущего, но и полезные практические решения, которыми будут пользоваться миллионы людей по всему миру.

26.05.2020    1371    user1015646    1       

Microsoft создаст единую платформу для разработки под Windows

Новость Infostart Software Partners Маркет Новости компаний

Компания представила единую платформу для разработки под Windows, функционал для ответственного использования машинного обучения и другие инструменты для разработчиков. 

25.05.2020    1360    VKuser24342747    3       

Разработчик Node.js запустил новую JavaScript-платформу Deno 1.0

Новость Языки программирования

Создатель платформы для JavaScript-разработки Node.js Райан Даль выпустил первый официальный релиз нового проекта – Deno 1.0.

25.05.2020    754    user1015646    1       

Facebook создал тестовый клон своей сети и населил его умными ботами

Новость Соцсети

Компания Facebook разработала платформу-имитацию оригинальной соцсети. Ее населили ботами, чтобы разработчики отработали различные сценарии поведения без ущерба для пользователей

14.05.2020    981    user1015646    0       

GitHub представил сервис для облачной разработки Codespaces

Новость GitHub

Крупнейший сервис хранения репозиториев кода GitHub выпустил масштабное обновление – компания представила встроенную IDE с инструментами для облачной разработки Codespaces, форумы для обсуждения кода, средства защиты репозиториев и другие новшества

12.05.2020    1676    user1015646    1       

Состоялся релиз Linux-дистрибутива Ubuntu 20.04 LTS

Новость Linux Ubuntu

23 апреля, Canonical объявили о доступности дистрибутива Ubuntu 20.04 LTS, под кодовым названием Focal Fossa. Этот выпуск с долгосрочной поддержкой включает в себя новую тему для рабочего стола и темный режим. Под капотом вы найдете обновленное ядро Linux 5.4 и новый способ установки приложений.

08.05.2020    1525    SKravchenko    0       

Новые возможности видеомессенджера Google Duo

Новость Google Мессенджеры

Мессенджер Google Duo повысил качество видеозвонков благодаря новой технологии видеокодеков. Кроме этого разработчики добавили 4 новые функции, которые должны сделать его использование более комфортным.

07.05.2020    1143    SKravchenko    1       

Проверка на прочность: разработчиков заставили доказать надежность ОС «Аврора»

Новость ОС Безопасность Госзакупки Импортозамещение Мобильные приложения

Российская мобильная ОС «Аврора» должна была стать основной системой для смартфонов и планшетов, которые планировали закупать для чиновников и госкомпаний. Но чтобы госзакупки состоялись, правительство потребовало у разработчиков подтвердить надежность продукта.

07.05.2020    1674    user1015646    2       

Apple и Google объединились в борьбе с коронавирусом

Новость Mac OS Google

Apple и Google объединились для борьбы против COVID-19. В блогах компаний появился анонс разработки на основе Bluetooth, помогающей правительствам всего мира сдерживать распространение заражения

28.04.2020    1462    feva    3       

IBM возродит язык программирования COBOL

Новость Языки программирования

Компания IBM решила, что «древний» язык рано списывать со счетов, и намерена возродить его. 

28.04.2020    2097    user1015646    3       

Бесплатная конференция по управлению данными и искусственному интеллекту

Новость

24 апреля состоится бесплатная онлайн-конференция от сообщества лидеров цифровой трансформации Global CIO – «Управление данными и искусственный интеллект». 

22.04.2020    1449    kbazzh    0       

Git – 15 лет: как появилась и чего достигла самая популярная система контроля версий

Новость git

7 апреля система контроля версий Git отметила 15-летие. Решение, разработанное легендарным Линусом Торвальдсом, используют миллионы разработчиков по всему миру. Рассказываем, как создавалась система и почему она так популярна.

22.04.2020    2084    user1015646    0       

Нейросеть Microsoft будет помогать программистам допускать меньше багов

Новость ИТ-компания Искусственный интеллект Маркет Языки программирования

Microsoft планирует разработать ИИ, который сможет с большой вероятностью находить ошибки в коде. Искусственный интеллект сможет разделять их на критические, важные и малозначимые.

21.04.2020    1897    VKuser24342747    5       

Эксперты спрогнозировали рост рынка дата-центров из-за коронавируса

Новость Аналитика

Исследователи из iKS-Consulting пришли к выводу, что при позитивном сценарии развития пандемии российский рынок ЦОДов сохранит темп роста в 15%. При негативном произойдет замедление развития. 

20.04.2020    1431    VKuser24342747    0       

CorelDRAW Graphics Suite 2020: ИИ, быстродействие и возможность совместной работы

Новость Infostart Software Partners Искусственный интеллект Маркет

Разработчики снабдили пакет ИИ-технологиями, усовершенствовали производительность и добавили инструменты для совместной работы в облачном формате. 

16.04.2020    2119    iivanov1    13       

Российские медучреждения в прошлом году приобрели более 40 тыс. копий отечественных ОС

Новость Импортозамещение Медицина

Разработчики Astra Linux рассказали о популярности своей ОС в медицинских учреждениях. За прошлый год компания продала организациям здравоохранения более 24 тыс. лицензий. Еще 20 тыс. поставила «Базальт СПО».

15.04.2020    1521    VKuser24342747    0