Любопытный случай роста данных

Введение в данные

Maarten Van den Broeck

Senior Content Developer at DataCamp

Объём данных растёт в геометрической прогрессии

Рост данных

1 zettabyte = единица с 21 нулём в байтах = 1 billion terrabyte

1 Источник: Statista
Введение в данные

Хранение данных меняется

datastorage.gif

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки

Наскальный рисунок

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента

Свиток

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента
XIX–XX века
  • Перфокарты

Перфокарта

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента
XIX–XX века
  • Перфокарты
  • Магнитные ленты, дискеты

Дискета

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента
XIX–XX века
  • Перфокарты
  • Магнитные ленты, дискеты
XX–XXI века
  • Больше данных на меньших носителях

CD

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента
XIX–XX века
  • Перфокарты
  • Магнитные ленты, дискеты
XX–XXI века
  • Больше данных на меньших носителях
  • CD и жёсткие/твердотельные диски (локально)

Жёсткий диск

Введение в данные

Хранение данных меняется

Исторические способы хранения данных
  • Генетическая информация в ДНК
  • Наскальные и настенные рисунки
  • Свитки и книги из папируса/пергамента
XIX–XX века
  • Перфокарты
  • Магнитные ленты, дискеты
XX–XXI века
  • Больше данных на меньших носителях
  • CD и жёсткие/твердотельные диски (локально)
  • Центры обработки данных (облако)

Облачное хранилище

Введение в данные

Данные — откуда они берутся?

Магазин мороженого №1 в Нью-Йорке

Competitor Ice cream shop in NY, USA.jpg

  • Продаёт ваниль, шоколад и клубнику
  • Имеет приблизительное представление об объёме продаж

Магазин мороженого №2 в Нью-Йорке

New Market.jpg

  • Продаёт 20+ вкусов мороженого
  • Также продаёт кофе и молочные коктейли
  • Отслеживает все продажи
Введение в данные

Сбор данных

Собранные данные

  • Продажи по типу продукта и вкусу мороженого
  • Запасы по типу продукта и вкусу
  • Данные о погоде

Оптимизации

  • Не допускать отсутствия популярных вкусов
  • Заменять плохо продающиеся вкусы новыми
  • Прогнозировать всплески продаж при жаркой погоде
  • Оптимизировать цены

Магазин мороженого №2 в Нью-Йорке New Market.jpg

Введение в данные

Какой магазин мороженого преуспеет?

Магазин мороженого №1 в Нью-Йорке Competitor Ice cream shop in NY, USA.jpg

  • Принимает решения на основе интуиции
  • Меняет вкусы мороженого произвольно

Магазин мороженого №2 в Нью-Йорке New Market.jpg

  • Принимает решения на основе данных
  • Ищет лучшие вкусы
Введение в данные

Компании сложнее, чем магазины мороженого

Компании 3D-производства

  • Тепловой поток лазера
  • Толщина слоя
  • Структурная прочность

Финансовые организации

  • Заявки на ипотеку
  • Обнаружение мошенничества

Factory Data.jpg

iStock-1363104923.jpg

Введение в данные

Давайте потренируемся!

Введение в данные

Preparing Video For Download...