Источники данных

Понимание науки о данных

Sara Billen

Curriculum Manager

Рабочий процесс в науке о данных

Источники данных

Корпоративные данные

• Собираются компаниями
• Помогают принимать решения на основе данных

Открытые данные

• Бесплатные открытые источники данных
• Доступны для использования, распространения и доработки

Корпоративные данные

• Веб-события
• Данные опросов
• Данные о клиентах
• Логистические данные
• Финансовые транзакции

Веб-данные

event_name	timestamp	user_id
homepage_visit	2019-01-01 12:01:01	1234

 

• События
• Временны́е метки
• Сведения о пользователях

Данные опросов

• Сбор мнений людей
• Методы:
  • Личное интервью
  • Онлайн-анкета
  • Фокус-группа

 

Net Promoter Score

Открытые данные

• API данных
• Публичные записи

Публичные API данных

• Application Programming Interface
• Запрос данных через интернет

• Twitter
• Wikipedia
• Yahoo! Finance
• Google Maps
• И многое другое!

Отслеживание хештега

• Все твиты с #DataFramed (подкаст DataCamp!)
• Использование Twitter API

Публичные записи

• Международные организации
  • Напр.: Всемирный банк, ООН, ВТО
• Национальные статистические службы
  • Напр.: переписи населения, опросы
• Государственные ведомства
  • Напр.: погода, экология, демография

 

• Для США: data.gov
• Для ЕС: data.europa.eu

 

Давайте потренируемся!

Понимание науки о данных