データ インテリジェンス プラットフォーム - データ

統計学入門

Kevin Barlow

Data Analytics Practitioner

なぜ組織はデータ管理を重視するのでしょうか？

保護とセキュリティ

データ セキュリティ

信頼区間

自信を持った分析

統計学入門

データの種類

構造化データ

  • 最も一般的で理解されている
  • 一般的な行と列
id name occupation location
1 ケビン データサイエンティスト カリフォルニア
2 Tom Architect Arizona
3 サリー 弁護士 テキサス州
4 ティナ 外科医 フロリダ
5 ジョー エンジニア ニューヨーク
統計学入門

データの種類

半構造化

  • Web ベースのデバイスで共通
  • 一部構造はあるが、内容はより柔軟
{
  "people": [{
      "id": 1,
      "name": "Kevin",
      "occupation": "Data Scientist",
      "location": "California"},
    {
      "id": 2,
      "name": "Tom",
      "occupation": "Architect",
      "location": "Arizona"}]
}
統計学入門

データの種類

非構造化データ

  • スマートデバイス、カメラなどで一般的です。
  • 構造は少なく、情報量が多い

非構造化データの図

統計学入門

デルタ

delta.io

  • オープンソースストレージ形式
  • パーケットテーブルの集まり
  • 完全にACID準拠
  • バッチおよびストリーミングデータセット

Delta Lake

統計学入門

Unity Catalog

Unity Catalog データモデル

1 https://docs.databricks.com/en/data-governance/unity-catalog/index.html#the-unity-catalog-object-model
統計学入門

Unity Catalog

Unity Catalog データモデル

GRANT, SHOW, REVOKE, USE ...

統計学入門

カタログ エクスプローラー

  • すべてのデータ資産を探索する単一の場所
  • データを発見するためのUI
  • Unity Catalog の権限を管理する
  • データのリネージと関連アセットを表示

Catalog Explorer Screenshot

統計学入門

練習しましょう！

統計学入門

Preparing Video For Download...