Apa itu pembersihan dan persiapan data?

Persiapan Data di Alteryx

Deanna Sanchez

Alteryx ACE and Owner, Nova Geographica LLC

Mengapa data bersih itu penting?

GIGO: "Garbage In, Garbage Out"

  • Membersihkan dan menyiapkan data membantu Anda:
    • Menghindari kesalahan dan mencegah error
    • Menstandarkan data dan format
    • Meningkatkan produktivitas
    • Mempercepat insight

Ilustrasi sampah masuk dan keluar dari basis data

Persiapan Data di Alteryx

Membersihkan data Anda ibarat...

Tune up mobil Anda - Mengoptimalkan mobil dengan komponen bersih dan cairan baru meningkatkan kinerja.

 

Gambar montir menyetel mobil

Persiapan Data di Alteryx

Contoh Data Kotor

  • Data hilang atau tidak lengkap

Tabel data menyoroti data hilang seperti sel kosong

Persiapan Data di Alteryx

Contoh Data Kotor

  • Data hilang atau tidak lengkap
  • Data tidak standar atau tidak konsisten

Tabel data menyoroti ketidakkonsistenan seperti huruf besar campur title case

Persiapan Data di Alteryx

Contoh Data Kotor

  • Data hilang atau tidak lengkap
  • Data tidak standar atau tidak konsisten
  • Kesalahan entri data

Tabel data menyoroti kesalahan entri seperti terlalu banyak digit

Persiapan Data di Alteryx

Contoh Data Kotor

  • Data hilang atau tidak lengkap
  • Data tidak standar atau tidak konsisten
  • Kesalahan entri data
  • Spasi awal/akhir, dan karakter atau tanda baca yang tidak perlu

Tabel data menyoroti tanda baca tidak perlu seperti simbol dolar pada data numerik

Persiapan Data di Alteryx

Teknik pembersihan data

Kelola Data Hilang

  • Tandai data hilang dengan imputasi nilai, mis.:
    • Ubah nilai null menjadi kosong untuk tipe string
    • Imputasi nilai null menjadi 0 untuk tipe numerik
  • Saring data hilang dari aliran data

Gambar analis membersihkan berkas data dengan kaca pembesar dan sapu

Persiapan Data di Alteryx

Teknik pembersihan data

Standarkan Data

  • Pastikan pemformatan
    • Tambah $ untuk mata uang
    • 000123456
  • Periksa konvensi penamaan untuk nama field dan nama file
    • "filename_01012004.csv"
  • Ubah huruf besar/kecil data di sebuah field
    • LOCATION
  • Ubah tipe data

Gambar analis mengarsipkan data ke folder yang tepat

Persiapan Data di Alteryx

Teknik pembersihan data

Hapus elemen tidak perlu

  • Spasi awal/akhir
  • Tab dan jeda baris
  • Baris atau kolom yang tidak dibutuhkan
  • Tanda baca, huruf, dan angka yang tidak perlu

Gambar pekerja konstruksi membersihkan berkas data

Persiapan Data di Alteryx

Profil dengan kode warna

Koordinasi warna di jendela Results dan Profile memandu teknik pembersihan data.

  • Hijau = OK

Profil warna OK

Persiapan Data di Alteryx

Profil dengan kode warna

Koordinasi warna di jendela Results dan Profile memandu teknik pembersihan data.

  • Hijau = OK
  • Putih = Unik

Profil warna OK dan Unik

Persiapan Data di Alteryx

Profil dengan kode warna

Koordinasi warna di jendela Results dan Profile memandu teknik pembersihan data.

  • Hijau = OK
  • Putih = Unik
  • Kuning = Null

Profil warna OK, Unik, dan Null

Persiapan Data di Alteryx

Profil dengan kode warna

Koordinasi warna di jendela Results dan Profile memandu teknik pembersihan data.

  • Hijau = OK
  • Putih = Unik
  • Kuning = Null
  • Merah = Tidak OK (mis., spasi di akhir)

Profil warna OK, Unik, Null, dan Tidak OK

Persiapan Data di Alteryx

Profil dengan kode warna

Koordinasi warna di jendela Results dan Profile memandu teknik pembersihan data.

  • Hijau = OK
  • Putih = Unik
  • Kuning = Null
  • Merah = Tidak OK (mis., spasi di akhir)
  • Abu-abu = Kosong

Semua profil warna

Persiapan Data di Alteryx

Tipe data di Alteryx

Tabel dengan tipe data Boolean ditampilkan

  • Penting memahami berbagai tipe data
    • Cara dan kapan digunakan
  • Lima kategori utama
    • Boolean - format biner
Persiapan Data di Alteryx

Tipe data di Alteryx

Tabel dengan Boolean dan Numerik ditampilkan

  • Penting memahami berbagai tipe data
    • Cara dan kapan digunakan
  • Lima kategori utama
    • Boolean - format biner
    • Numeric - data angka, termasuk Double
Persiapan Data di Alteryx

Tipe data di Alteryx

Tabel dengan Boolean, Numerik, dan String ditampilkan

  • Penting memahami berbagai tipe data
    • Cara dan kapan digunakan
  • Lima kategori utama
    • Boolean - format biner
    • Numeric - data angka, termasuk Double
    • String - data teks
1 String, mencakup tipe String hingga V_W String.
Persiapan Data di Alteryx

Tipe data di Alteryx

Tabel dengan empat tipe data - Boolean, Numeric, String, dan DateTime

  • Penting memahami berbagai tipe data
    • Cara dan kapan digunakan
  • Lima kategori utama
    • Boolean - format biner
    • Numeric - data angka, termasuk Double
    • String - data teks
    • DateTime - data tanggal dan waktu
Persiapan Data di Alteryx

Tipe data di Alteryx

Tabel dengan kelima tipe data utama

  • Penting memahami berbagai tipe data
    • Cara dan kapan digunakan
  • Lima kategori utama
    • Boolean - format biner
    • Numeric - data angka, termasuk Double
    • String - data teks
    • DateTime - data tanggal dan waktu
    • Spatial - objek dan titik spasial
Persiapan Data di Alteryx

Detail dataset

  • Latihan praktis Alteryx:
    • Penjualan Properti Kota New York
    • Satu dataset untuk semua latihan
    • Menganalisis penjualan tertinggi

Gambar cakrawala Kota New York

Persiapan Data di Alteryx

Ayo berlatih!

Persiapan Data di Alteryx

Preparing Video For Download...