Čtení vícerozměrných dat

Multivariate Probability Distributions in R

Surajit Ray

Professor, University of Glasgow

Témata kurzu

  • Čtení a analýza vícerozměrných dat
  • Techniky vizualizace
  • Běžná statistická rozdělení

    • Gaussovo a t-rozdělení
  • Metody pro vysokodimenzionální data

    • Analýza hlavních komponent (PCA)
Multivariate Probability Distributions in R

Struktura vícerozměrných dat

  • Obdélníkový formát – řádky a sloupce
    • Řádky představují pozorování
    • Sloupce představují proměnné
  • Může, ale nemusí obsahovat:
    • Názvy nebo čísla řádků
    • Záhlaví sloupců
  • Možnost chybějících hodnot
Multivariate Probability Distributions in R

Příklady vícerozměrných dat

Data Iris z webu Cambridge University

5.1  3.5  1.4  0.2  1
4.9  3.0  1.4  0.2  1
4.7  3.2  1.3  0.2  1

Data o porodní hmotnosti (CSV s hlavičkou sloupců)

"","case","bwt","gestation","parity","age","height","weight","smoke"
"1",1,120,284,0,27,62,100,0
"2",2,113,282,0,33,64,135,0
Multivariate Probability Distributions in R

Načtení dat

Z URL adresy

iris_url <- "https://mlg.eng.cam.ac.uk/teaching/3f3/1011/iris.data"
iris_raw <- read.table(iris_url,  sep = "", header = FALSE)

Lokálně

iris_raw <- read.table("iris.txt", sep = "", header = FALSE)
Multivariate Probability Distributions in R

Zobrazení datové sady

head(iris_raw, n = 4)
     V1  V2  V3  V4 V5
1   5.1 3.5 1.4 0.2  1  
2   4.9 3.0 1.4 0.2  1  
3   4.7 3.2 1.3 0.2  1  
4   4.6 3.1 1.5 0.2  1
Multivariate Probability Distributions in R

Přiřazení názvů sloupců

colnames(iris_raw) <- c("Sepal.Length", "Sepal.Width", "Petal.Length","Petal.Width", "Species" )
head(iris_raw)
  Sepal.Length Sepal.Width Petal.Length Petal.Width Species
1          5.1         3.5          1.4         0.2       1
2          4.9         3.0          1.4         0.2       1
3          4.7         3.2          1.3         0.2       1
4          4.6         3.1          1.5         0.2       1
5          5.0         3.6          1.4         0.2       1
6          5.4         3.9          1.7         0.4       1
Multivariate Probability Distributions in R

Přístup ke konkrétním sloupcům

Kontrola aktuálních názvů sloupců

names(iris_raw)
"Sepal.Length" "Sepal.Width"  "Petal.Length" "Petal.Width"  "Species"

$$

Přístup ke sloupcům délky a šířky kalichu

iris_raw[, 1:2] 
iris[, c('Sepal.Length', 'Sepal.Width')]
Multivariate Probability Distributions in R

Změna datových typů

Převod proměnné Species na faktor

iris_raw$species <- as.factor(iris_raw$species)
str(iris_raw)
'data.frame':    150 obs. of  5 variables:
 $ Sepal.Length: num  5.1 4.9 4.7 4.6 5 5.4 4.6 5 4.4 4.9 ...
 $ Sepal.Width : num  3.5 3 3.2 3.1 3.6 3.9 3.4 3.4 2.9 3.1 ...
 $ Petal.Length: num  1.4 1.4 1.3 1.5 1.4 1.7 1.4 1.5 1.4 1.5 ...
 $ Petal.Width : num  0.2 0.2 0.2 0.2 0.2 0.4 0.3 0.2 0.2 0.1 ...
 $ Species     : Factor w/ 3 levels "1","2","3": 1 1 1 1 1 1 1 1 1 1 ...
Multivariate Probability Distributions in R

Přiřazení štítků faktoru

Překódování štítků druhů z 1, 2 a 3 na setosa, versicolor a virginica

  • Přiřazení štítků faktoru
  • Převod první proměnné na faktor
library(car) 
iris_raw$Species <- recode(iris_raw$Species,
                          " 1 ='setosa'; 2 = 'versicolor'; 3 = 'virginica'")
str(iris_raw)
'data.frame':    150 obs. of  5 variables:
 $ Sepal.Length: num  5.1 4.9 4.7 4.6 5 5.4 4.6 5 4.4 4.9 ...
 $ Sepal.Width : num  3.5 3 3.2 3.1 3.6 3.9 3.4 3.4 2.9 3.1 ...
 $ Petal.Length: num  1.4 1.4 1.3 1.5 1.4 1.7 1.4 1.5 1.4 1.5 ...
 $ Petal.Width : num  0.2 0.2 0.2 0.2 0.2 0.4 0.3 0.2 0.2 0.1 ...
 $ Species     : Factor w/ 3 levels "setosa","versicolor",..: 1 1 1 1 1 1 1 1 1 1 ...
Multivariate Probability Distributions in R

Načtení CSV dat s pojmenovanými sloupci

Data o porodní hmotnosti (CSV s hlavičkou sloupců)

"","case","bwt","gestation","parity","age","height","weight","smoke"
"1",1,120,284,0,27,62,100,0
"2",2,113,282,0,33,64,135,0
"3",3,128,279,0,28,64,115,1

Načtení dat o porodní hmotnosti

bwt <- read.csv("birthweight.csv", row.names = 1)
head(bwt, n = 3)
  case bwt gestation parity age height weight smoke
1    1 120       284      0  27     62    100     0
2    2 113       282      0  33     64    135     0
3    3 128       279      0  28     64    115     1
Multivariate Probability Distributions in R

Přečteme si vícerozměrná data!

Multivariate Probability Distributions in R

Preparing Video For Download...