Odhad parametrů

Mixture Models v R

Victor Medina

Researcher at The University of Edinburgh

head(data)
         x
1 3.294453
2 5.818586
3 2.380493
4 4.415913
5 5.048659
6 4.750195

Mixture Models v R

Předpoklady

  1. Jaké rozdělení? $\rightarrow$ Gaussovo rozdělení $\checkmark$
  2. Počet clusterů? $\rightarrow$ 2 clustery $\checkmark$
  3. Jaké parametry?
    • 2 střední hodnoty
    • 2 proporce
    • 2 sm. odchylky $\rightarrow$ obě rovny 1 $\checkmark$

$\Rightarrow$ 4 parametry k odhadnutí! (2 střední hodnoty a 2 proporce)

Mixture Models v R

1 Známé pravděpodobnosti $\rightarrow$

Odhad středních hodnot a proporcí

2 Známé střední hodnoty a proporce $\rightarrow$

Odhad pravděpodobností

Mixture Models v R

Krok 1: Známé pravděpodobnosti

head(data_with_probs)
         x prob_red prob_blue
1 3.294453     0.64      0.36
2 5.818586     0.01      0.99
3 2.380493     0.92      0.08
4 4.415913     0.16      0.84
5 5.048659     0.05      0.95
6 4.750195     0.09      0.91

Mixture Models v R

Pro střední hodnoty

means_estimates <- data_with_probs %>%
   summarise(mean_red = sum(x * prob_red) / sum(prob_red),
             mean_blue = sum(x * prob_blue) / sum(prob_blue))
means_estimates
  mean_red mean_blue
1  2.86925  5.062976

Pro proporce

proportions_estimates <- data_with_probs %>% 
   summarise(proportion_red = mean(prob_red),
             proportion_blue = 1 - proportion_red)
proportions_estimates
  proportion_red proportion_blue
1          0.305           0.695
Mixture Models v R

Mixture Models v R

Krok 2: Známé střední hodnoty a proporce

Mixture Models v R

Mixture Models v R

Mixture Models v R

Mixture Models v R

Krok 2: Škálované pravděpodobnosti

$\text{Probability}_{\text{ blue}}=\frac{0.065}{0.115 + 0.065}=0.36$

data %>% 
   mutate(prob_from_red = 0.3 * dnorm(x, mean = 3),
          prob_from_blue = 0.7 * dnorm(x,mean = 5),
          prob_red = prob_from_red/(prob_from_red + prob_from_blue),
          prob_blue = prob_from_blue/(prob_from_red + prob_from_blue)) %>% 
   select(x, prob_red, prob_blue) %>% head(4)
         x   prob_red  prob_blue
1 3.294453 0.63733037 0.36266963
2 5.818586 0.01115698 0.98884302
3 2.380493 0.91619343 0.08380657
4 4.415913 0.15721146 0.84278854
Mixture Models v R

Shrnutí

  • Pokud známe pravděpodobnosti $\rightarrow$ odhadneme střední hodnoty a proporce
  • Pokud známe střední hodnoty a proporce $\rightarrow$ odhadneme pravděpodobnosti

Mixture Models v R

Pojďme si procvičit!

Mixture Models v R

Preparing Video For Download...