Reprodukowalność i odniesienia

Komunikowanie wyników analizy danych

Hadrien Lacroix

Curriculum Manager

Raport pisemny

 

Raport musi być przejrzysty i reprodukowalny.

Przykład reprodukowalności

 

• Pieczenie ciasta

  • Przepis
  • Surowe składniki
  • Nasz piekarnik i przyrządy kuchenne
  • Ciasto o podobnym smaku

• Projekt danych

  • Ponowna analiza – te same wyniki

 

Przykład replikowalności

• Pieczenie ciasta
  • Własne przybory
  • Własne składniki
• Projekt danych
  • Inne środowisko

Zalety reprodukowalności i replikowalności

 

• Zapobiega powielaniu wysiłków
• Budowanie na istniejących pracach
• Skupienie na nowych wyzwaniach
• Recenzja naukowa
• Niezależność od narzędzi

Najlepsze praktyki

1. Śledzenie sposobu uzyskania wyników
   • Dobrze udokumentowane skrypty
     • Komentarze w kodzie
   • Lista pakietów i środowiska
   • Kontrola wersji

Najlepsze praktyki

1. Śledzenie sposobu uzyskania wyników
2. Unikanie ręcznej manipulacji danymi
   • Wersjonowanie danych
   • Przechowywanie surowych danych i kroków pośrednich
   • Adaptacja i rozwiązywanie problemów
   • Przykład: imputacja danych
     • uzupełnianie brakujących wartości średnią
     • zapis i zamknięcie edytora
     • skąd wiedzieć, które wartości zostały zastąpione?

Najlepsze praktyki

1. Śledzenie sposobu uzyskania wyników
2. Unikanie ręcznej manipulacji danymi
3. Kontrola losowości
   • Ziarno losowości w potokach ML
   • Kontrola zmiennych zakłócających

Najlepsze praktyki

1. Śledzenie sposobu uzyskania wyników
2. Unikanie ręcznej manipulacji danymi
3. Dokumentowanie losowości
4. Interpretowalność
   • Rozumienie przyczyny decyzji lub przewidywanie wyników modelu
   • Narracja z przekonującą historią
   • Powiązanie z reprodukowalnością

¹ Molnar C. Interpretable Machine Learning. 2019.

Najlepsze praktyki

1. Śledzenie sposobu uzyskania wyników
2. Unikanie ręcznej manipulacji danymi
3. Dokumentowanie losowości
4. Interpretowalność
5. Prawidłowe cytowanie bibliografii

Odniesienia

 

• Cytowanie to podstawowe informacje potrzebne do identyfikacji i odnalezienia publikacji

Odniesienia

 

• Różne style, ta sama logika
  • Książka: Nazwisko autora (rok). Tytuł. Wydawca.
  • Artykuł: Nazwisko autora. (rok) „Tytuł artykułu." Tytuł czasopisma, tom, numer, strony.
  • Strona WWW: Nazwisko autora. Data publikacji, „Tytuł strony/pracy." Nazwa serwisu, lokalizacja

 

• Styl APA:
  • Cytowania w tekście (autor, data)

Odniesienia

• Narzędzia do zarządzania bibliografią
  • Łatwiejsze śledzenie
  • Zmiana stylów
  • Wyszukiwanie odniesień online
  • Opcje:
    • EndNote
    • Mendeley
    • RefWorks

Odniesienia

• Kontekst biznesowy
  • Mniej rygorystyczny
  • Prostszy (hiperłącze)
  • ==> informacja dostępna i możliwa do pobrania

Czas na ćwiczenia!

Komunikowanie wyników analizy danych