Metodolog.pl – Analiza Statystyczna w nauce
CRISP-DM etap piąty – ewaluacja
Ocenianie wyników
Zadanie
Poprzednie kroki oceny traktowały o takich czynnikach jak precyzyjność i uniwersalność modelu. Ten krok ocenia stopień w jakim model wypełnia cele biznesowe i poszukuje przesłanek czy istnieje jakiś biznesowy powód dla którego ten model jest niedostateczny. Inną możliwością jest sprawdzenie modelu na aplikacjach testowych w prawdziwym zastosowaniu, jeżeli czas i budżet na to pozwalają. Co więcej, ewaluacja ocenia także inne wyniki wygenerowane na skutek eksploracji danych. Wyniki eksploracji danych zawierają modele, które muszą być związane z oryginalnymi celami biznesowymi i wszystkie inne odkrycia, które już niekoniecznie muszą być związane z celami biznesowymi, ale mogą odkryć dodatkowe wyzwania, informacje, albo wskazówki dla przyszłych kierunków.
Dane wyjściowe
- Ocena wyników eksploracji danych – podsumowanie oceny wyników w kontekście biznesowych kryteriów sukcesu, zawiera ostateczne sprawozdanie odnośnie tego czy projekt osiągnął już początkowe cele biznesowe.
- Zatwierdzone modele – po ocenieniu modelu z poszanowaniem kryteriów sukcesu biznesowego, wygenerowane modele, które spełniają wybrane kryteria stają się modelami zatwierdzonymi.
Proces recenzji
Zadanie
W tym momencie, powstałe modele wydają się być zadowalające i zaspokajające biznesowe potrzeby. Teraz adekwatnym jest zrobienie bardziej gruntownej recenzji zobowiązań eksploracji danych by ustalić czy jest jakikolwiek ważny czynnik lub zadanie, które w jakiś sposób zostało pominięte. Ta recenzja także zawiera w sobie zapewnienie o jakości zagadnienia – na przykład: czy właściwie zbudowaliśmy model? Czy użyliśmy tylko tych atrybutów, które były dozwolone i będą dostępne w przyszłych analizach?
Dane wyjściowe
- Recenzja procesu – podsumowanie procesu recenzji zwrócenie uwagi na działania, które zostały pominięte i na te które należy powtórzyć.
Ustalenie następnych kroków
Zadanie
W zależności od wyników oceny i recenzji procesu, team pracujący nad projektem decyduje co dalej. Podejmuje decyzję czy należy zakończyć projekt i rozpocząć wdrażanie, zrobić kolejne powtórzenia, czy rozpocząć nowe projekty eksploracji danych. To zadanie zawiera analizę pozostałych zasobów i budżetu, które mogą mieć wpływ na decyzję.
Dane wyjściowe
- Lista możliwych działań – lista potencjalnych przyszłych działań, ze wszystkimi za i przeciw dla każdej możliwości
- Decyzja – opisuje jak została podjęta decyzja, razem z jej racjonalnym uzasadnieniem.
