Wykrywanie punktów zmiany: datuj przesunięcia w ruchu

Wykrywanie punktów zmiany znajduje daty, od których dzienne kliknięcia lub wyświetlenia ustabilizowały się na nowym poziomie i na nim pozostały, w odróżnieniu od pojedynczych nietypowych dni. Dla każdej zmiany raport podaje średnią przed i po, wielkość przesunięcia mierzoną względem codziennego szumu oraz wskaźnik pewności. Użyj go, aby dokładnie określić początek spadku lub wzrostu, zanim zaczniesz szukać przyczyny.

Jak znajdowane są przesunięcia

1. W całym oknie raport sumuje odległość każdego dnia od średniej okna, czyli tworzy sumę skumulowaną (CUSUM). W miejscu zmiany poziomu ta bieżąca suma się wygina, a dzień najbardziej oddalony od zera jest najbardziej prawdopodobnym punktem podziału.
2. Każda strona podziału musi obejmować co najmniej 7 dni.
3. Przesunięcie jest mierzone jako różnica między dwiema średnimi podzielona przez łączne odchylenie standardowe obu stron, czyli w jednostkach normalnego codziennego szumu. Podział jest zachowywany tylko wtedy, gdy ta wartość osiąga ustawioną przez Ciebie Czułość.
4. Pewność pochodzi z testu permutacyjnego: dni segmentu są tasowane 200 razy, a pewność to odsetek tasowań, w których rozstęp CUSUM jest mniejszy od rzeczywistego.
5. Każdy zachowany podział jest ponownie przeszukiwany po obu stronach (segmentacja binarna), do 8 punktów zmiany.

Czułość mieści się w zakresie od 0.5 do 3 odchyleń standardowych, domyślnie 1.5. Niższe wartości wykrywają mniejsze przesunięcia. Datą punktu zmiany jest pierwszy dzień nowego poziomu. Podręcznik NIST opisuje CUSUM jako metodę przystosowaną do małych, trwałych przesunięć średniej, czyli do przypadku, który obsługuje tu raport.

Czytanie wyników

• Karty: Wykryte punkty zmiany (z liczbą segmentów), Największe przesunięcie w procentach (z codziennym szumem serii), Ostatni punkt zmiany z kierunkiem i pewnością oraz zmiana od średniej pierwszego segmentu do ostatniego.
• Seria z punktami zmiany rysuje wartości dzienne, linię wygładzoną z 7 dni i średnią każdego segmentu, a przy każdym punkcie zmiany linię przerywaną i procentową zmianę.
• Statystyka CUSUM pokazuje samą sumę bieżącą: zmiana nachylenia na tym wykresie oznacza zmianę poziomu w serii.
• Tabela zawiera kolumny: Data, Kierunek (Wzrost lub Spadek), Średnia przed, Średnia po, Zmiana, Przesunięcie (w jednostkach SD), Pewność, Dni przed i Dni po.

Jeśli po uruchomieniu zmienisz metrykę lub czułość, wykrywanie zostanie powtórzone w przeglądarce. Raport zawsze obejmuje co najmniej 90 dni; krótszy zakres jest rozszerzany wstecz, a notatka informuje, jakie daty zostały użyte.

Jakie przyjmuje założenia

• Ruch zmienia się skokowo. Model to szereg poziomów plus szum. Stały wzrost nie ma jednego punktu załamania, więc może zostać podzielony na kilka stopni albo nie dać żadnego wyniku.
• Wzorzec tygodniowy pozostaje w danych. Cotygodniowe wahania są traktowane jako szum, co utrudnia wykrycie małych przesunięć. Jeśli w Twojej witrynie występuje silny rytm tygodniowy, zajrzyj równolegle do dekompozycji szeregów czasowych.
• Ostatnie zmiany potrzebują czasu. Ponieważ po każdej stronie wymagane jest 7 dni, przesunięcia, które zaczęło się w ciągu ostatnich sześciu dni, nie można jeszcze wykryć.
• Pewność jest wskazówką, nie filtrem. Nie decyduje o tym, czy punkt trafi na listę; decyduje o tym wielkość przesunięcia. Tasowanie zakłada też, że każdy dzień jest niezależny, podczas gdy ruch w kolejnych dniach jest ze sobą powiązany, więc traktuj pewność jako wartość względną, a nie dokładne prawdopodobieństwo.
• Najpierw największe załamanie. Segmentacja binarna znajduje najsilniejszy podział przed mniejszymi, więc dwa przesunięcia oddalone o tydzień mogą zostać zgłoszone jako jedno.

Co zrobić z punktem zmiany

Zestaw datę z tym, co działo się w jej pobliżu: wdrożeniem, migracją, zmianą szablonu, awarią lub aktualizacją rankingu Google. Następnie zawęź przyczynę, uruchamiając raport ponownie z filtrem na folder, kraj lub urządzenie, aby zobaczyć, która część witryny się zmieniła. Gdy znasz przyczynę, zapisz ją jako adnotację.

W przypadku pojedynczych nietypowych dni, a nie trwałych zmian, użyj wykrywania anomalii. Aby być informowanym o spadkach na bieżąco, skonfiguruj alerty.