2015-11-03 21 views
10

Witam chciałbym zdefiniować funkcję, która zwraca wykres dla odstający (zdefiniowanego poniżej) w oparciu o specified date range i jednocześnie działek oryginalnej serii (i rachunki w tym kontekście ewentualnych wskaźników):Jak wykreślić wartości odstające i oryginalne serie?

Defing odstających:

anomaly <- function(x) 
       { tt <- 1:length(x) 
        resid <- residuals(loess(x ~ tt)) 
        resid.q <- quantile(resid,prob=c(0.25,0.75)) 
        iqr <- diff(resid.q) 
        limits <- resid.q + 1.5*iqr*c(-1,1) 
        score <- abs(pmin((resid-limits[1])/iqr,0) + pmax((resid -     limits[2])/iqr,0)) 

        return(score) 
      } 
    # defining dates 
    dates <- as.POSIXct(seq(as.Date("2015-08-20"), as.Date("2015-10-08"), by = "days")) 

Niektóre dane:

 a<-runif(50, 5.0, 7.5) 
    b<-runif(50, 4, 8) 
    c<-runif(50, 1, 2) 
    d<-runif(50, 3, 3.5) 
    ca<-c/a 
    cb<-c/b 
    df<-data.frame(dates,a,b,c,d,ca,cb) 

Przedstawiamy poboczna

 df[49,4]<-0 
     df[50,6]<-0 

Loop nad danymi znaleźć anomalie

 new<-lapply(df[,2:7],anomaly) 
     library(stringi) # binding list with differing rows 
    # from list to data frame 
     res <- as.data.frame((stri_list2matrix(new))) 
    # rename columns 
     colnames(res) <- names(new) 
    # depends on dates at the beginning 
     res<-(cbind(dates,res[,1:6])) 
    # melt to plot 
     library(reshape) 
     library(reshape2) 
     new <- melt(res , id.vars = 'dates', variable.name = 'series') 

Defing działkę z określonym date range (ostatnie 4 dni):

 library(ggplot2) 

     nrdays <- 4 
     a.plot<-ggplot(subset(new, new$dates >= as.POSIXct(max(new$dates)- (nrdays*60*60*24))), 
     aes(x=dates,y=value,colour=variable,group=variable)) + 
     geom_line() + 
     facet_grid(variable ~ ., scales = "free_y")+ 
     ylab("Outliers")+ 
     xlab("Date") 

Definiowanie funkcji transmisji danych należy sprawdzić:

  check_data <- function(df) { 
      if(tail(df, 1) > 0) { # check only last date 

      return(a.plot) 

      # and the corresponding original series 

     } 
     } 
     # check and plot data 
      check_data(df) 

My Problem polega na tym, że mam setki funkcji i chciałbym tylko wykreślić te, gdzie outlier stało się. Jak widać na wykresie, jestem w stanie wymyślić fabułę, która zwraca wszystkie serie czasowe, w tym serię z odejściem raczej niż te, w których miał miejsce tylko outlier. Dodatkowo chciałbym również zgłosić oryginalną serię (w tym ratios, czyli biorąc pod uwagę odstęp w stosunku ca Chciałbym również uzyskać oryginalną serię c i a ... jak mogę podejść do tego problemu. Więc wyjście może wyglądać tak:

including original series: 

enter image description here

and the outlier as well: 

enter image description here

+3

tylko rzucanie wysoką nagrodę na problem może nie być najlepszym ... wyjaśnianiu kwestii może pomóc bardziej w kategoriach uzyskania przydatnej odpowiedzi. – PascalVKooten

+0

Co jest dla ciebie niejasne? Możesz być bardziej precyzyjny? –

+3

Wiesz, że to zabawne, że tworzę powtarzalny przykład, przestrzegając zasad "SO" tak dobrze jak to możliwe dla początkującego. Starałem się być tak klarowny, jak to tylko możliwe. Miał 5 "Upvotes" zainteresowanych użytkowników i po 5 dniach bounty. A niektórzy ludzie po prostu zgodzili się z tym bez konstruktywnej krytyki i bez sugestii, jak to poprawić. –

Odpowiedz

5

trzeba określić w subset że chcesz tylko odstających, ten jeden nie równa 0. więc można zastąpić

a.plot<-ggplot(subset(new, new$dates >= as.POSIXct(max(new$dates)- (nrdays*60*60*24)) & new$variable %in% new$variable[!new$value %in% 0 & new$dates >= as.POSIXct(max(new$dates)- (nrdays*60*60*24))]), 
      aes(x=dates,y=value,colour=variable,group=variable)) + 
    geom_line() + 
    facet_grid(variable ~ ., scales = "free_y")+ 
    ylab("Outliers")+ 
    xlab("Date") 

To powinno pomóc. Możesz go nieco wyczyścić, aby był bardziej czytelny.

Inną opcją jest dołączenie oryginalnych danych i wartości odstających i narysowanie ich razem. Najpierw utworzymy element data.frame, a następnie podzbiór i przekazujemy go do ggplot. Więc po zamierzonej pętli nad danymi można zrobić coś takiego

orig <- melt(df , id.vars = 'dates', variable.name = 'series') 

data.df <- merge(new, orig, by = c("dates", "variable")) 
colnames(data.df)[2:4] <- c("group","index", "original") 
data.df$index <- as.numeric(as.character(data.df$index)) # replace factor with numeric 

nrdays <- 4 
data.subs <- subset(data.df, data.df$dates >= as.POSIXct(max(data.df$dates)- (nrdays*60*60*24)) & 
        data.df$group %in% data.df$group[!data.df$index %in% 0 & data.df$dates >= as.POSIXct(max(data.df$dates)- (nrdays*60*60*24))]) 
data.subs <- melt(data.subs, id = c('dates', "group")) 

a.plot<-ggplot(data.subs)+ 
    geom_line(aes(x=dates,y=value, colour = variable, group = variable))+ 
    facet_grid(group ~ ., scales = "free_y")+ 
    ylab("Outliers")+ 
    xlab("Date") 

a.plot 

enter image description here

+0

Cześć Vova, dziękuję za twoją sugestię, czy mógłbyś napisać cały kod 'ggplot'. Wklejanie fragmentu powoduje błędy. Czy masz jakieś pomysły, jak uchwycić oryginalną serię? –

+0

Zaktualizowałem, oto obraz, który otrzymuję, uruchamiając kod: https://www.dropbox.com/s/7g1sh37hf0u2h5p/Rplot.jpeg?dl=0 – Vova

+0

Witaj Vova, to jest świetna odpowiedź, dziękuję ty!!! Masz pojęcie, jak uchwycić serię w oryginalnych danych? Czy mam produkować oddzielną fabułę, powiedz "b.plot" i jakoś łączyć je w 'check_funkcji'? –

Powiązane problemy