Szukam narzędzia przepływu pracy do wykonywania złożonych zadań redukcji map. Mam na myśli Oozie, ale także chcę zbadać Kaskadę. Czy istnieje przykładowy kod lub przykład, który łączy istniejące zadania M/R za pomocą kaskadowego API? Czy możesz podać porównanie Kaskadowania Oozie Vs?Comaparison narzędzia do zarządzania przepływem pracy: Oozie Vs Cascading
Odpowiedz
Kaskadowanie i Ozie nie należą do tej samej kategorii.
Oozie to program do planowania przepływu pracy.
Kaskadowanie to interfejs API służący do tworzenia przepływów pracy. Jest agnostyczny w stosunku do programów planujących, tzn. Powinien działać z dowolnym systemem planowania, którego używasz.
Może jest trochę zamieszania, ponieważ doktorzy Ooziego wspominają o "DAG" i obaj biegają na szczycie Hadoop.
Ponadto, Kaskadowanie ma pojęcie "dostępności danych" w obsłudze punktu kontrolnego, co jest obsługiwane w Oozie, aczkolwiek inaczej.
Osobiście bawić się zarówno do pewnego stopnia, co znalazłem interesujący z kaskadowych jest
1) zwięzły i wyrazisty w kategoriach prostych słów kluczowych, takich jak przepływ, beczki, rury itp
2) niesamowite podejście oparte na TDD do lokalnego rozwoju i badań
3) ładny widok planisty (plik .dot) i będzie przydatny po zakończeniu projektu, więc utrzymanie jest łatwe.
4) podejście oparte na DSL przy użyciu groovy, scala, cloujre. więc nie musisz się martwić o uczenie się żadnego nowego języka, a raczej hadoop.
5) proste wdrożenie w chmurze (np. Wsparcie dla amazon jako wdrożenie słoika).
6) można wywoływać wszystko, na przykład istniejącą świnkę lub ul, lub czysty inny słoik MR, o ile eksponują java api.
7) niesamowite dla prac związanych z ML i NLP.
- 1. Ustawienia oozie oozie
- 2. Polecenie Oozie do ponownego przepelnienia pracy z pominięciem węzłów
- 3. Bezpłatne narzędzia do zarządzania kodami w .NET do osobistego projektu
- 4. Narzędzia do pokrycia kodu dla VS 2008
- 5. AvalonEdit: Cascading HighlightingColorizers
- 6. Czy istnieją narzędzia do zarządzania jakością inne niż SonarQube
- 7. Vs Dnia Pracy. Thanksgiving
- 8. Narzędzie GUI do zarządzania HBase
- 9. VS 2010 Ostateczny vs 3rd narzędzia firm
- 10. Jak mogę sprawdzić dzienniki Oozie?
- 11. forgerock Rozwiązanie do zarządzania tożsamościami Vs Serwer tożsamości WSO2
- 12. wielobranżowy Pipeline vs Pipeline pracy
- 13. Korzystanie z Context Manager do sterowania przepływem
- 14. Leader/Follower vs kolejka pracy
- 15. Skrypt programu PowerShell, aby włączyć "Skrypty i narzędzia zarządzania IIS"
- 16. Ruby on Rails Systemy zarządzania treścią?
- 17. Prosty przykład oozie z zapytaniem o ula?
- 18. Jakiego rodzaju są narzędzia do refaktoryzacji baz danych?
- 19. Problem z przepływem Mercurial do Mercurial do Subversion Workflow
- 20. Czas pracy Array # unshift vs Array # shift
- 21. Uczenie się Scala jako pierwszego języka VM/kompilowanego - wyzwania związane z przepływem pracy
- 22. fetch vs. [] podczas pracy z hashe?
- 23. Czy stałe łączenie się z powszechną praktyką Mercurial? Coś nie tak z tym przepływem pracy?
- 24. Oozie Java Działanie: Przekazywanie ścieżki klasy Hbase
- 25. Niestandardowa aktywność związana z przepływem pracy nie jest wyświetlana w Plugin Registration
- 26. Narzędzia do programowania środowiska haskell? (Linux)
- 27. Narzędzie do zarządzania adresami URL?
- 28. Java Framework do zarządzania zadaniami
- 29. Rozwiązanie do zarządzania tożsamością/SSO?
- 30. GUI do zarządzania filtrami Gmaila?