scalatra

5Ciepło

1Odpowiedz

Integracja Spark SQL i Apache Drill poprzez JDBC

Chciałbym stworzyć Spark SQL DataFrame z wyników zapytania wykonanego na danych CSV (na HDFS) za pomocą Apache Drill. Pomyślnym skonfigurowaniu Spark SQL, aby połączyć się wywiercić poprzez JDBC: Map<

5Ciepło

1Odpowiedz

Faza Shuffle trwa zbyt długo Hadoop

Mam zlecenie MR, w którym faza losowania trwa zbyt długo. Początkowo myślałem, że to dlatego, że emituję dużo danych z Mappera (około 5 GB). Następnie naprawiłem ten problem, dodając Combiner, w ten s

11Ciepło

2Odpowiedz

Nie można uruchomić namenode w hadoop?

I config Hadoop w windows 7 from tutorial To ustawienie klastra Single Node. Po uruchomieniu hdfs namenode -format, aby sformatować namenode, wyrzuć wyjątek, taki jak: A gdy start-all.cmd automatyczni

7Ciepło

7Odpowiedz

spadnie wiele tabel z tego samego prefiksu w Ulu

Mam kilka tabel w ulu, który ma taki sam prefiks jak poniżej .. temp_table_name temp_table_add temp_table_area Istnieje kilka setek tabel jak to w mojej bazy danych wraz z wieloma innymi tabelami.

6Ciepło

2Odpowiedz

Namenode wysoka dostępność żądanie klienta

Czy ktoś proszę mi powiedzieć, że jeśli używam aplikacji java do żądania niektórych operacji wysyłania plików/pobierania do HDFS konfigurację Namenode ha, na których wniosek ten pierwszy? Chodzi mi o

14Ciepło

3Odpowiedz

Jak ponownie uruchomić przędzę na AWS EMR

Używam obrazu Hadoop 2.6.0 (emr-4.2.0). Wprowadziłem pewne zmiany w yarn-site.xml i chcę ponownie uruchomić przędzę, aby wprowadzić zmiany w życie. Czy istnieje polecenie, za pomocą którego mogę to zr

6Ciepło

6Odpowiedz

Jak wyjść z beeline?

Używam CDH 5.5 i muszę użyć beeline. Jestem całkiem nowy i uczę się go teraz. Mogę zacząć beeline, ale nie mogę zrezygnować, tak jak robimy to w Hive. Muszę użyć Ctrl + Z, aby wyjść, co nie jest właśc

13Ciepło

1Odpowiedz

jak skutecznie przenieść dane z Kafki do tabeli Impala?

Oto kroki do obecnego procesu: Flafka zapisuje logi do „strefy lądowania” na HDFS. Zlecenie, zaplanowane przez Oozie, kopiuje kompletne pliki ze strefy lądowania do strefy postoju. Dane dotyczące prze

7Ciepło

3Odpowiedz

Błędy wrzucania Jacksona

Próba konwersji XML na JSON w Trybie STORM Mój kod działa dobrze w wersji burzowej 0.9.1, a teraz uaktualniliśmy do najnowszej wersji Storm 0.10.0 i otrzymujemy poniższe błędy, jeśli masz jakieś pojęc

5Ciepło

1Odpowiedz

Odcień: nie można uzyskać dostępu do systemu plików root

Używam hue 3.9 z klastrem Hadoop 2.6.2. Wszystkie komputery mają Ubuntu 14.04. Udało mi się zainstalować Hue, ale wygląda na to, że ma kilka błędów podczas przeglądania hue z interfejsu WWW. Próbuję r