Dlaczego Hadoop jest ściśle związany z Linuksem?

Question

Jestem nowy z Hadoop. Jakie są konkretne powody, dla których Hadoop jest tak ściśle związany z Linuksem, a klaster, na którym działa, jest jednorodny?

Szukam naprawdę konkretnych szczegółów, które mogą mi powiedzieć, dlaczego Hadoop nie działa dobrze z oknami, a jeśli istnieją pewne biblioteki, które są zaangażowane w określone skrypty?

Mój projekt polega na wdrożeniu Hadoop bez użycia Cygwin. Widziałem już artykuł z Hayes Davis, w którym wyjaśnił, jak zainstalować Hadoop bez Cygwina, ale powiedział, że są pewne błędy. Mogę zacząć od zera, aby poprawnie skonfigurować Hadoop w Windowsie, ale jeśli ktoś może wyjaśnić, co konkretnie, są powody, dla których Hadoop nie działa dobrze w oknach, które byłyby bardzo pomocne.

Answer 1

Zgodnie z ich Quick Start page, nie został jeszcze dobrze przetestowany.

• GNU/Linux jest obsługiwany jako platforma programistyczna i produkcyjna. Hadoop został zademonstrowany na klastrach GNU/Linux z 2000 węzłami.
• Win32 jest obsługiwany jako platforma programistyczna. Rozproszona operacja nie została dobrze przetestowana na Win32, więc nie jest obsługiwana jako platforma produkcyjna .

Windows ma znacznie lepsze wsparcie zdalnego zarządzania niż większość ludzi zdaje sobie sprawę, ale to wciąż trudne do pobicia Linux, jeśli chodzi o łatwości (i metce) utworzenia dużą farmę obliczeniową. To tylko przypuszczenie, ale być może jest mniej prawdopodobne, że naukowcy, którzy muszą zbudować tak masywne klastry, chcą przeznaczać znaczną część swojego budżetu na licencjonowanie systemu operacyjnego.

Answer 2

Czy znasz pracę Hadoop, nad którą współpracuje Microsoft and Hortonworks, zasadniczo zatwierdzając zmiany w projekcie Apache dla macierzystej obsługi systemu Windows?

Projekt wciąż znajduje się w fazie podglądu, a pierwsza część wdrożenia to Hadoop on Azure. To Hadoop działa na Windows Server 2008R2 w chmurze Windows Azure. Będzie również dostępna do instalacji w pomieszczeniach do budowy własnych klastrów.

Polecam, aby dowiedzieć się więcej i zarejestrować się w programie, ponieważ odtworzenie tego, co już spędził człowiek lat.

Answer 3

Tne zatwierdzona odpowiedź jest od 2012. Oto najnowsze wiadomości z Hadoop Wiki począwszy od 2017

• wersji Hadoop 2,2 roku obejmuje natywne wsparcie dla systemu Windows. Oficjalne wydania Apache Hadoop nie zawierają plików binarnych Windows (jeszcze, od stycznia 2014 r.). Jednak budowanie pakietu Windows ze źródeł jest dość proste.