Wiem czym jest Data Warehouse & czym jest Big Data. Ale jestem zdezorientowany z Data Warehouse Vs Big Data. Oba są takie same z różnymi nazwami lub oba są różne (koncepcyjnie & Fizycznie).Jaka jest rzeczywista różnica między hurtownią danych i dużymi danymi?
Z góry dziękuję.
Myślę, że poniższy artykuł będzie dla Państwa bardzo przydatny.
It’s important to divide the techniques of data warehousing from the implementation. Hadoop (and the advent of NoSQL databases) will auger the demise of data warehousing appliances and the “traditional” single database implementation of a data warehouse.
It is safe to say that traditional, single server relational databases or database appliances are not the future of big data or data warehouses.
On the other hand, the techniques of data warehousing to include Extract-Transform-and-Load (ETL), dimensional modeling and business intelligence will be adapted to the new Hadoop/NoSQL environments.
Od: http://gcn.com/blogs/reality-check/2014/01/hadoop-vs-data-warehousing.aspx
mam jakieś wielkie slajdy opisujące różnicę między Hadoop i hurtowni danych, i jak obie wzajemnie się uzupełniają:
wiem, że jest to starszy wątek, ale w ostatnim roku nastąpiły pewne zmiany. Porównanie hurtowni danych z Hadoop przypomina porównywanie jabłek z pomarańczami. Hurtownia danych to koncepcja: czyste, zintegrowane dane o wysokiej jakości. Nie sądzę, że zapotrzebowanie na hurtownię danych zniknie w najbliższym czasie. Z kolei Hadoop to technologia. Jest to rozproszone środowisko obliczeniowe do przetwarzania dużych ilości danych. W przeszłości hurtownie danych były zazwyczaj budowane na relacyjnych bazach danych i urządzeniach hurtowni danych. Jednak w ciągu ostatnich kilku lat pojawiły się różne ograniczenia RDBMS (rosnące koszty licencji w obliczu rosnących wolumenów danych, słabo dopasowane do celu, jakim jest sprawdzanie wykresów i hierarchii oraz przyjmowanie niestrukturalnych typów danych itp.). W tym samym czasie pojawiły się mechanizmy zapytań MPP SQL na Hadoop, takie jak Apache Drill, które teraz umożliwiają wyszukiwanie danych znajdujących się w Hadoop.
Napisałem całą serię postów na ten temat, jeśli jesteś zainteresowany wszystkimi szczegółami. Data Warehousing in the age of big data. The end of an era?
Znalazłem http://www.b-eye-network.com/view/17017 który opisuje różnicę dużych danych i danych ware domu
gdy porównamy wielki rozwiązanie danych do hurtowni danych, co znajdziemy? Uważamy, że rozwiązanie do dużych zbiorów danych to technologia, a magazynowanie to architektura. Są to dwie bardzo różne rzeczy. Technologia ta jest właśnie taka - środek do przechowywania i zarządzania dużymi ilościami danych o wartościach . Hurtownia danych to sposób organizowania danych, aby zapewnić wiarygodność i integralność korporacyjną. Gdy ktoś pobiera dane z hurtowni danych , ta osoba wie, że inne osoby używają tych samych danych do innych celów. Istnieje podstawa do uzgodnienia danych , gdy istnieje hurtownia danych.