Android

Yahoo dąży do zwiększenia Hadoop z wydaniem wersji wewnętrznej

How to Install Hadoop on Windows 10 | Easy Steps to Install Hadoop | Hadoop Tutorial | Edureka

How to Install Hadoop on Windows 10 | Easy Steps to Install Hadoop | Hadoop Tutorial | Edureka
Anonim

Aby przyspieszyć wdrażanie technologii Hadoop do przetwarzania ogromnych zbiorów danych, Yahoo udostępni wersję oprogramowania, którą udoskonalił, aby zasilać wiele kluczowych witryn i usług.

Ogłoszenie miało miejsce w środę na drugim corocznym Hadoop Summit, organizowany przez Yahoo i sponsorowany przez kilku głównych dostawców, którzy wspierają tę technologię, w tym IBM, Sun i Amazon.com.

Wyszukiwarki Yahoo, systemy reklamowe i usługa poczty internetowej używają Hadoop, opartego na otwartym kodzie źródłowym modelu programowania MapReduce do przetwarzania dużych zestawów danych w klastrach procesorów.

[Więcej informacji: najlepsze usługi transmisji telewizyjnej]

W Yahoo Hadoop działa na ponad 25 000 serwerów, aby zlikwidować dane na dziesiątkach miliardach stron internetowych, dziesiątki zwierząt domowych abytes przechowywania i miliardy rekordów każdego dnia.

Uwalniając kod źródłowy swojej dystrybucji Hadoop, Yahoo ma nadzieję na rozwój tego projektu Apache Software Foundation.

Yahoo, który zatrudnia założyciela Hadoop Doug Cutting, wnosi swój wkład Ulepszenia Hadoop do projektu Apache, ale teraz uwalniają pełną implementację Hadoop, która jest największa na świecie i została szeroko przetestowana i udoskonalona do użytku w systemach produkcyjnych na żywo. Kod Yahoo jest dostępny bez ograniczeń w jego komercyjnym wykorzystaniu.

"Było duże zainteresowanie, że jeśli udostępnimy to, będzie użyteczne dla innych użytkowników," powiedział Shelton Shugar, starszy wiceprezes ds. Cloud computing at Yahoo.

Yahoo w coraz większym stopniu konsoliduje platformy przetwarzania w klastrach Hadoop, ponieważ mogą one być skalowniejsze i zapewniać przetwarzanie danych na dużą skalę w serwisach i serwisach firmy, powiedział.

"Jesteśmy bardzo zadowoleni z tego, jak Hadoop jest To wspaniała platforma "- powiedział Shugar.

Amazon.com uruchomił niedawno hostowaną usługę mającą na celu uproszczenie dla programistów wykorzystania Hadoop o nazwie Amazon Elastic MapReduce, podczas gdy firmy takie jak komercyjne dystrybucje Hadoop na rynku Cloudera przeznaczone są do wdrożeń w przedsiębiorstwach.