Amazon Automates Hadoop Use for Developers

Amazon.com uruchomił hostowaną usługę mającą na celu uproszczenie dla programistów wykorzystania implementacji Hadoop modelu programistycznego MapReduce do przetwarzania dużych zbiorów danych w klastrach procesorów.

Zwane Amazon Elastic MapReduce, usługa przetwarzania w chmurze jest skierowana do programistów których aplikacje muszą przełamać duże ilości danych, dla których Hadoop jest idealnie dopasowany.

Dzięki Amazon Elastic MapReduce, wiele zadań, które programiści musieliby obsługiwać ręcznie, związanych z Hadoopem, jest zautomatyzowanych, cloud computing firmy Amazon Web Services (AWS) powiedział w czwartek na oficjalnym blogu.

[Czytaj dalej: najlepsze usługi streamingowe TV]

"Korzystając z elastycznego narzędzia MapReduce, możesz tworzyć, uruchamiać, monitorować i kontrolować zadania Hadoop z łatwością wskaż i kliknij. Nie musisz wychodzić i kupować komputery sprzętowe. Nie musisz go szafować, podłączać do sieci ani zarządzać nim. Nie musisz martwić się o wyczerpywanie zasobów lub udostępnianie ich innym członkom Twojej organizacji. Nie musisz go monitorować, dostrajać, ani poświęcać czasu na aktualizację systemu lub oprogramowania na nim działającego ", pisze na blogu.

AWS zdecydowało się stworzyć tę usługę po tym, jak dowiedział się, że ma klientów wykonujących zadania Hadoop w Amazon. Usługa Elastic Compute Cloud (EC2), która zapewnia hostowaną pojemność obliczeniową Ponieważ Hadoop staje się coraz bardziej popularny, Amazon stara się ułatwić innym programistom korzystanie z tej darmowej implementacji MapReduce.

Elastic MapReduce działa w połączeniu z EC2 i usługa Amazon Simple Storage Service (S3) udostępniają usługę chmury pamięci masowej. "Elastyczna MapReduce automatycznie obraca implementację Hadoop struktury MapReduce w instancjach Amazon EC2, dzieląc dane w przepływie prac na mniejsze części, tak aby można je było przetwarzane - funkcja "mapa" - równolegle, a ostatecznie ponowne przetworzenie przetworzonych danych na ostateczne rozwiązanie - funkcja "pomniejsz". Amazon S3 służy jako źródło analizowanych danych, a jako miejsce docelowe dla wyników końcowych "zgodnie z odrębnym opisem usługi.

Podobnie jak w przypadku innych usług chmurowych AWS, Amazon pobiera opłatę za elastyczną MapReduce na podstawie jej wykorzystanie, bez minimalnej opłaty.