Android

Amazon automatizuje Hadoop použití pro vývojáře

HDL Automation automatizuje SPA centrum v Praze

HDL Automation automatizuje SPA centrum v Praze
Anonim

Amazon.com spustila hostovanou službu navrženou tak, aby zjednodušila vývojářům použití implementace programového vybavení MapReduce Hadoop pro zpracování velkých datových sad v procesorových clusterech

nazvaný Amazon Elastic MapReduce, služba cloud computingu je určena vývojářům (9)> S Amazon Elastic MapReduce je mnoho automatizovaných úkolů, které by vývojáři museli zvládnout ručně související s Hadoopem, a to je cloud computing firmy Amazon Web Services (AWS) jak je uvedeno na oficiálním blogu ve čtvrtek

"Používáte Elastic MapReduce, můžete vytvářet, provozovat, monitorovat a řídit pracovní místa Hadoop s jednoduchým kliknutím. Nemusíte jít ven a kupujete kusy hardwaru. Nemusíte ji rackovat, síťovat nebo spravovat. Nemusíte si dělat starosti s vyčerpáním prostředků nebo s jejich sdílením s dalšími členy vaší organizace. Nemusíte jej sledovat, naladit nebo trávit čas na upgrade systému nebo aplikačního softwaru na ně ", píše se na blogu.

Společnost AWS se rozhodla vytvořit tuto službu poté, co se dozví, že má zákazníky, kteří provozují Hadoopské práce na Amazoně Služba Elastic Compute Cloud (EC2), která poskytuje hostitelskou počítačovou kapacitu.Vzhledem k tomu, že se společnost Hadoop stává čím dál populárnějším, cílem programu Amazon je usnadnit dalším vývojářům využití této open source implementace MapReduce

Elastic MapReduce pracuje ve spojení s EC2 a službu Amazon Simple Storage Service (S3). "Elastic MapReduce automaticky spouští implementaci rámce MapReduce v instancích Amazon EC2 pomocí Hadoop, čímž dělí data v toku pracovních úkolů na menší bloky, takže mohou být zpracovává se - funkce 'map' - paralelně a nakonec rekombinace zpracovaných dat do konečného řešení - funkce 'redukce'. Amazon S3 slouží jako zdroj pro analyzované údaje a jako výstupní cíl pro konečné výsledky "podle samostatného popisu služby.

Stejně jako u ostatních cloudových služeb AWS Amazon účtuje za Elastic MapReduce na základě svého bez minimálního poplatku.