Android

Yahoo vyhledá Hadoop Boost s uvolněním interní verze

Pořád vyhledává v Yahoo

Pořád vyhledává v Yahoo
Anonim

Pro pokročilejší přijetí technologie Hadoop pro zpracování masivních datových sad Yahoo zpřístupní verzi softwaru, kterou dokázal vylepšit pro mnoho svých klíčových stránek a služeb.

Oznámení bylo ve středu na druhém ročníku Hadoop Summit, organizovaný Yahoo a sponzorovaný několika významnými dodavateli, kteří tuto technologii podporují, včetně IBM, Sun a Amazon.com.

Yahoo vyhledávače, reklamní systémy a webmailové služby používají Hadoop, open-source implementaci programového modelu MapReduce pro zpracování rozsáhlých datových sad v procesorových clusterech

Na webu Yahoo, Hadoop běží na více než 25 000 serverech, aby zkrátil data o desítkách miliard webových stránek, desítky zvířat aby se podpořil vývoj tohoto projektu Apache Software Foundation

Yahoo, který zaměstnává zakladatele společnosti Hadoop Doug Cutting, přispívá zpět Hadoop vylepšení projektu Apache, ale nyní uvolňuje plnou implementaci Hadoop, která je největší na světě a byla rozsáhle testována a zdokonalována pro použití v živých výrobních systémech. Kód pro Yahoo není omezen na komerční využití.

"Velký zájem vyjádřil, že kdybychom to zpřístupnili, bylo by užitečné pro ostatní uživatele," řekl Shelton Shugar, senior viceprezident pro cloud computing na Yahoo.

Yahoo stále více upevňuje zpracovatelské platformy na clusterech Hadoop, protože mohou lépe rozšiřovat a poskytovat rozsáhlé zpracování dat, které vyžadují servery a služby společnosti.

"Jsme velmi rádi, jak je Hadoop "

Společnost Amazon.com nedávno zahájila hostovanou službu navrženou tak, aby zjednodušila vývojářům použití Hadoop nazývaného Amazon Elastic Map Reducci, zatímco společnosti jako distribuční distribuční systémy Hadoop společnosti Cloudera, určené pro podnikové nasazení.