Az AWS támogatja a Hadoopot?
Az AWS támogatja a Hadoopot?

Videó: Az AWS támogatja a Hadoopot?

Videó: Az AWS támogatja a Hadoopot?
Videó: Lynn Lucas, Cohesity | AWS re:Invent 2019 2024, November
Anonim

Apache™ Hadoop A ® egy nyílt forráskódú szoftverprojekt, amely nagy adathalmazok hatékony feldolgozására használható. amazon Az EMR megkönnyíti a teljesen konfigurált, rugalmas fürtök létrehozását és kezelését Amazon EC2 példányok futnak Hadoop és egyéb alkalmazások a Hadoop ökoszisztéma.

Ebből következően az AWS Hadoop-ot használ?

amazon Webszolgáltatások használ a nyílt forráskódú Apache Hadoop elosztott számítási technológia, amely megkönnyíti a nagy mennyiségű számítási teljesítmény elérését az adatigényes feladatok futtatásához. Hadoop , a Google MapReduce nyílt forráskódú változatát már olyan cégek is használják, mint a Yahoo és a Facebook.

Másodszor, mit csinál az AWS EMR? amazon Elastic MapReduce ( EMR ) van an amazon Webszolgáltatások ( AWS ) eszköz nagy adatfeldolgozáshoz és elemzéshez. Amazon EMR nagyméretű adatokat dolgoz fel a virtuális szerverek Hadoop-fürtjén keresztül amazon Elastic Compute Cloud ( EC2 ) és amazon Egyszerű tárolási szolgáltatás (S3).

Ilyen módon mi a különbség a Hadoop és az AWS között?

Hadoop egy olyan keretrendszer, amely nagy adathalmazok feldolgozását segíti több számítógépen. Tartalmazza a Map/Reduce (párhuzamos feldolgozás) és a HDFS (elosztott fájlrendszer) funkciót. AWS egy adattárház, amely egy eredetileg a ParAccel által kifejlesztett szabadalmaztatott technológiára épül. Mik az Apache általános felhasználási területei Hadoop ?

Az AWS s3 Hadoop?

S3 valójában egy végtelen tárhely a felhőben, de HDFS nem. HDFS fizikai gépeken található, így bármilyen programot futtathat ott. Nem hajthat végre semmit S3 mivel csak az Object Store és nem az FS.

Ajánlott: