Mi az az Emrfs?
Mi az az Emrfs?

Videó: Mi az az Emrfs?

Videó: Mi az az Emrfs?
Videó: What is Amazon EMR or Elastic MapReduce? Big Data Platform on AWS | AWS New 2024, November
Anonim

Az EMR fájlrendszer ( EMRFS ) a HDFS megvalósítása, amelyet az összes Amazon EMR-fürt használ az Amazon EMR-ből közvetlenül az Amazon S3-ra történő normál fájlok olvasására és írására. Az adattitkosítás lehetővé teszi olyan objektumok titkosítását, amelyek EMRFS ír az Amazon S3-ra, és engedélyezi EMRFS hogy dolgozzon titkosított objektumokkal az Amazon S3-ban.

Ezzel kapcsolatban mi az Emrf következetes nézete?

Az EMRFS konzisztens nézet metaadatokat hoz létre és használ egy Amazon DynamoDB táblában az a következetes nézet az S3 objektumai közül. Ez a táblázat nyomon követ bizonyos műveleteket, de nem tárolja az Ön adatait.

mi a különbség az s3 és az s3a között? Ez a a különbség köztük a három: s3 egy blokk alapú átfedés az Amazon tetején S3 , míg az s3n/ s3a ők nem. Ezek objektum alapúak. Az s3n legfeljebb 5 GB-os objektumokat támogat, ha a méret a gond, míg s3a 5 TB-ig támogatja az objektumokat, és nagyobb teljesítményt nyújt.

Ennek megfelelően az EMR HDFS-t használ?

EMR Fájlrendszer (EMRFS) Ön lehet használni bármelyik HDFS vagy az Amazon S3 fájlrendszert a fürtben. Leggyakrabban Amazon S3 van A bemeneti és kimeneti adatok és a közbenső eredmények tárolására szolgál HDFS.

Mi az s3a?

S3A (URI séma: s3a ) utódja a S3 Natív, s3n fs, a S3a : a rendszer az Amazon könyvtárait használja az interakcióhoz S3 . Ez lehetővé teszi S3a a nagyobb fájlok támogatása (nem több 5 GB), a nagyobb teljesítményű műveletek és egyebek.