Čo je Emrfs?

2024 Autor: Lynn Donovan | [email protected]. Naposledy zmenené: 2023-12-15 23:53

Systém súborov EMR ( EMRFS ) je implementácia HDFS, ktorú všetky klastre Amazon EMR používajú na čítanie a zápis bežných súborov z Amazon EMR priamo do Amazon S3. Šifrovanie údajov vám umožňuje šifrovať objekty, ktoré EMRFS zapisuje do Amazon S3 a umožňuje EMRFS pracovať so šifrovanými objektmi v Amazon S3.

Čo sa týka tohto, aký je konzistentný názor Emrfs?

The Konzistentný pohľad EMRFS vytvára a používa metadáta v tabuľke Amazon DynamoDB na udržiavanie a konzistentný pohľad vašich objektov S3. Táto tabuľka sleduje určité operácie, ale neobsahuje žiadne vaše údaje.

aky je rozdiel medzi s3 a s3a? To je rozdiel medzi tri: s3 je blokové prekrytie na vrchole Amazonu S3 , zatiaľ čo s3n/ s3a niesu. Tieto sú založené na objektoch. s3n podporuje objekty až do 5 GB, ak ide o veľkosť s3a podporuje objekty do 5TB a má vyšší výkon.

Používa teda EMR HDFS?

EMR Systém súborov (EMRFS) Vy môcť použiť buď HDFS alebo Amazon S3 ako súborový systém vo vašom klastri. Najčastejšie Amazon S3 je slúžia na ukladanie vstupných a výstupných údajov a medzivýsledky sa ukladajú do HDFS.

čo je s3a?

S3A (Schéma URI: s3a ) Nástupca S3 Natívne, s3n fs, the S3a : systém používa na interakciu knižnice Amazonu S3 . Toto povoľuje S3a na podporu väčších súborov (už nie je limit 5 GB), operácií s vyšším výkonom a ďalších.