Emrfs дегеніміз не?
Emrfs дегеніміз не?

Бейне: Emrfs дегеніміз не?

Бейне: Emrfs дегеніміз не?
Бейне: AWS re:Invent 2022 - Migrating to Amazon EMR to reduce costs and simplify operations (ANT337) 2024, Мамыр
Anonim

EMR файлдық жүйесі ( EMRFS ) - бұл барлық Amazon EMR кластерлері Amazon EMR-ден тікелей Amazon S3-ке тұрақты файлдарды оқу және жазу үшін пайдаланатын HDFS іске асырылуы. Деректерді шифрлау объектілерді шифрлауға мүмкіндік береді EMRFS Amazon S3 жүйесіне жазады және қосады EMRFS Amazon S3 жүйесінде шифрланған нысандармен жұмыс істеу.

Осыған байланысты Emrfs дәйекті көзқарасы қандай?

The EMRFS дәйекті көрінісі қолдау үшін Amazon DynamoDB кестесінде метадеректерді жасайды және пайдаланады дәйекті көзқарас S3 нысандарыңыздан. Бұл кесте белгілі бір әрекеттерді бақылайды, бірақ деректеріңіздің ешқайсысын ұстамайды.

s3 пен s3a арасындағы айырмашылық неде? Бұл арасындағы айырмашылық үшеуі: s3 Amazon жоғарғы жағындағы блок негізіндегі қабаттасу болып табылады S3 , ал s3n/ s3a емес. Бұл объектілерге негізделген. s3n өлшемі маңызды болған кезде 5 ГБ дейінгі нысандарды қолдайды s3a 5 ТБ дейінгі нысандарды қолдайды және жоғары өнімділікке ие.

Тиісінше, EMR HDFS пайдаланады ма?

EMR Файлдық жүйе (EMRFS) Сіз пайдалана алады не HDFS немесе Amazon S3 кластеріңіздегі файлдық жүйе ретінде. Көбінесе Amazon S3 болып табылады кіріс және шығыс деректерді сақтау үшін пайдаланылады және аралық нәтижелер сақталады HDFS.

s3a дегеніміз не?

S3A (URI схемасы: s3a ) мұрагері S3 Native, s3n fs, the S3a : жүйе өзара әрекеттесу үшін Amazon кітапханаларын пайдаланады S3 . Бұл мүмкіндік береді S3a үлкенірек файлдарды қолдау үшін (5 ГБ шектеусіз), жоғары өнімділік операцияларын және т.б.

Ұсынылған: