Mikä on Emrfs?
Mikä on Emrfs?

Video: Mikä on Emrfs?

Video: Mikä on Emrfs?
Video: Mikä on 2024, Marraskuu
Anonim

EMR-tiedostojärjestelmä ( EMRFS ) on HDFS-toteutus, jota kaikki Amazon EMR -klusterit käyttävät tavallisten tiedostojen lukemiseen ja kirjoittamiseen Amazon EMR:stä suoraan Amazon S3:een. Tietojen salauksen avulla voit salata objektit, jotka EMRFS kirjoittaa Amazon S3:een ja ottaa käyttöön EMRFS työskentelemään salattujen objektien kanssa Amazon S3:ssa.

Mikä on Emrfsin johdonmukainen näkemys tästä?

The EMRFS-yhteensopiva näkymä luo ja käyttää metatietoja Amazon DynamoDB -taulukossa ylläpitääkseen a johdonmukainen näkemys S3-objekteistasi. Tämä taulukko seuraa tiettyjä toimintoja, mutta se ei sisällä tietojasi.

mitä eroa on s3:lla ja s3a:lla? Tämä on ero välillä kolme: s3 on lohkopohjainen peittokuva Amazonin päällä S3 , kun taas s3n/ s3a eivät ole. Nämä ovat objektipohjaisia. s3n tukee jopa 5 Gt:n kohteita, kun koko on huolenaihe s3a tukee objekteja 5 Tt asti ja sillä on parempi suorituskyky.

Käyttääkö EMR siis HDFS:ää?

EMR Tiedostojärjestelmä (EMRFS) Sinä voi käyttää jompikumpi HDFS tai Amazon S3 klusterin tiedostojärjestelmänä. Useimmiten Amazon S3 On käytetään syöttö- ja lähtötietojen tallentamiseen ja välitulokset tallennetaan HDFS.

Mikä on s3a?

S3A (URI-kaavio: s3a ) seuraaja S3 Alkuperäinen, s3n fs, S3a : järjestelmä käyttää Amazonin kirjastoja vuorovaikutukseen S3 . Tämä mahdollistaa S3a tukee suurempia tiedostoja (ei enempää 5 Gt:n rajoitusta), tehokkaampia toimintoja ja paljon muuta.

Suositeltava: