Hvordan lage Hadoop -klynge med Amazon Emr

Brukeren trenger verktøyene som Hadoop for å lagre, administrere og analysere Big Data of Data i skala, og det er vanskelig på stedet å håndtere det. Lagring og administrasjon av at mye data kan gjøres ved å distribuere dem over flere datamaskiner. Amazon leverer EMR-tjenesten for å administrere disse klyngene på skyen uten å bekymre seg for distribusjon, utgifter og tidsforbruksproblemer.

La oss begynne med å lage en Hadoop -klynge med Amazon EMR.

Lag Hadoop Cluster med Amazon Emr

For å lage en Hadoop -klynge med Amazon EMR, ta turen inn i EMR -dashbordet og klikk på “Lag klynge”Knapp:

Skriv inn navnet på klyngenavnet og velg applikasjonene for EMR -klyngen:

Konfigurer maskinvare- og sikkerhetsinnstillingene ved å bla nedover siden og deretter klikke på "Lag klynge”Knapp for å fullføre prosessen:

Etter det, ta turen inn i EC2 -dashbordet fra AWS -plattformen for å validere forekomstene som er opprettet av EMR -klyngen:

Klikk på "Sikkerhetsgrupper”Side fra venstre panel og utvid“Handlinger”Tab for å klikke på“Rediger inngående regler”-Knappen etter å ha valgt EMR Master Security Group:

Legg til en inngående regel for å velge en SSH -port som kan være tilgjengelig hvor som helst på internett og deretter klikke på "Lagre regler”Knapp:

Gjenta igjen forrige trinn med EMR Slave Security Group ved å redigere inngående regler:

Velg SSH -porten som vil få tilgang til hvor som helst, og klikk deretter på "Lagre regler”Knapp:

Når EMR -klyngen er opprettet, klikker du bare på "Aktiver en SSH -tilkobling”Link:

Etter det, start “Kitt”Og følg instruksjonene gitt av plattformen:

Når alle trinnene er fullført på kitt, klikker du bare på "Åpen”Knapp:

Brukeren er koblet til Hadoop -klyngen med Amazon EMR:

Du har opprettet og koblet til Hadoop -klyngen ved hjelp av EMR.

Konklusjon

For å lage en Amazon EMR -klynge, ta turen inn i EMR -dashbordet og klikk på "Lag klynge”-Knappen. Konfigurer innstillingene for EMR -klyngen ved å skrive navnet og velge Hadoop -applikasjonen for klyngen. Etter det, rediger de inngående reglene for sikkerhetsgruppene som er opprettet av EMR -klyngen, og bruk deretter kitt for å koble til klyngen.