AWS Hadoopду колдойбу?
AWS Hadoopду колдойбу?

Video: AWS Hadoopду колдойбу?

Video: AWS Hadoopду колдойбу?
Video: Multinode Hadoop installation in AWS | Hadoop Cluster Setup 2024, Май
Anonim

Apache™ Hadoop ® чоң маалымат топтомдорун натыйжалуу иштетүү үчүн колдонула турган ачык булактуу программалык камсыздоо долбоору. Amazon EMR толук конфигурацияланган, ийкемдүү кластерлерди түзүүнү жана башкарууну жеңилдетет Amazon EC2 учурлар иштеп жатат Hadoop жана башка колдонмолордо Hadoop экосистема.

Демек, AWS Hadoop колдонобу?

Amazon Веб кызматтары колдонот ачык булак Apache Hadoop маалыматтарды көп талап кылган тапшырмаларды аткаруу үчүн чоң көлөмдөгү эсептөө кубаттуулугуна жетүүнү жеңилдетүү үчүн бөлүштүрүлгөн эсептөө технологиясы. Hadoop , Google'дун MapReduce'дун ачык булактуу версиясы, буга чейин Yahoo жана Facebook сыяктуу компаниялар тарабынан колдонулуп келет.

Экинчиден, AWS EMR эмне кылат? Amazon Elastic MapReduce ( EMR ) болуп саналат а Amazon Веб кызматтары ( AWS ) чоң маалыматтарды иштетүү жана талдоо куралы. Amazon EMR виртуалдык серверлердин Hadoop кластери боюнча чоң маалыматтарды иштетет Amazon Эластикалык эсептөө булуту ( EC2 ) жана Amazon Жөнөкөй сактоо кызматы (S3).

Ушундайча, Hadoop менен AWSтин ортосунда кандай айырма бар?

Hadoop бир нече компьютерлерде чоң маалымат топтомун иштетүүгө жардам берген алкак. Ал Карта/Кыскартуу (параллель иштетүү) жана HDFS (бөлүштүрүлгөн файл системасы) камтыйт. AWS алгач ParAccel тарабынан иштелип чыккан менчик технологиянын үстүнө курулган маалымат кампасы. Apache үчүн кээ бир жалпы колдонуу кандай Hadoop ?

AWS s3 Hadoopбу?

S3 чындыгында булуттагы чексиз сактагыч, бирок HDFS эмес. HDFS физикалык машиналарда жайгаштырылган, ошондуктан сиз каалаган программаны ошол жерден аткара аласыз. Сиз эч нерсе кыла албайсыз S3 ал FS эмес, жөн гана Object Store катары.

Сунушталууда: