S3 HDFS негизиндеби?
S3 HDFS негизиндеби?

Video: S3 HDFS негизиндеби?

Video: S3 HDFS негизиндеби?
Video: Which filesystem to use HDFS or Amazon S3 2024, Ноябрь
Anonim

S3 чындыгында булуттагы чексиз сактагыч, бирок HDFS эмес. HDFS физикалык машиналарда жайгаштырылган, ошондуктан сиз каалаган программаны ошол жерден аткара аласыз. Сиз эч нерсе кыла албайсыз S3 ал FS эмес, жөн гана Object Store катары.

Анда, s3 бөлүштүрүлгөн файл тутумубу?

S3 а эмес бөлүштүрүлгөн файл системасы . Бул ачкыч-маани түгөйлөрүндө маалыматтарды сактаган бинардык объекттер дүкөнү. Бул негизинен NoSQL маалымат базасынын бир түрү. Ар бир чака жаңы "маалымат базасы", ачкычтар сиздин "папка жолуңуз" жана баалуулуктар бинардык объекттер ( файлдар ).

AWS Hadoop негизиндеби? Hadoop бир нече компьютерлерде чоң маалымат топтомун иштетүүгө жардам берген алкак. Ал камтыйт Карта/Кыскартуу (параллель иштетүү) жана HDFS (бөлүштүрүлгөн файл системасы). AWS маалымат кампасы болуп саналат курулган башында ParAccel тарабынан иштелип чыккан менчик технологиянын үстүнө.

Мындан тышкары, файлдарды s3тен HDFSге кантип өткөрөм?

Жооп. Түздөн-түз жок файлдарды S3ден HDFSге көчүрүү жолу жергиликтуу ара-кеттенбей файлдар . Бирок, сиз tSystem компонентин стандарттуу Аюбда жергиликтүү телефонго чакыруу үчүн колдоно аласыз Hadoop адатта сиз колдонгон буйрук файлдарды көчүрүү , Мисалы, s3 -dist-cp.

s3 маалымат базасы деген эмне?

Amazon S3 же Amazon Simple Storage Service - Amazon Web Services (AWS) тарабынан сунушталган кызмат, ал веб-кызмат интерфейси аркылуу объекттин сакталышын камсыз кылат. Amazon S3 Amazon.com өзүнүн глобалдык электрондук соода тармагын иштетүү үчүн колдонгон масштабдуу сактагыч инфраструктурасын колдонот.

Сунушталууда: