Мазмуну:

Sparkти жергиликтүү иштете аламбы?
Sparkти жергиликтүү иштете аламбы?

Video: Sparkти жергиликтүү иштете аламбы?

Video: Sparkти жергиликтүү иштете аламбы?
Video: Prolonged Field Care Podcast 134: Blood Storage for Prolonged Field Care 2024, Апрель
Anonim

Spark болот бол чуркоо ичинде орнотулган өз алдынча кластер пландоочусун колдонуу жергиликтүү режими. Бул бардык дегенди билдирет Spark процесстер болуп саналат чуркоо ошол эле JVM ичинде-натыйжалуу, бир, көп агымдуу инстанция Spark.

Ушуга байланыштуу, мен Apache sparkти кантип иштетем?

Төмөнкү кадамдар Apache Spark кантип орнотууну көрсөтөт

  1. 1-кадам: Java орнотууну текшерүү.
  2. 2-кадам: Scala орнотууну текшерүү.
  3. 3-кадам: Scala жүктөп алуу.
  4. 4-кадам: Scala орнотуу.
  5. 5-кадам: Apache Spark жүктөө.
  6. 6-кадам: Spark орнотуу.
  7. 7-кадам: Spark орнотууну текшерүү.

Андан тышкары, биз Hadoopсуз учкунду иштете алабызбы? ылайык Spark документтер, Spark Hadoopсуз иштей алат . сен Май аны иштет өз алдынча режим катары жок кандайдыр бир ресурс менеджери. Бирок эгер сен келет чуркоо көп түйүн орнотууда, сен YARN же Mesos сыяктуу ресурс менеджери жана бөлүштүрүлгөн файл системасы керек HDFS , S3 ж.б. Ооба, Spark hadoop жок иштей алат.

Жогоруда айтылгандай, мен кантип спаркты өз алдынча режимде иштетем?

Орнотуу Spark Standalone режими , сиз жөн гана компиляцияланган версиясын жайгаштырасыз Spark кластердеги ар бир түйүндө. Сиз алдын ала курулган версияларын ала аласыз Spark ар бир чыгаруу менен же аны өзүңүз түзүңүз.

Spark Windowsта иштей алабы?

А Spark колдонмо болот болуу а Windows -shell скрипти же аны болот жазуу жүзүндө Java, Scala, Python же R боюнча ыңгайлаштырылган программа болуңуз. Сизге керек Windows тутумуңузда орнотулган аткарылуучу файлдар чуркоо бул колдонмолор.

Сунушталууда: