Spark кайсы Python версиясын колдонот?
Spark кайсы Python версиясын колдонот?

Video: Spark кайсы Python версиясын колдонот?

Video: Spark кайсы Python версиясын колдонот?
Video: Pascal и Delphi живы? / История / Популярность / Мифы / Возможности / Преимущества и недостатки 2024, Май
Anonim

Spark Java 8+ менен иштейт, Python 2.7+/3.4+ жана R 3.1+. Scala API үчүн, Spark 2.3. 0 колдонот Scala 2.11. Сиз керек болот колдонуу шайкеш Scala версия (2.11.

Тиешелүү түрдө Spark Python 3 менен иштейби?

Apache Spark бул кластердик эсептөө тутуму, учурда ачык булактуу Big Data аренасында эң активдүү өнүккөндөрдүн бири. 1.4 акыркы версиясынан бери (2015-жылдын июнь айы), Spark R жана колдойт Python 3 (Java, Scala жана мурун колдо болгон колдоону толуктоо үчүн Python 2).

Жогорудагыдан тышкары, Pythonдун учкун версиясын кантип өзгөртө алам? Эгер сиз гана кааласаңыз өзгөртүү the питон версиясы учурдагы тапшырма үчүн, төмөнкү pyspark баштоо буйругун колдоно аласыз: PYSPARK_DRIVER_PYTHON=/home/user1/anaconda2/bin/ питон PYSPARK_PYTHON=/usr/local/anaconda2/bin/ питон pyspark --мастер..

Андан тышкары, акыркы учкун версиясы кандай?

Apache Spark

Түпнуска автор(лар) Матей Захария
биринчи чыгарылыш 26-май, 2014-жыл
Туруктуу чыгаруу 2.4.5 / 8-февраль, 2020-жыл
Репозиторий Spark Repository
жылы жазылган Scala

Spark Python деген эмне?

Apache менен чоң маалыматтарды колдонуу Spark жана Python Py4J ичинде интеграцияланган популярдуу китепкана болуп саналат PySpark ошол берет питон JVM объектилери (RDD) менен динамикалык интерфейс. Apache Spark үчүн интерактивдүү кабык менен келет питон Скала үчүн болгондой. үчүн кабык питон катары белгилүү PySpark ”.

Сунушталууда: