Spark'та эмне жаңылык?
Spark'та эмне жаңылык?

Video: Spark'та эмне жаңылык?

Video: Spark'та эмне жаңылык?
Video: Как кыргызстанские медиа писали о гибели 12 людей в Баткене (а затем удалили) 2024, Ноябрь
Anonim

Мүчүлүштүктөрдү оңдоодон башка 2 бар жаңы өзгөчөлүктөрү Spark 2.4: SPARK -22239 Pandas UDF менен колдонуучу аныктаган терезе функциялары. SPARK -22274 pandas udf менен колдонуучу аныктаган топтоо функциялары. Биз буларга ишенебиз жаңы өзгөчөлүктөр Pandas UDF кабыл алууну андан ары жакшыртат жана биз кийинки чыгарылыштарда Pandas UDFди жакшыртабыз.

Ошо сыяктуу эле, Spark акыркы версиясы кандай?

тарых

Версия Түпнуска чыгаруу датасы Акыркы версия
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Легенда: Эски версия Эски версия, дагы деле сакталган Акыркы версия Акыркы алдын ала көрүү версиясы

Жогорудагыдан тышкары, Spark SQL ANSI шайкеш келеби? боюнча Spark 2.0, Spark болуп саналат ANSI SQL :2003 ылайыктуу , дегенди билдирет Spark SQL колдойт SQL башка диалектилерде жок операциялар.

Бул жерде, Spark Java 11ди колдойбу?

Скала жана Java колдонуучулар камтышы мүмкүн Spark өз долбоорлорунда анын Maven координаттарын колдонуп, Python колдонуучулары орното алышат Spark PyPIден. Spark жүрөт Java 8/ 11 , Scala 2.12, Python 2.7+/3.4+ жана R 3.1+.

Spark SQL жаңыртууну колдойбу?

2 Жооптор. Spark SQL жок UPDATE колдоо билдирүүлөр азырынча. Уюк башталды UPDATE колдоо Hive 0.14 версиясынан бери. Бирок Hive менен да, ал жаңыртууларды колдойт / ошол таблицаларда гана жок кылат колдоо бүтүмдөр, ал уюк документтеринде айтылат.

Сунушталууда: