Mi az új a Sparkban?
Mi az új a Sparkban?

Videó: Mi az új a Sparkban?

Videó: Mi az új a Sparkban?
Videó: Shakira - Chantaje (Official Video) ft. Maluma 2024, November
Anonim

A hibajavításokon kívül 2 van új jellemzők benne Szikra 2.4: SZIKRA -22239 Felhasználó által definiált ablakfunkciók Pandas UDF-fel. SZIKRA -22274 Felhasználó által definiált összesítő függvények pandas udf segítségével. Ezekben hiszünk új A funkciók tovább javítják a Pandas UDF alkalmazását, és a következő kiadásokban folyamatosan fejlesztjük a Pandas UDF-et.

Hasonlóképpen, mi a Spark legújabb verziója?

Történelem

Változat Eredeti megjelenési dátum Legújabb verzió
2.2 2017-07-11 2.2.3
2.3 2018-02-28 2.3.3
2.4 2018-11-02 2.4.4
Jelmagyarázat: Régi verzió Régebbi verzió, továbbra is karbantartva Legújabb verzió Legújabb előnézeti verzió

A fentieken kívül a spark SQL ANSI kompatibilis? A következő állapot szerint: Szikra 2.0, Szikra van ANSI SQL :2003 megfelelő , ami azt jelenti Spark SQL támogatja SQL olyan műveletek, amelyek más nyelvjárásokban nem elérhetők.

Itt a spark támogatja a Java 11-et?

Scala és Jáva a felhasználók tartalmazhatják Szikra projektjeikben a Maven koordináták használatával, és a Python-felhasználók telepíthetik Szikra PyPI-ből. Szikra fut tovább Jáva 8/ 11 , Scala 2.12, Python 2.7+/3.4+ és R 3.1+.

A spark SQL támogatja a frissítést?

2 válasz. Spark SQL nem támogatja a UPDATE nyilatkozatok még. A kaptár elkezdődött támogatja az UPDATE a hive 0.14-es verzió óta. De még Hive esetén is támogatja a frissítéseket /deletes csak azokon a táblákon, amelyek támogatás tranzakciókat, ez szerepel a kaptár dokumentációjában.