エンジンタイプ | エンジンコアバージョン | 説明 |
Presto | SuperSQL-P 1.0 | ネイティブのPresto 0.242バージョンに基づいて実装されており、動的なデータソースのロード、Dynamic Filterの強化、Iceberg V2テーブル、非パーティションテーブルのINSERT OVERWRITE、Hive UDFの実行をサポートしています。 |
SparkSQL | SuperSQL-S 1.0 | ネイティブのSpark3.2バージョンに基づいて実装されており、これに基づいてIceberg 1.1.0、Hudi 0.12.0、Adaptive Shuffle Managerをサポートしています。 |
| SuperSQL-S 1.0（Native） | ネイティブのSpark3.2バージョンに基づいて実装されており、これに基づいてIceberg 1.1.0をサポートしています。現在のバージョンはベータ版であり、Tencent Cloud Meson Engineが提供するNativeランタイム環境を使用し、ベクトル化などの技術を用いてSQLクラスアプリケーションの実行性能を加速します。一部のシナリオでは、SuperSQL 1.0バージョンと比較して2倍以上の性能向上をもたらすことができます。 |
| SuperSQL-S 3.5 | ネイティブのSpark3.5バージョンに基づいて実装されており、これに基づいてIceberg 1.5.0、Adaptive Shuffle Managerをサポートしています。 現在のバージョンはベータ版であり、一部のシナリオではSuperSQL 1.0バージョンと比較して33%以上の性能向上があります。 |
SparkBatch | Spark 3.5 | ネイティブのSpark3.5バージョンに基づいて実装されており、これに基づいてIceberg 1.5.0、Python3、Adaptive Shuffle Managerをサポートしています。 現在のバージョンはベータ版であり、一部のシナリオではSpark 3.2と比較して33%以上の性能向上があります。 |
| Spark 3.2 | ネイティブのSpark3.2バージョンに基づいて実装されており、これに基づいてIceberg 1.1.0、Hudi 0.12.0、Python3をサポートし、Adaptive Shuffle Managerをサポートしています。 |
| Spark 3.2（Native） | ネイティブのSpark3.2バージョンに基づいて実装されており、これに基づいてIceberg 1.1.0をサポートしています。現在のバージョンはベータ版であり、Tencent Cloud Meson Engineが提供するNativeランタイム環境を使用し、ベクトル化などの技術を通じてSQLクラスアプリケーションの実行性能を加速します。一部のシナリオでは、Spark 3.2と比較して2倍以上の性能向上をもたらすことができます。 |
| Spark 2.4 | ネイティブのSpark2.4バージョンに基づいて実装されており、これに基づいてIceberg 0.13.1、Python2、Python3をサポートしています。 |
フィードバック