メインコンテンツまでスキップ
バージョン: Candidate-3.5

TPC-DS ベンチマーク

TPC-DS は、トランザクション処理性能評議会 (TPC) によって開発された意思決定支援ベンチマークです。これは、TPC-H よりも包括的なテストデータセットと複雑な SQL クエリを使用します。

TPC-DS は、意思決定支援システムの一般的に適用可能な側面をいくつかモデル化しており、クエリやデータメンテナンスを含みます。TPC-DS は、小売環境におけるデータベースシステムの性能をテストおよび評価するための包括的で現実的なワークロードを提供することを目的としています。TPC-DS ベンチマークは、小売企業の 3 つの販売チャネル（店舗、インターネット、カタログ）の販売および返品データをシミュレートします。販売および返品データモデルのテーブルを作成することに加えて、簡単な在庫システムとプロモーションシステムも含まれています。

このベンチマークは、データサイズが 1 GB から 3 TB の 24 のテーブルに対して合計 99 の複雑な SQL クエリをテストします。主な性能指標は各クエリの応答時間であり、クエリが送信されてから結果が返されるまでの時間です。

テスト結論​

テストは、StarRocks と Trino 上で TPC-DS 1 TB データセットに対して実施されます。以下の結果の単位はミリ秒です。

TPC-DS-SR

StarRocks では、テストクエリはその内部テーブル（共有なしおよび共有データアーキテクチャの両方）と Iceberg Catalog（共有データアーキテクチャの下）で実行されます。Trino では、同じ Iceberg Catalog でテストクエリが実行されます。Iceberg Catalog 上の StarRocks と Trino の両方のテストは、メタストアとして AWS Glue を使用し、ZSTD 圧縮された Parquet 形式のデータを使用します。

テスト結果は次のとおりです：

  • StarRocks 共有なしクラスタの OLAP テーブルで実行されたクエリは 314 秒かかりました。
  • StarRocks 共有データクラスタの OLAP テーブルで実行されたクエリは 326 秒かかりました。
  • StarRocks 共有データクラスタの Iceberg Catalog で実行されたクエリは 368 秒かかりました。
  • Trino の Iceberg Catalog で実行されたクエリは 2552 秒かかりました。

結論は次のとおりです：

  • StarRocks は、共有なしおよび共有データアーキテクチャの両方で同等の性能を発揮します

    OLAP テーブルクエリシナリオでは、StarRocks は共有なしモードで共有データモードの 1.04 倍の性能を達成し、ストレージとコンピュートの分離による性能オーバーヘッドが最小限であることを示しています。

  • StarRocks は、Lakehouse クエリシナリオで Trino を大幅に上回り、OLAP テーブルクエリではさらに大きな利点を持っています

    • Iceberg Catalog クエリシナリオでは、StarRocks は Trino の 6.93 倍の性能を発揮します。
    • OLAP テーブルクエリでは、性能差がさらに広がり、StarRocks は Trino の 8.13 倍（共有なしモード）および 7.82 倍（共有データモード）の性能を達成します。

テスト準備​

ハードウェア​

StarRocks と Trino は、同じ構成のホストにデプロイされています - AWS m6id.4xlarge.

Spec
インスタンス数5
vCPU16
メモリ (GiB)64
インスタンスストレージ (GB)1x950 NVMe SSD
ネットワーク帯域幅 (Gbps)最大 12.5
EBS 帯域幅 (Gbps)最大 10

ソフトウェア​

StarRocksTrino
クラスタサイズOne FE, four BEOne Coordinator, four Workers
バージョン3.5.0475
リリース日2025.6.132025.6.5
設定set query_mem_limit=66571993088; (62 GB)query.max-memory=224GB
query.max-memory-per-node=35GB

テスト結果​

以下の表は、99 のクエリに対する性能テスト結果を示しています。クエリの遅延の単位はミリ秒です。すべてのクエリは 1 回ウォームアップされ、その後 3 回実行され、平均値を結果として取ります。表のヘッダーの Trino vs StarRocks on Iceberg は、Trino のクエリ応答時間を StarRocks のクエリ応答時間で割ったものを意味します。値が大きいほど、StarRocks の性能が優れていることを示します。Iceberg Catalog 上でのテストの前に、StarRocks で ANALYZE TABLE および EXPLAIN COST ステートメントが実行され、統計が収集されます。

クエリStarRocksTrinoTrino vs StarRocks on Iceberg
OLAP テーブルIceberg CatalogIceberg Catalog
共有なし共有データ共有データ
SUM31358232616336840425520766.93
Q0167563672722763.13
Q0293592519492128910.92
Q0322014039917644.42
Q0417185162061674420024911.96
Q05417543172455743.23
Q0620018034329098.48
Q07814959179536382.03
Q0823518131925347.94
Q097097650323153361251.56
Q1029734349724714.97
Q111122910249977713323013.63
Q1212813020710675.15
Q134174472218182978.25
Q141511215055153101431729.35
Q1545547452521584.11
Q164765239751403514.39
Q17895948164554873.34
Q18802973154447363.07
Q1920926850718703.69
Q2014717625312574.97
Q2183804059452.33
Q2214621823238478713.30
Q238288784426507194886539.63
Q247649906411902434363.65
Q25795919140443473.10
Q2637651186829613.41
Q27458532139742193.02
Q286489600418727246781.32
Q29129621682129106405.00
Q3029533052927705.24
Q31217221622535102604.05
Q3211022527710353.74
Q3323524573427433.74
Q3440242269624553.53
Q3513531393156280235.14
Q36553559119333422.80
Q37263243217617828.47
Q38500252075519384086.96
Q3935636782056966.95
Q4012413457515542.70
Q414350762713.57
Q42811041979965.06
Q4348773372241085.69
Q44208721029364164681.76
Q4543147051422124.30
Q4614681829197647802.42
Q472921312031304270413.64
Q484675731441124648.65
Q49496547171538272.23
Q50376851353899217715.58
Q51482646333244122473.78
Q528710621910074.60
Q5344663595517681.85
Q541982667633186441.76
Q558210522111875.37
Q5617518649921334.27
Q571848178719162604213.59
Q5824124550330326.03
Q59393539083160208196.59
Q6026229264327494.28
Q6133034491320542.25
Q6250051984051046.08
Q6344862993717191.83
Q64450888868602169901.98
Q65569056175445206163.79
Q66387390133535112.63
Q67312862924021439894304.17
Q6824034168328834.22
Q6926029250121814.35
Q70290430123751214995.73
Q71272111163125784.09
Q72164218994969504573101.54
Q7318622838819334.98
Q74943391338890780718.78
Q75644677189082262702.89
Q76235623315028112662.24
Q7723824170127853.97
Q78175831659018614514972.77
Q7922012474159755723.49
Q80800855267247621.78
Q8151853376940405.25
Q826236138541162213.61
Q8315821740422745.63
Q8419543435130868.79
Q85455733108754244.99
Q8672573681934224.18
Q87481650045535413007.46
Q888712844419465307381.58
Q8953073091522272.43
Q90587581115038903.38
Q91959622720358.96
Q92781402289944.36
Q93372347055781229263.97
Q9460196396258846.12
Q951747310625752960711.50
Q9614441428256249051.91
Q97479548445383227264.22
Q9828432336519115.24
Q99113211841594109706.88