--- title: 【禁断の比較？】SnowflakeとTreasure Dataを比べてみました description: SnowflakeとTreasure Dataをエンジニア目線で比較してみました！ image: https://user-images.strikinglycdn.com/res/hrscywv4p/image/upload/c_limit,fl_lossy,h_9000,w_1200,f_auto,q_auto/1483830/02_-_Arch_-_EPP_-_Snowflake_Physical_Architecture_ryt8za.png --- ![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png) ![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png?width=400&height=110&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF.png) [![お問い合わせ](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/c64a7bb0-e32a-499b-851b-b4e7a66da275.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/c64a7bb0-e32a-499b-851b-b4e7a66da275) - [Snowflakeとは](https://service.insight-lab.co.jp/snowflake) - [SNOWFLAKEナレッジ](https://knowledge.insight-lab.co.jp/snowflake) - [お役立ち資料](https://download.insight-lab.co.jp/snowflake/download) ###### 5 分で読むことができます # [【禁断の比較？】SnowflakeとTreasure Dataを比べてみました](https://knowledge.insight-lab.co.jp/snowflake/snowflake-vs-treasuredata) 執筆者 [BI LAB編集室](https://knowledge.insight-lab.co.jp/snowflake/author/bi-lab) 更新日時 2021年5月24日 ###### Topics: [SQL](https://knowledge.insight-lab.co.jp/snowflake/tag/sql) [DWH](https://knowledge.insight-lab.co.jp/snowflake/tag/dwh) [snowflake](https://knowledge.insight-lab.co.jp/snowflake/tag/snowflake) [treasuredata](https://knowledge.insight-lab.co.jp/snowflake/tag/treasuredata) ![SnowflakeとTreasure Dataをエンジニア目線で比較してみました！](https://user-images.strikinglycdn.com/res/hrscywv4p/image/upload/c_limit,fl_lossy,h_9000,w_1200,f_auto,q_auto/1483830/02_-_Arch_-_EPP_-_Snowflake_Physical_Architecture_ryt8za.png) 目次 ここ最近「SnowflakeとTreasure Dataの違いを教えてほしい」 といった質問を頂くことが増えています。 どちらもクラウドDWH(データウェアハウス)や、 クラウドデータプラットフォームと呼ばれるように、競合するプロダクトですね。 クラウドのスケールメリットを活かしている点、 ユーザビリティの高いGUIが用意されている点など、共通点が多いです。 2011年に米国で日本人が創業し、 2013年から今日に至るまで日本国内での普及を着実に進めていったTreasure Data。 2012年に米国で元Oracle出身者が創業し、 グローバルでの評価を確固たるものとし、 満を持して2019年に日本法人を設立したSnowflake。 [グローバルでの知名度は圧倒的にSnowflakeの方が高い](https://knowledge.insight-lab.co.jp/sisense/data-modeling/sisense-snowflake-1)のですが 日本国内での歴史はまだ浅く、 国内においてはTreasure Dataの方が知名度が高く、 導入企業も多いです。 ただし、 日本法人が設立されてから Snowflakeの国内導入企業が一気に増えているため、 それに伴って両プロダクトの違いを気にする人が増えているのでしょう。 しかし、 SnowflakeとTreasure Dataを比較した記事って 調べても殆ど出てきません…。 比較したらヤバい人にヤバいことをされてしまうのでしょうか？ ということで今回は、 どちらも1~2年ほど使用経験のある私が、 経験を元に様々な観点から比較してみました！ ## アーキテクチャ | Snowflake | - マルチクラスタ共有データアーキテクチャ - コンピュートリソースとストレージリソースを分離したアーキテクチャ | | --- | --- | | Treasure Data | - MPPアーキテクチャ - コンピュートリソースとストレージリソースが結合したアーキテクチャ |   #### Snowflake 特許取得済のマルチクラスタ共有データアーキテクチャを採用しており、 コンピュートリソースとストレージリソースが分離しています。 ※コンピュートリソース = CPU、ストレージ リソース = HDD/SSDでイメージして下さい！ これによって複数のワークロードを完全に競合なく同時実行することができ、 コンピュートリソースの増強（スケールアップ/スケールアウト）も ダウンタイムなしに行うことができます。 また、独自の[マイクロパーティション](https://docs.snowflake.com/ja/user-guide/tables-clustering-micropartitions.html)技術によって、 パフォーマンス・チューニング（Treasure Dataにおけるtime列の指定、Redshiftにおけるソートキー/分散キーの指定など）をしなくとも高速な処理を実現できます。 [クラスタリングキー](https://docs.snowflake.com/ja/user-guide/tables-clustering-keys.html)を設定してパフォーマンス・チューニングすることも可能ですが、未設定状態でも速度的な問題は生じにくいです。 ![スノーフレークアーキテクチャ](https://user-images.strikinglycdn.com/res/hrscywv4p/image/upload/c_limit,fl_lossy,h_9000,w_1200,f_auto,q_auto/1483830/02_-_Arch_-_EPP_-_Snowflake_Physical_Architecture_ryt8za.png) #### Treasure Data Hadoopをベースに改良したMPPアーキテクチャを採用しており、 コンピュートリソースとストレージリソースが結合しています。 独自のカラムナーインデックス＆タイムインデックス技術によって 素のHadoopよりは処理性能が高いです。 ただ、処理速度を上げるには タイムインデックスを考慮したDB設計をする必要があり、 他のDBのように設計すると、パフォーマンスを発揮することが出来ません。 ★タイムインデックスとは？ Treasure Dataにはインデックスが効くtimeカラム（unixtimeが格納されるカラム）が全テーブルに自動的に作られます。 →データを検索する際、このtime列を指定しないと全件検索になってしまい、処理速度低下に繋がります。 Treasure DataのバックエンドはAWS(EC2/S3/RDS等)で動いており、 これを活かしてダウンタイムなしにスケールアウトは可能なのですが、 Snowflakeのアーキテクチャと比較するとどうしても同時実行性能が劣ってしまいます。 ![Hadoopアーキテクチャ](https://user-images.strikinglycdn.com/res/hrscywv4p/image/upload/c_limit,fl_lossy,h_9000,w_1200,f_auto,q_auto/1483830/612864_940846.png) 【図の引用元】[Hadoop-Vs-Snowflake](https://community.snowflake.com/s/article/Hadoop-Vs-Snowflake) ## クエリ | Snowflake | - ANSI準拠の標準SQL - 互換性の高い関数をサポート | | --- | --- | | Treasure Data | - PrestoSQL/HiveQL - 独自の関数が多い | #### Snowflake ANSI(米国規格協会)準拠の標準SQLを使用できるため、 SQL経験者であれば何不自由なくクエリを発行することができます。 さらに他のDBと互換性の高い関数を豊富にサポートしています。 よって、 他のDBから移行がしやすく、 再設計のコストを抑えることができるでしょう。   #### Treasure Data クエリ発行時に2つのエンジンを選択することができ、 Prestoを選択したらPrestoSQL、 Hiveを選択したらHiveQL と言われるSQLの派生言語を使用することになります。 ちなみにPrestoSQLはANSIに準拠しているため、 「じゃあ全部PrestoSQLで書けばいいじゃん」と思いがちですが、 そうはいきません。 各エンジンには向き不向きがあり、 アドホック処理ならPresto/バッチ処理ならHive… といったように使い分ける必要があります。 また、 関数はTreasure Data独自のものが大半を占めるため、 他のDBからの移行は時間がかかるでしょう。 ちなみに、PrestoはSELECT句での相関サブクエリをサポートしており、 Snowflakeは[サポートしていません](https://snowflakecommunity.force.com/s/question/0D50Z000094cQzfSAE/does-snowflake-support-correlated-subqueries)。 他にもRedshift等、サポートしているDBは多いです。 よって、 SELECT句での相関サブクエリを含んだ処理を移行する必要がある場合は SnowflakeよりもTreasure Data（Presto）の方が 再設計のコストを抑えることができるでしょう。 とはいっても実務上、SELECT句での相関サブクエリは頻繁に使われないため、あまり気にしないでも良いとは思いますが。   ## データ連携 | Snowflake | - オブジェクトストレージに直接接続できる - それ以外は別途データ連携ツール（ETLツール）を用意する必要がある | | --- | --- | | Treasure Data | - 直接様々なデータソースに接続できる | #### Snowflake [ストレージ統合](https://docs.snowflake.com/ja/sql-reference/sql/create-storage-integration.html)を設定することで、 Amazon S3やGoogle Cloud Storageといった オブジェクトストレージとシームレスに連携することができます。 ![CloudBerry ExplorerでAmazon S3を簡単に操作する | It works for me](https://www.blog.danishi.net/wp-content/uploads/2019/04/s3.png)　![Google Cloud Storage 独自ドメインで静的ウェブサイトをホストする | あぱーブログ](https://blog.apar.jp/wp-content/uploads/2017/07/ogp-gcs-650x341.png)　![Introduction to blob storage](https://2.bp.blogspot.com/-zD9iKM_HllM/XA800ftKhrI/AAAAAAAABJU/RRx6nxBdXOQWzYWQ1f06tmS2xZ9SD-oiACLcBGAs/s640/Azure%2Bblob%2Bstorage.png) オブジェクトストレージ以外のデータソース… 例えば他社製DWH（[Redshift](https://knowledge.insight-lab.co.jp/bi/redshift-ddl-performance), BigQuery等）やSaaS（Salesforce, Google Analytics, Adobe Analytics等）のデータを直接連携することはできないため、 別途データ連携ツール（[trocco](https://knowledge.insight-lab.co.jp/snowflake/trocco-slack-snowflake), Talend, Matillion等）を用意する必要があります。 ちなみに、 Snowflake にはData Marketplaceというオープンデータ共有サービスが用意されているため、 オープンデータ（最近だとCovid-19の統計データ等）については データ連携ツールの用意は不要でカジュアルに分析することができます。   #### Treasure Data GUI上で設定できる豊富な[データ連携用コネクタ](https://www.treasuredata.co.jp/data-integrations/)が用意されています。 別途データ連携ツールを用意しないでも、 直接様々なデータソースに接続し、 データを取得することができます。 そのため、 自身が用意したデータをデータ連携ツール（ETLツール）を 使用しないで直接接続したい場合はTreasure Dataの方が向いています。 ![](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/image-png-May-20-2021-09-56-23-99-AM.png?width=784&name=image-png-May-20-2021-09-56-23-99-AM.png)   ## ワークフロー（データ処理の自動化）の定義 | Snowflake | - TASKを使用する - SQLで記述 - GUIの管理画面が存在しない - エラー通知機能がない | | --- | --- | | Treasure Data | - Treasure Workflowを使用する - YAMLで記述 - GUIの管理画面が存在する - エラー通知機能がある | #### Snowflake [TASK](https://knowledge.insight-lab.co.jp/snowflake/create_task)を使用します。 SQLで記述するので習得難易度は低いですが、 GUIの管理画面が存在しない（※2021年5月現在）ため、 TASK数が増大すると運用が難しくなりがちです。 また、エラー通知機能がないため、 TASKのエラーを監視するには何らかの通知サービスと 連携する仕組みを実装する必要があります。 （例：[Snowflakeのタスク失敗通知をAWSで実装してみた](https://knowledge.insight-lab.co.jp/snowflake/failed-task-notification-aws)） …正直、 SnowflakeはあまりTASKに頼らずに[dbt](https://www.getdbt.com/)等の外部ツールで ワークフローを定義した方が ハッピーワークフローライフを送ることができるでしょう。 あと[Datadog](https://docs.datadoghq.com/ja/integrations/snowflake/)がSnowflakeに対応しているので、 監視用に導入するのも良いかもしれません。   #### Treasure Data [DigDag](https://www.digdag.io/)（有名なOSSのワークフローエンジン）ベースのTreasure Workflowを使用します。 そのため、 DigDag経験者は経験を活かせるでしょう。 未経験者は若干覚えることが多いですが、 その分細かい設定が可能です。 また、Treasure WorkflowはGUIの管理画面が存在し、 エラー通知機能もあるため、 SnowflakeのTASKよりも運用面で優れていると言えるでしょう。   ## 最後に いかがでしたでしょうか。 「で、どっちがいいの？」と聞かれたら…弊社はSnowflakeのパートナーなので察して下さい^^ 新規導入をご検討されている場合は、 長期的に見てコストを抑えられるSnowflakeがお勧めですが、 外部ツール（データ連携ツールや監視ツール等）も含めて最適な構成をご検討頂きたいと思います。 どうしても1つのプロダクトで完結させたい場合は、 Treasure Dataがお勧めです。 ワークフロー管理やエラー通知、 データ連携はもちろん、 [Hivemall](https://hivemall.apache.org/)を使うと機械学習までTreasure Data内で完結することができるので。 他のDWHからの移行をご検討されている場合は、 SQLの互換性能が高い＆費用対効果が高い（コスパが良い）Snowflakeをお勧めします！ [Fivetran社のベンチマーク結果](https://fivetran.com/blog/warehouse-benchmark)から見ても、 Amazon RedshiftやGoogle BigQueryと比較してももコスパが良いのは間違いないでしょう。 以上、「【禁断の比較？】SnowflakeとTreasure Dataを比べてみました」でした！ Snowflakeを体験してみませんか？ INSIGHT LABではSnowflake紹介セミナーを定期開催しています。Snowflakeの製品紹介だけでなく、デモンストレーションを通してSnowflakeのシンプルなUI操作や処理パフォーマンスの高さを体感いただけます。 [![詳細はこちら](https://hubspot-no-cache-na2-prod.s3.amazonaws.com/cta/default/5935783/0d0b0d86-fdb7-4351-ab14-d482c854defc.png)](https://hubspot-cta-redirect-na2-prod.s3.amazonaws.com/cta/redirect/5935783/0d0b0d86-fdb7-4351-ab14-d482c854defc) - [Tweet](https://twitter.com/share) ![BI LAB編集室](https://knowledge.insight-lab.co.jp/hubfs/image%20(3)-3.png) #### 執筆者 [BI LAB編集室](https://knowledge.insight-lab.co.jp/snowflake/author/bi-lab) BI LAB（データ活用研究所）編集室です。 BI、AI、DWHなどデータ活用に関するトレンドやニュースやコラムをほぼ毎日配信しています。押さえておきたい基本知識から、最新ニュース、事例インタビューやお役立ち情報・セミナーレポートまで、データ活用の専門家ならではの視点と情報量でお届けします。 ###### [前の投稿](https://knowledge.insight-lab.co.jp/snowflake/snowflake-metabase-connect) [![](https://knowledge.insight-lab.co.jp/hubfs/image-png-Apr-23-2021-12-45-17-82-PM.png)](https://knowledge.insight-lab.co.jp/snowflake/snowflake-metabase-connect) ###### [OSSのBI「Metabase」からSnowflakeに繋いでみた](https://knowledge.insight-lab.co.jp/snowflake/snowflake-metabase-connect) ###### [次の投稿](https://knowledge.insight-lab.co.jp/snowflake/preview-snowsight) [![](https://knowledge.insight-lab.co.jp/hubfs/2021-05-26v2-gif.gif)](https://knowledge.insight-lab.co.jp/snowflake/preview-snowsight) ###### [【可視化】Snowflakeの新しいSQLワークシート「Snowsight」を触ってみた](https://knowledge.insight-lab.co.jp/snowflake/preview-snowsight) RECOMMEND こちらの記事も人気です。 ###### 4 分で読むことができます。 ##### [Snowflakeの料金体系｜クレジットと費用最適化のポイントをご紹介](https://knowledge.insight-lab.co.jp/snowflake/pricing) ###### 2021年 6月 28日 ###### 12 分で読むことができます。 ##### [【Snowflake×dbt】データパイプライン構築](https://knowledge.insight-lab.co.jp/snowflake/dbt-data-pipeline) ###### 2022年 6月 17日 ###### 5 分で読むことができます。 ##### [【禁断の比較？】SnowflakeとTreasure Dataを比べてみました](https://knowledge.insight-lab.co.jp/snowflake/snowflake-vs-treasuredata) ###### 2021年 5月 24日 ###### 1 分で読むことができます。 ##### [Snowsightでどこまでできるか！？限界に挑戦！](https://knowledge.insight-lab.co.jp/snowflake/snowsight-executive-dashboard) ###### 2023年 12月 14日 ###### 5 分で読むことができます。 ##### [【Snowflake】新機能「Streamlit in Snowflake」とは何者か！？](https://knowledge.insight-lab.co.jp/snowflake/-snowflake-streamlit-in-snowflake-introduce) ###### 2023年 9月 21日 ###### 2 分で読むことができます。 ##### [【Snowflake】get\_ddl関数でオブジェクトの定義を取得して再利用する](https://knowledge.insight-lab.co.jp/snowflake/function-get-ddl) ###### 2020年 7月 28日 ##### 運営会社 運営会社 - [会社概要](https://insight-lab.co.jp/about/) - [お問い合わせ](https://contact.insight-lab.co.jp/main) ##### メニュー メニュー - [Snowflakeとは](https://service.insight-lab.co.jp/snowflake) - [Snowflakeナレッジ](https://knowledge.insight-lab.co.jp/snowflake) - [お役立ち資料](https://download.insight-lab.co.jp/snowflake/download) [![INSIGHT LAB](https://knowledge.insight-lab.co.jp/hs-fs/hubfs/INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png?width=200&height=55&name=INSIGHT%20LAB_%E6%96%87%E5%AD%97%E3%81%AE%E3%81%BF_WHT-1.png "INSIGHT LAB")](https://www.insight-lab.co.jp/) - [プライバシーポリシー](https://www.insight-lab.co.jp/privacy.html) Copyright © 2020 INSIGHT LAB, Inc.