Snowflake 

Snowflake Summit 2025 最速レポート2日目④
-セッション・ブース編-

DATUM STUDIOの梶谷です。
今回は、Snowflake Openflowのセッションレポートをお届けします。Platform Keynoteの中でも目玉の1つであった Snowflake Openflow。「What’s New: Revolutionizing Data Movement with Snowflake Openflow」では、どのようにデータ統合を革新するのか、デモを交えて解説されました。また、私が訪問したブースもご紹介します!

What’s New: Revolutionizing Data Movement with Snowflake Openflow

はじめに:データ統合とAI

従来のデータ統合ツールは、AI に活かせるようには設計されていませんでした。容易性、接続性、AI readyであること、効率、信頼性のある拡張性、使いやすさが求められます。

そこでSnowflake Openflowが登場します。Snowflake OpenflowはAIファーストな世界に向けて設計されており、非構造化のマルチモーダルデータ、ストリーミングデータ、バッチデータを単一のプラットフォームで扱うことができます。

ストリーミング処理に優れたシステムもあれば、非構造化データに優れたシステムもあります。それぞれに適した別々のツールを持つことは非効率ですが、これらの異なるすべてのソースは単一のプラットフォームで、Snowflake Openflowを通じてアクセス可能になります。また、データがSnowflakeに到着するとすぐに分析を実行できるようインライン変換機能を備えているようです。

デモ(1):Snowflake Openflow UIでのランタイム作成

ここからは1回目のデモです。
Snowflake Openflowに入ると、最初のダッシュボードが表示され、ドキュメントへのリンク、コネクタの一覧などを表示します。

コネクタを設定したところで、デモは一旦終了。構成図ベースの解説に戻ります。

Snowflake Openflowの構成

こちらはSnowflake Openflowのコントロールプレーンとデプロイメント、コネクタの関係を示した図です。

IngestだけでなくDeriverにもSnowflake Openflowが登場しており、双方向で利用できることが示されていました。

また、今後の展開と料金体系についても言及がありました。

利用可能なコネクタの一覧。今後も続々と増やしていくとのことです。非構造化データ、構造化データ、ストリーミングデータなど幅広く対応しています。よく見ると Google Cloud の BigQuery がありますね。

デモ(2):ワークフロー構築

2度目のデモです。自動車メーカーを想定して、Kafka、PostgreSQL、boxからのデータ連携と通知をSnowflake Openflowで実行してみます。

It will work…!

PostgreSQL のコネクタを追加していきます。

そして出来上がったのがこちら。

実行ステータスはこのようにグラフで表示されます。

最後に:Oracleとのパートナーシップ

最後に、2日目のPlatform Keynoteで発表されていたOracleとのパートナーシップについて、こちらでも説明されていました。Oracleと直接データ連携が可能なのはさすがに熱いですね!(そして一瞬 ExaData と聞こえたような…?まさかね)

おわりに

Snowflake Summitの直前に公開され、一部の人々を賑わせていたSnowflake Openflowですが、デモで実際に動いているのを見ることができて安心しました。また、適材適所コネクター乱立問題は、私も悩まされることがあるので、それがSnowflakeに集約されるのは嬉しいところ。気になっていた料金体系の情報もあり、導入の検討が進めやすくなりましたね。今後のアップデートにも期待です。

ブース

LocalStack

SnowflakeやAWSなどのサービスをローカルでエミュレートできるツール。ブースでは、S3 にファイルを置いてSnowpipeで取り込み、dbt™でデータ変換を行うデモを見せてもらうことができました。1カ月分のバウチャーを配布されていたので、ご興味ある方はこの機会にぜひ!

Astronomer

Apache Airflowが組み込まれたSaaSオーケストレーションツール「Astro」や「Airflow」でのdbtオーケストレーションを簡単にするパッケージ「cosmos」などを開発している Astronomerさん。Apache Airflow 3.0の本をゲットしました!

本日は以上です!

このページをシェアする:



DATUM STUDIOは、クライアントの事業成長と経営課題解決を最適な形でサポートする、データ・ビジネスパートナーです。
データ分析の分野でお客様に最適なソリューションをご提供します。まずはご相談ください。

関連記事