Snowflakeを扱うチームに所属することになり、初めてSnowflakeを触ったのでその所感を記事にまとめてみました。 はじめに Snowflake Notebooksの特徴 実践編 ノートブックの作成 プログラムの実行 セル単位での実行 プログラム全体の実行 気になったこと SQL…

Snowflakeでユーザー管理を正しく設定することは、セキュリティや運用の安定性にとても大事です。 本記事では、初めてSnowflakeを触る方でも理解できるように、基本の考え方からSnowflakeの標準機能を使って、ユーザー作成の基本的な流れをわかりやすく解説…

現代では、データの活用がますます重要になってきています。そのため、たくさんのデータをうまく管理したり分析したりすることは、どんな企業にとっても欠かせない課題です。 そんな中、「Snowflake」というツールが注目を集めています。これは、これまでの…

JBSでデータエンジニアをしている稲留です。 CData Syncを利用したニアリアルタイムによるデータ連携パイプラインの構築を実施しました。 本記事では、CData Syncをインストール型として導入した背景と構築方法について記載いたします。 CData Syncとは 1. …

Microsoft Entra ID のユーザに対応したユーザーを Snowflake に自動でプロビジョニングできるように設定してみました。

Snowflake に作成したIcebergテーブルとMicrosoft Fabricを利用し、データの取得から可視化までの一連の流れを紹介します。今回はその前提として「Apache Icebergとは何か」について解説します。 Apache Icebergとは Apache Icebergの主な特徴 Apache Iceber…

2025年6月にパブリックプレビューが開始となったSnowflake Cortex AISQLのチュートリアルを通じて、Snowflakeの新しいSQL関数の性能について紹介します。

こんにちは。Data&AI事業本部の和村です。 4日間に渡ってサンフランシスコで開催されているSnowflake Summitですが、本日が最終日になります！ 本日も、参加セッションの概要や最終日の会場の様子についてお届けしたいと思います。 DAY1~DAY3の様子 参加セッ…

Data＆AI事業本部所属の谷尾です。 2025年6月2日～6月5日にアメリカサンフランシスコで行われてるSnowflake Summitの現地レポートを発信します。こちらの記事では、3日目の様子をお届けします。 Day1とDay2について 参加セッション情報 How Capital One Uses…

Data＆AI事業本部所属の和村です。 現在、サンフランシスコで開催されているSnowflake Summit25に現地参加しています。Snowflake Summitは、Snowflake社が年次で開催する最大規模のカンファレンスです。 6月2日から6月5日までの4日間にわたって開催されてお…

Data＆AI事業本部所属の谷尾です。 2025年6月2日～6月5日にアメリカサンフランシスコで行われてるSnowflake Summitの現地レポートを発信します。こちらの記事では、初日の様子をお届けします。 Snowflakeとは Snowflake Summit スケジュール Day1の流れ Tran…

Azure Entra ID を利用した SSO 認証での Snowflake へのログインを実際に試してみました。

本記事では、Azure Event Hubs（以下、Event Hubs）へのストリーミングデータをApache Kafka（以下、Kafka）コネクタを使用してSnowflakeのテーブルに格納する方法を実際に検証した手順としてご紹介いたします。 なお、検証するにあたっては以下のドキュメン…

本記事では、Snowflakeの導入における契約・初期設定方法を、注意事項を踏まえてご紹介いたします。本記事がSnowflakeを導入する際の参考になればと思います。 「Snowflakeとは？」という方は、下記公式サイトの”他とはまったく違うプラットフォーム”を参照…

今回は、Snowflake上でSparkに似た構文のコードを使ってストアドプロシージャなどの開発をすることができる、Snowparkを動かしてみました。 Snowflakeについては、以下の記事を参照してください。 blog.jbs.co.jp Snowparkの概要 Snowparkの実行環境 Snowpar…

JBSでデータエンジニアをしてる稲留です。いろいろなお客様先でSnowflakeのDataOpsを担当しています。July 01-03, 2024のリリースノートにて、認証ポリシーに新しいパラメータが追加され、多要素認証（以下、MFA）の設定を強制できるようになりました。docs.…

Snowflake の行アクセスポリシーを用いて、特定のユーザーからアクセス可能なレコードを制限してみました。

Azure Data Factory（以降、ADFと表記）上でSnowflakeへプライベートエンドポイント（以降エンドポイントと表記）を作る際に、他のAzureサービスへのエンドポイントの作成と少し方法が違っていたので、実施方法についてご紹介します。 Snowflakeのエンドポイ…

Snowflakeのアラート機能を使用して、不正ログインを監視・通知する機能を実装してみました。 Snowflakeアラートとは 実施概要 実施前提 実施手順 アラートの作成 アラートの開始 アラートの確認 アラートの動作確認 おわりに Snowflakeアラートとは 「Snowf…

本記事では、Snowflakeのオブジェクト所有者が持つ OWNERSHIP 権限を別のロールに譲渡する方法について検証してみました。 併せてオプションとして指定可能な [ REVOKE | COPY ] CURRENT GRANTS の違いについても検証します。

Data&AIプラットフォーム部所属の福濵です。2023年に入社しSnowflakeについて基礎から勉強しています。 本記事では、Snowflakeのマスキングポリシーの概要および実装について、ご紹介します。 マスキングポリシー概要 マスキングポリシー実装 実装内容 事前…

Data&AIプラットフォーム部所属の福濵です。2023年に入社しSnowflakeについて基礎から勉強しています。 Snowflakeには、プルーニングというデータ参照のパフォーマンスを向上させる機能があります。これは、テーブルデータを格納しているマイクロパーティシ…

Snowflakeは、AWSやGoogle Cloud、Microsoft Azureなどのクラウドプラットフォーム上でホストされるDWHサービスです。 ストレージとコンピュートを分離したマルチクラスタ・共有データアーキテクチャや、データの一元管理が可能な高い拡張性と柔軟性を備える…

Csol本部所属の福濵です。2023年に入社しSnowflakeについて基礎から勉強しています。 本記事ではSnowflakeのマイクロパーティションの仕組みについてご紹介します。 マイクロパーティションとは 概要 データの流れ プルーニング イミュータブル（不変） Time…

Snowflakeに備わっているSnowpipeという機能を用いてデータベースに自動でデータを格納（ロード）する仕組みを実際に構築してみました。

本記事では、Snowflakeの動的テーブルの動作を確認します。従来ではタスクとストリームを使って実装していたリアルタイム処理が動的テーブルを使うことで簡潔に実装できるようです。

こんにちは、Csol HC4の原田です！ 「データの価値を証明する」をモットーにデータエンジニア＆マネージャーをしています。 普段もデータエンジニアとして、プロジェクトでSnowflakeを利用してお客様のデータ活用支援をしており、同ベンダーが掲げるDATA CLO…

こんにちは、Csol HC4の原田です！ 「データの価値を証明する」をモットーにデータエンジニア＆マネージャーをしています。 普段もデータエンジニアとしてプロジェクトでSnowflakeを利用してお客様のデータ活用支援をしており、同ベンダーが掲げるDATA CLOUD…

こちらの記事は、Azure BLOB StorageのデータをSnowflakeに連携しPower BIで可視化するまでの手順を解説する、計4記事に渡るシリーズものの1記事です。 【第0回】 Snowflake とは 【第1回】 データベース・スキーマ・テーブル作成 ★本記事 【第2回】 Azure～…

こちらの記事は、Azure BLOBのデータをSnowflakeに連携しPower BIで可視化するまでの手順を解説する、計4記事に渡るシリーズものの1記事です。 【第0回】 Snowflake とは ★本記事 【第1回】 データベース・スキーマ・テーブル作成 【第2回】 Azure～Snowflak…