Data Engineering News 2024年4月アップデートまとめ

たとえばローカルリポジトリとそれに対応するリモートリポジトリがあった際、ローカルからリモートへ変更をpushすることができますが、今回のリリース内容を設定しておくことで、リモートリポジトリにpushされた変更が、Snowflake内のリポジトリステージも反映されるようになり、ユーザー定義関数やストアどプロシージャなどの変更がデプロイしやすくなります。

詳しい内容はこちらをご覧ください。

Snowflake Cortex内の時系列予測モデルの改善

内部で使用されているアルゴリズムの改善が行われ、精度向上やエラー発生を低減するようになりました。

コスト管理のアカウント概要ページがGAになりました

Snowflakeの使用コストに関する概要を一望できるページがSnowsightに追加されました。

ダッシュボードのように利用できるため、発生したコストの可視性向上に寄与することができます。

詳しい内容はこちらをご覧ください。

Budgets機能がGAになりました

特定のSnowflakeオブジェクトのグループに対するクレジット使用量をアカウントレベルで監視・通知が可能になるBudgets機能がGAになりました。

新しいコスト管理のアカウント概要ページや既存のリソースモニターなどと組み合わせてより細かくコストの管理・最適化が行えるようになります。

詳しい内容はこちらをご覧ください。

Snowpark Container Serviceに機能が追加されました

Snowpark ストアドプロシージャの非同期ジョブがサポートされるようになりました

Java・Python・Scalaで記述されたストアドプロシージャハンドラーコード内でSnowpark APIを使用した非同期の子ジョブの同時実行をサポートするようになりました。

非同期クエリを用いたり、ステータスや結果にアクセスしたり、クエリキャンセルをするなどができるようになります。

ServiceNow V2向けSnowflakeコネクタがGAになりました

インシデント管理、変更管理、資産管理、構成管理、サービスカタログ、リクエスト処理などのサービス管理のワークフローを提供するクラウドベースのプラットフォームであるServiceNowとのシームレスな統合が可能になる、ServiceNow V2向けSnowflakeコネクターがGAになりました。

コネクタはSnowflake Native App Framework 上に構築されており、自動的にSnowflakeにデータを取り込めるようになります。

詳しい内容はこちらをご覧ください。

クライアント接続のリダイレクト機能にFAILOVER権限が追加されました

プライマリ基盤として、あるリージョンに構築しているアカウントのサービスが停止した際、クライアントリダイレクト構成を組んでいれば、異なるリージョン・クラウドプラットフォームサービスをセカンダリ基盤に切り替わる際、プライマリ基盤のURLからセカンダリ基盤の接続をリダイレクトで行えるクライアントリダイレクト機能に対して、ちオプションが追加されました。

追加された機能として、クライアントリダイレクト機能の利用権限を、特定のロールに付与できるようになりました。

詳しい内容はこちらをご覧ください。

SQLを利用して共有のリスティングが管理できるようになりました

Snowsightからのみ可能だった操作を、SQLコマンドからリストの内容をCREATE・ALTER・DESC・SHOW・DROPできるようになりました。

制約として、有料のリストやData ExchangeのリストをSQL経由で操作することはできません。

詳しい内容はこちらをご覧ください。

Snowflake Provider Studioが利用可能になりました

Snowsightから簡単にデータ製品をSnowflake Marketplaceに公開できるUIであるProvider StudioがPublic Previewになりました。

使用するためにACCOUNTADMINやリスティング作成権限を持つ必要がなくなりました。

詳しい内容はこちらをご覧ください。

COPYオプションでINCLUDE_METADATAが利用可能になりました

COPY INTOコマンド利用時にINCLUDE_METADATAオプションを利用することで、取り込んだ行が、どのファイルから、いつ取り込んだのかのメタデータを保持した状態で取り込むことが可能になりました。

ファイル名に含まれる日付やその他のデータを1つの情報として活用できるため、保持できる情報の幅が広がり、データ統合の有用な機能として役立つことが期待できます。

詳しい内容はこちらをご覧ください。

Looker Studioのニュースまとめ

タイムラインチャートが利用可能に

タイムラインチャートを使用すると、イベントグループ間の関係を視覚化し、これらのイベントが発生した期間を比較できます。

これまで期間のあるイベントを表現することは難しかったですが、このチャートによりガントチャートのような開始時間と終了時間のあるデータを活用しやすくなります。

Googleスプレッドシート内でLooker Studioレポートが作成可能に

Googleスプレッドシートから直接Looker Studioレポートを作成できるようになりました。

これまではLooker Studioからレポートを作成し、データソースを追加する作業が必要だったのが、レポート作成までの手順がシームレスになりました。

また、接続時にデータの定義を指定でき、レポート作成時にはタイトル欄とグラフが自動生成されるなど、はじめて利用する方にもイメージが湧きやすい流れになっています。

Looker Studio Proのニュースまとめ

チームワークスペースのメンバーに閲覧者ロールを付与可能に

チームワークスペースのロールとして閲覧者ロールを付与することで、ユーザーはチームワークスペースの既存のアセット、フォルダ、ワークスペースのゴミ箱を閲覧可能になります。

既存の管理者、コンテンツ管理者、投稿者に加えて新たな権限になります。

レポートの定期配信が可能な閲覧者ロールが追加

レポート共有の際に、そのレポートを定期配信可能な閲覧者ロールを付与できるようになりました。

なお、Looker Studioではレポートの定期配信はできないようになっています。

Looker Studio Proの登録時に新たなGoogle Cloudプロジェクトを作成可能に

Looker Studio Proの登録時に、新たなGoogle Cloudプロジェクトを作成し、そこでLooker Studio Proのコンテンツを管理できるようになりました。

dbtのニュースまとめ

dbt Cloud で Merge Jobs 機能がリリース

dbt Cloudで、CI/CDを強化する新機能がベータ版としてリリースされました。

Pull Requestのマージが行われたタイミングで、dbtジョブの実行をトリガーできるようになりました。

本機能によって、よりスピーディにかつ運用負荷を抑えながら、データパイプラインのリリースフローを設計/実装することが可能になります。

dbt Semantic Layer におけるGoogle Sheets連携関連の機能強化

Google Sheets連携に関連して、以下の機能追加・機能拡張がリリースされました。

機能追加	Googleシートのアドオンから作成した抽出条件を、”Saved Selections”として保存できるようになりました。保存時に、Selectionの共有有無を選択することができます。アクセスのたびにデータを更新するかどうかを選択できます。補足：“Saved Query”は、コード管理される汎用的なデータ定義です。”Saved Selections”は、Google Sheetsのみで作成・利用可能です。Saved queryの出力結果を使って、Saved selectionを作成することもできます。
機能拡張	Googleシートのアドオンから、直接Saved query を参照・利用可能になりました。
機能拡張	Googleシートのアドオンから、事前のdimension定義なしにクエリが可能になりました。
機能拡張	Googleシートのアドオンから時刻のプリセットが利用可能になり、between/after/before といった期間フィルタを利用できるようになりました。
機能拡張	Googleシートのアドオンに、dimensionの入力補助機能が追加されました。
機能拡張	Googleシートのアドオンで、直接エンティティをクエリ可能になりました。
機能拡張	Googleシートのアドオンで、除外カラムを指定できるようになりました。

本アップデートにより、Googleシートの画面上からデータ定義されたメトリクスを活用できる機能の使い勝手がさらに向上します。ビジネスユーザーが少ないステップで安全にデータ抽出やレポート作成を実施することが可能となります。

その他の変更も含め、詳しくは公式のリリースノートをご参照ください。

Tableauのニュースまとめ

Tableau 2024.1について

AI機能を備えた新しい可視化機能 Tableau Pulseがリリース

特定のKPIの推移を追うための、AI機能を備えた新しい可視化機能がリリースされました。

Tableau Cloud上の設定画面から有効化にチェックを入れることで、メニューの「探索」下部に表示され使用可能になります。

データソースから時系列推移を追いたいメトリクス（指標のこと。たとえば「売上」）を定義すると、傾向や要因などのインサイトを出してくれます。

ユーザーごとに追うべきメトリクスを設定・フォローすることができ、それをメールやSlackに通知することが可能です。

モバイルアプリ版のTableau Mobileへ遷移しての確認も可能です。

詳細は以下のページをご覧ください。

通知による業務への組み込み、かつAIによるアシストによって、ビジネスユーザーのインサイト抽出までの手間を極力省くことが期待されます。

Tableau Desktop・Tableau CloudでSalesforce Data CloudへのTableauで特定したセグメントの転送が可能に

棒グラフなどで可視化したセグメントを、Data Cloudへ転送することが可能になりました。これにより、分析結果からマーケティング活動への連携が、よりスムーズに可能になります。

詳細はこちらをご覧ください。

Tableau CloudがAWS Marketplaceで入手可能に

Tableau Cloudが AWS Marketplaceで入手可能になりました。SalesforceとAWSのパートナーシップ強化が伺えます。

その他、Tableauに関するアップデート情報などは公式のリリースノートをご確認ください。

Tableau Public 2024.1.2について

ローカルファイル保存が可能に

無償提供されているTableau Publicについて、ファイルのローカル保存が可能になりました。

これまではファイル保存する場合はオンライン上に公開（Public上にパブリッシュ）が必須であり、ローカルへの保存はできない制約がありましたが、この制約が解放された形です。

導入検討中に自社データで使い勝手を試すことも可能になり、また、作業途中でも公開する必要があった以前と比べ個人利用もしやすくなる印象です。

詳しい内容はこちらをご覧ください。

Tableau Conference2024で発表された内容の抜粋

Tableau ConferenceはTableau最大級のイベントで、今年は2024/4/29～5/1サンディエゴにて開催されました。
以降はまだリリースはされていませんが、2024.2以降の今後の予定として発表されている内容より一部抜粋します。

Data Cockpit

現在の「管理者インサイト」がより拡張されたものがリリースされる予定のようです。管理者向けの機能として、ダッシュボード利用状況がより確認しやすくなることが期待されます。

Viz Extension

さまざまな開発者が公開したVizを、拡張機能として、テンプレート的に追加可能になるようです。現状は簡単に作れるとは言えないサンキー図が、マークのプルダウン選択から作成可能になるイメージが公開されています。

詳細はこちらをご覧ください。

Custom Theme

配色やフォントの書式設定ファイル（JSON形式）がインポート可能になる予定のようです。

Tableau Conference2024についての詳しい内容は以下のページをご覧ください。

TROCCO®のニュースまとめ

ブランドリニューアルについて

2024年5月9日に、ブランドリニューアルを発表しました。
ブランドリニューアルに伴い、プロダクトのロゴタイプをtroccoからTROCCOへと変更し、またロゴの色調も変更しています。

ブランドリニューアルについては、プレスリリースをお読みください。

また、ロゴデータを利用したいという方は、株式会社primeNumberのコーポレートサイトにて新しいロゴの画像ファイルおよびロゴのガイドラインをご確認ください。:
https://primenumber.co.jp/presskit/

料金プランの変更について

2024年4月1日より、料金プランが改定されました。以下は、料金プラン表です。
詳しくは、料金プランページをご覧参照ください。

自社に適したプランを相談したい方はこちらからお問い合わせください。

転送先kintoneでテーブルへ転送できるように

kintoneアプリ内のテーブル（旧：サブテーブル）にデータを転送できるようになりました。
詳しくは転送先kintoneについてのヘルプドキュメントにある「アプリ内のテーブル（旧：サブテーブル）を更新したい場合」を参照ください。

データマートAzure Synapse Analyticsを追加

データマートAzure Synapse Analyticsを新たに追加しました。
詳しくは、こちらのヘルプドキュメントをご参照ください。

マネージドデータ転送でAmazon Redshiftが選べるように

マネージドデータ転送の転送先として、Amazon Redshiftを選択できるようになりました。
転送元のデータソースを一括で取得してAmazon Redshiftへ転送する転送設定を、一元作成・管理できます。

TROCCOアカウントに組織名を設定できるように

お使いのTROCCOアカウントに組織名を設定できるようになりました。
組織名を設定することで、たとえば複数のTROCCOアカウントを管理している場合に、どのTROCCOアカウントにログインしているかを識別しやすくなります。
詳しくは、こちらのヘルプドキュメントをご確認ください。

Data Engineering Newsは毎月更新でお届けいたします。

記事公開の新着メール通知をご希望の方はこちらのフォームよりご登録ください。

TROCCO® ライター

TROCCO®ブログの記事ライターデータマネジメント関連、TROCCO®の活用記事などを広めていきます！