-
2020年11月20日
-
DECENCIAの実践するリーズナブルな統合BI基盤とは 〜メーカーECのCSアナリティクス活用事例〜 #devio_showcase
ポーラ・オルビスグループのDECENCIAによる自社データ利活用の方法およびクラスメソッドのサービス「CSアナリティクス」利用事例の紹介。かつてExcelファイルが散在していた状況から、どのようにデータマーケティングの実践を成功させたのかをお話しいただきました。
-
2020年11月19日
-
[Looker]label、group_label、view_labelのヒエラルキーを暴いてみる #looker
Lookerでは、label、group_label、view_labelといったパラメータを用いて、ビジネスユーザーにとってわかりやすく使いやすいExploreを作ることがベストプラクティスとなっています。 （手前味噌 […]
-
2020年11月18日
-
[小ネタ] Lookerから送信するメールに任意のSMTPサーバーを使用する
えすえむてーぺー
-
2020年11月17日
-
Visual Studio CodeのSnowflake用Extension「Snowflake Driver for SQLTools」を試してみた #SnowflakeDB
Snowflakeでクエリを実行する際には、ブラウザ上でログインしてワークシートを用いたり、snowsqlというCLIクライアントをインストールして使用することが一般的だと思います。 なのですが、先日「Snowflake […]
-
2020年11月13日
-
ジョブの実行時に利用するSnowflakeの仮想ウェアハウスが指定できるようになりました！ #データ統合基盤 #CSアナリティクス
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 弊社プロダクトのデータ分析基盤「カスタマーストーリー アナリティクス」(Customer Story Analytics:CSA)のサー […]
-
2020年11月11日
-
[Looker]labelの宣言場所における違いをまとめてみる #looker
Lookerのlabelパラメータは、宣言する場所によって挙動が異なります。 以下の4つのパターンに分けられるため、この4つの違いをまとめてみます。 各種フィールドパラメータ内（dimension、measure等） v […]
-
2020年11月09日
-
Developers.IO 2020 Showcase「Looker歴2か月、元Tableau運用者がそれぞれの良さを語ります」#devio_showcase
2020年11月4日に開催されたDevelopers.IO 2020 ShowcaseのDay4：データ分析にて、「Looker歴2か月、元Tableau運用者がそれぞれの良さを語ります」というタイトルで登壇しました。 […]
-
2020年11月06日
-
[小ネタ]SnowSQLで複数環境に簡単に接続できるように設定してみた
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 SnowflakeのCLIクライアントツール「SnowSQL」では、configファイルに接続情報を設定しておくと簡単に複数環境に接続す […]
-
SnowflakeのS3外部ステージが問題なく利用できるかを各クラウドプラットフォームで試してみた
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 Snowflakeは複数のクラウドプラットフォームに対応しており、現在は「Amazon Web Service(AWS)」、「Googl […]
-
2020年11月01日
-
オープンソースのデータ・ディスカバリーおよびメタデータ・エンジン『Amundsen』のアーキテクチャを読み解く
下記エントリでは、公式サイトから得られる各種リソース情報などを紹介しました。 当エントリでは、Amundsenのアーキテクチャ、及びAmundsenを構成する機能群に関する詳細についてどのようなものがあるのかをそれぞれ見 […]
-
2020年10月30日
-
[Looker]group_labelの宣言場所における違いをまとめてみる #looker
Lookerのgroup_labelパラメータは、宣言する場所によって挙動が異なります。 以下の2つのパターンに分けられるため、この2つの違いについてまとめてみます。 exploreパラメータ内 各種フィールドパラメータ […]
-
サブネットもセキュリティグループも考慮不要！Lambda関数からData API for Redshiftでクエリ実行してみた。
Lambda関数からRedshiftへDataAPIでクエリを投げてみました。 Dockerによる最新のboto3 LambdaLayer作成方法付き。
-
オープンソースのデータ・ディスカバリーおよびメタデータ・エンジン『Amundsen』の公式サイトから利用イメージと参考リソース情報を把握する
先日投稿した下記のエントリでは、オープンソースのデータ・ディスカバリーおよびメタデータ・エンジン『Amundsen』に関する、GitHubリポジトリ情報から得られる概要情報、及びクイックスタートの実践内容を紹介しました。 […]
-
2020年10月28日
-
Snowflakeの外部ステージ設定が『データ統合基盤 CSアナリティクス』を使うと簡単＆自動で設定出来るようになります！
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 SnowflakeにおいてS3からデータロードを行うためには、以下のイメージのようにSnowflake側では「ストレージ統合」および「外 […]
-
2020年10月26日
-
オープンソースのデータ・ディスカバリーおよびメタデータ・エンジン「Amundsen」の概要紹介＆クイックスタート実践
以前購入した下記書籍『AWSで始めるデータレイク』を切っ掛けにこの書籍を題材にした読書会を始めた、というのはエントリ内でも言及していました。その読書会も今月末の第24回を以て無事最終回を迎える予定です。ほぼ週2回(1回1 […]
-
2020年10月23日
-
Amazon SageMakerの機械学習モデルをSnowflakeから直接利用する
-
2020年10月22日
-
集めて共有！Snowflakeで全国犯罪発生情報をシェアするデータベースを構築する
さて、本日私が共有するのは全国版の犯罪発生情報です。
-
Snowflakeでデータパイプラインを作ってみた
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 Snowflakeでは、以下のドキュメントでも記載されている通り、Snowflakeの機能を組み合わせてデータパイプラインを作成すること […]
-
2020年10月21日
-
[Looker]Looker IDEを”黒く”したいあなたへ #looker
LookerのIDEは、全体的に背景が白色になっています。 しかし、エンジニアの方は背景を黒くしたいという方も多いのではないかと思います。エンジニアは目を酷使する仕事なので、背景が黒であることに越したことはないのではない […]
-
2020年10月20日
-
[レポート] Top 10 DCL Tips & Tricks – JOIN@Home: JOIN Virtual Data Conference 2020 #JOINdata
-
2020年10月15日
-
SnowflakeのRESULT_SCAN関数を使ってみた
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 Snowflakeのテーブル関数の１つにRESULT_SCANという関数があります。この関数が結構便利そうだったので今回試してみました。 […]
-
Snowflakeの外部関数（AWS Lambdaと連携）を試してみた
-
Snowflakeの”お作法”を整理・確認するためのSnowsqlを使った各種オブジェクトを新規作成する手順まとめ
Snowflakeの世界に存在する各種要素の関係性やそれらの権限に関する情報は下記公式ドキュメント等で説明・解説されています。 アクセス制御権限 — Snowflake Documentation アクセス制御の概要 — […]
-
2020年10月14日
-
基調講演レポート(Looker製品アップデート＆ロードマップ) – JOIN@Home: JOIN Virtual Data Conference 2020 #JOINdata
米国時間の2020年10月13日から16日の計4日間に渡って、Looker社主催のバーチャルデータカンファレンス『JOIN@HOME』が開催されています。 当エントリでは、日本時間2020年10月14日(水)の午前0:3 […]
-
Snowflakeの外部テーブルとマテリアライズドビューを用いて簡単にデータ分析環境を構築してみる
Snowflakeには、「外部テーブル」と呼ばれる外部のストレージに格納されたファイルに対してデータベース内のテーブルのようにクエリを実行できる機能と、「マテリアライズドビュー」と呼ばれる定義されたSELECT文のクエリ […]
-
古都の治安を守れい！これがAlteryx、Snowflake、Lookerで作る奈良県犯罪MAPじゃあアァァッッ！
-
2020年10月13日
-
S3データのSnowflake取り込み(テーブル作成からデータ連携まで)処理自動化を「データ統合基盤 CS アナリティクス」で行う
こんにちは！DA(データアナリティクス)事業本部 インテグレーション部の大高です。 データ分析を行うためのデータ分析基盤を構築する際には、まずは集めたデータをデータウェアハウス（DWH）にロードする必要があるかと思います […]
-
Fivetranとは？-機能/概要紹介-
今年2020年にパートナー契約を結んだ「Fivetran」は、データ統合を自動化することができるツールとなっています。 また、Fivetran社は今年、1億ドルの資金調達しユニコーン企業の仲間入りをしただけでなく、Sno […]
-
2020年10月12日
-
[Looker] Google BigQuery用に作られたLooker Blocks（Zendesk Blocks）をSnowflake用に改造した
Lookerさん、BigQuery以外のBlocksも作ってください
-
2020年10月06日
-
Glue PythonShellジョブからRedshift Spectrumパーティションを更新する
Glue PythonShellからSpectrumのadd partitionを行うため、オートコミットを有効にした上でSQLクエリを実行してみました。