Cloud Composer で Airflow 環境を立ち上げて、GCS から BigQuery へのデータロードを実行してみた

エクセルファイルデータを Dataprep で BigQuery にロードして、SQL で参照してみた

ノンコーディングでデータを抽出・整形して BigQuery に格納できるデータプレパレーションツール Dataprep を使ってみた

Dataflow のテンプレートを利用して、Spanner のテーブルデータを BigQuery で参照してみた

Dataflow SQL で Pub/Sub のストリームデータと BigQuery のテーブルデータを結合してみた

Google Dataflow を使ってコーディング無しでテキストファイル内に出現する単語をカウントしてみた

BigQuery に日時データをロードすると UTC に変換されてしまう問題に「データ統合基盤 CS アナリティクス」で対応する

BigQuery のデータを「データ統合基盤 CS アナリティクス」を使って Google Cloud Storage にエクスポート

データ統合基盤 CS アナリティクスで Google Cloud クライアントライブラリを使用した Python プログラムを実行してみる

データ統合基盤 CS アナリティクスで BigQuery にデータを差分ロードしてみた

【データ統合基盤 CS アナリティクス】 BigQuery はじめました！ ～CSA JMCでBigQuery連携を行うための設定手順～

BigQuery のテーブルデータを Google Cloud Storage にファイルエクスポートしてみた

タイムトラベルで BigQuery の削除済みデータにアクセス＆復元してみた

BigQuery でテーブルレベルのアクセス制御（テーブル ACL ）ができるようになったので挙動を確認してみた

BigQuery で実行できる SQL と実行できない SQL

BigQuery に日時データをロードする場合のタイムゾーンとフォーマットについて確認してみた

BigQuery にデータを差分ロード（UPSERT）する方法まとめ

GCS にファイルが配置されたらイベント駆動で BigQuery にデータロードするサーバレスなジョブをつくってみた

Service Usage API でカスタム割り当てを設定して、ユーザー単位の１日の BigQuery 処理データ量の上限値を指定してみた

ストリーミングインサートで重複レコードを削除しながら BigQuery にデータをロードしてみた

サービス境界とアクセスレベルで、特定のユーザーやサービスアカウントからしか BigQuery にアクセスできないようにしてみた

データ統合プラットフォーム Xplenty を使って、2020 年の沖縄県の潮位データを整形してから BigQuery にロードしてみた

BigQuery のテーブルコピーではテーブルプロパティも全てコピーされるのかどうか確認してみた

BigQuery でテーブル名やカラム名などの更新できない項目を変更するにはどうすればいいか確認してみた

Deployment Manager を使って GCS バケットと BigQuery のデータセットとテーブルを作成してみた

Python クライアントライブラリで Google Cloud Storage の参照・作成・更新・削除操作をするにはどのメソッドを使えばよいのか確認してみた

[BigQuery] データセットやテーブルのオーナーだと、明示的な権限付与なしでも参照・更新・削除も可能なのか確認してみた

サービスアカウントで BigQuery にアクセスするときに、どのロールでどんな操作が可能なのか確認してみた。

GCS の Parquet データを BigQuery から参照してみた　～ Parquet データのロードと外部テーブルによる参照～

BigQuery に JSON 形式のファイルデータをロードする場合の挙動や制限事項を確認してみた

Google クライアントライブラリ for Python で、BigQuery のデータセットやテーブルなどのメタ情報を取得してみた

BigQuery のコストを削減するために。パーティショニングテーブルの使い方を調べてみた

BigQuery に外部テーブルを定義して、GCS のファイルデータを SQL で参照してみた

BigQuery の INFORMATION_SCHEMA からどんな情報が取得できるのか、全ての VIEW を確認してみた

Data Catalog のポリシータグで BigQuery カラムレベルのアクセス制御が可能になったので試してみた

サービスアカウントを切り替えて BigQuery のアクセス権限を制御してみた

BigQuery 破産で泣かないために。。GCP 利用料金を bot で Slack に通知してみた

BigQuery のコスト管理方法を調べてみた

BigQuery では本当にトランザクション処理がサポートされていないのか確認してみた

BigQuery に対して外部 SQL ファイルを実行してみた

Airflow で BigQuery を操作してみた

Airflow で GCS のデータを BigQuery にロードしてみた

Airflow の管理画面を自分好みにカスタマイズしてみた

Airflow のアーキテクチャをざっくり理解して、どうやって使うのか学んでみた

ResorTech Okinawa おきなわ国際IT見本市に出展しております

GCP Cloud IAM と BigQuery のデータセット、テーブル、View へのアクセス制御を確認してみた

IP 制限付きで AWS EC2 から BigQuery にアクセスしてみた

AWS EC2 上の Python から BigQuery にデータをロードしてみた

AWS EC2 から bq コマンドラインツールで BigQuery にアクセス＆操作してみた

BigQuery Data Transfer Service で AWS S3 から BigQuery に CSV データをロードしてみた

はじめての GCP ～ BigQuery にデータをロードしてみた～

SageMaker でお手軽に Jupyter Notebook から Python を実行してみた

API Gateway が「Lambda プロキシ統合」でさらに使いやすくなっててびっくりした話

[レポート] PyCon Kyushu 2019 Okinawa に参加してきました！

クラスメソッド沖縄オフィス 新オフィスに移転しました！

クラスメソッド沖縄オフィス さくらだよりとキャッシュレス体験

「沖縄IT移住フェス！」に出展してきました

クラスメソッドの会社説明会 in 沖縄 を開催しました！

Developers.IO 2018 in OKINAWA を開催しました！

クラスメソッド沖縄オフィス　エイサーナイト ２０１８