石川覚

電気メーカ系SIerのSE、IP電話開発会社の製品企画・開発を経てJoin。Linux、Java、MySQLを中心にウェブ、スマホ、基幹サーバーと何でも屋。主食はコーヒー。

石川覚

4,241

Facebook Share

3,379

Twitter Share

2,505

石川覚が執筆した記事

石川覚

ishikawa-satoru

石川覚

ishikawa-satoru

石川覚が執筆した記事

Amazon Redshift が最新バージョントラックと1つ前の認定バージョントラックを選べるようになりました

[お知らせ]Amazon Redshift、DC1のリザーブドインスタンスをDC2への無料アップグレードを発表しました

AWS Glue がETLジョブのデバッグとプロファイリングを可能にするメトリックをサポートしました

AWS Glue の Excludeパターンによるデータストアのフィルタリング効果の違いについて

AWS Glue が DynamoDBのテーブルのクロールやETLジョブをサポートしたので試してみました

AWS Glueで多くの小さなファイルをまとめて読み込むgroupFiles/groupSize指定でパフォーマンスを改善する

AWSCLI、Python（boto3）などからS3フォルダ間のコピーしてみる

AWSCLI、Python（boto3）などからS3フォルダを削除してみる

「db analytics showcase Sapporo 2018」で玉川竜司さんのParquetの話を聞いてきました #dbts2018 #dbasSPR

Amazon Athena がついにビュー（CREATE VIEW）をサポートしました！

Amazon Redshift 新たにカラムナファイルフォーマット（Parquet、ORC）からのデータロードに対応しました

AWS Glue と SQLのみで、サクッとETL（Extract、Transform、Load）するJobを作成する

Amazon Redshiftクラスタのパフォーマンスと健全性を確認できる『データベースのパフォーマンス』とそのメトリクスが追加されました

AWS Glue の Pushdown Predicates を用いてすべてのファイルを読み込むことなく、パーティションをプレフィルタリングする

AWS Glue の Dynamicframeを使わずDataframeを用いて自在にCSV/TSVファイルを出力する

AWS Glueを用いてパフォーマンス向上やコスト最適化するカラム名ありパーティションのデータに変換するETLコードを作成する

Amazon Redshift Spectrum 利用費と課金状況を把握する

Amazon Athena Webアクセスログ、CloudFrontのログ、CloudTrailのログのパーティション設定を自動化する

Amazon Redshift Spectrum がスカラーJSONおよびIonデータ型をサポートしたので試してみました

Amazon Redshift Spectrum ダブルクォーテーションで囲まれた文字列をクエリする方法

Amazon Athena LTSV形式のログファイルを探索する

『Amazon Redshift & Tableau パフォーマンスチューニング』に関するホワイトペーパーの改訂版を読んでみた（Amazon Redshiftクラスタのチューニング編）

『Amazon Redshift&Tableau パフォーマンスチューニング』に関するホワイトペーパーの改訂版を読んでみた（Amazon Redshift と Tableauのパフォーマンスの計測編）

『Amazon Redshift&Tableau パフォーマンスチューニング』に関するホワイトペーパーの改訂版を読んでみた（Amazon Redshiftの最適化編）

『Amazon Redshift & Tableau パフォーマンスチューニング』に関するホワイトペーパーの改訂版を読んでみた（Tableauの最適化編）

『Amazon Redshift Result Caching』が Tableauなどカーソルを利用したクエリに対応しました

Windows環境のレジストリを更新せずに SQL Workbench/J を導入する方法

意図せず公開しているS3オブジェクトはありませんか？〜S3アクセス権限設定を再確認しよう！〜

Amazon RedshiftからAmazon Redshift Spectrumにマイグレートするツールを公開しました

Amazon Redshiftにおけるデータをマスクする方針について

Amazon RedshiftからAmazon Athenaにマイグレートするツールを公開しました

Amazon Redshift Spectrum 新たにサポートされたDATE型について試してみました

Amazon Redshift Spectrum ソースデータをマニフェストファイルで定義する

Amazon Athenaがヘッダ行のスキップをサポートしました！

AWS GlueでネストされたJSONファイルをCSVファイルやParquetに変換する

AWS Glue 新しくサポートされたScalaでETL Job作成を試してみました

機械学習を用いた新機能『Amazon Redshift Short Query Acceleration(SQA)』を実際に試してみました

【レポート】Deep Dive: ビッグデータワークロードをAWSに移行する #reinvent #ABD312

[祝] AWS Glueが東京リージョンで利用可能になりました

【レポート】Amazon S3, Amazon Kinesis, AWS Glue, Amazon Athenaによるデータレイクの構築 #reinvent #ABD318

【レポート】AWS GlueによるサーバレスETL #reinvent #ABD315

Tableau Desktop から Amazon Redshift に送信するクエリのカーソル定義を無効化する

クエリ結果をキャッシュする新機能『Amazon Redshift Result Caching』を実際に試してみました

Amazon Redshift 新エントリーノードタイプ dc2.large と dc1.large の徹底比較

Sapporo.aws 第1回「re:Invent 2017 AWSデータベースサービス総復習!」で発表しました #reinvent #sapporoaws

【レポート】サーバーレスビッグデータアプリケーション構築のベストプラクティス #reinvent #ABD202

【まだ間に合う】 re:Invent2017 セッション資料・動画の公開 #reinvent

【レポート】古いDWHからモダンなデータレイクへマイグレートする #reinvent #ABD327

【レポート】Amazon Redshift と Redshift Spectrumによるデータウェアハウスのベストプラクティス #reinvent #ABD304

【レポート】ビッグデータアーキテクチャパターンとベストプラクティス #reinvent #ABD201

【re:Invent2017参加者各位】立ち見（Walk-up）でセッションを見れなかった人へのTips #reinvent

Amazon Redshift クエリ履歴に任意のコメントを追加する方法

[祝] Amazon Redshift Spectrumが東京リージョンで利用可能になりました

AWS Glue 実践入門：Triggerを使ってスケジュールやJob完了イベントでJobを実行する

AWS Glue 実践入門：Amazon RedshiftのテーブルをETLする

AWS Glue 実践入門：Amazon Redshiftのテーブルをクロールする

Amazon Athena CloudFormationでSaved Queries(NamedQuery)にクエリーを登録してみる

AWS Glue 実践入門：AWS Glue Data Catalogへのアップグレード方法

AWS Glue 実践入門：Apache Zeppelinによる Glue scripts(pyspark)の開発環境を構築する

新機能 Amazon Redshift Late-Binding ビューを試してみました