developersIO
produced by Classmethod
Facebook
X
電気メーカ系SIerのSE、IP電話開発会社の製品企画・開発を経てJoin。Linux、Java、MySQLを中心にウェブ、スマホ、基幹サーバーと何でも屋。 主食はコーヒー。
石川覚
ishikawa-satoru
月別投稿数
486
Posts
AWS LambdaとPyArrow3.0.0を使ってサクッとParquetファイルに変換する
石川覚
2021.03.24
[新機能] Amazon Redshift Cross-database queries を試してみました
石川覚
2021.03.07
BigData-JAWS 勉強会#16 で「Lake House Architecture Pattern」というタイトルで発表してきました
石川覚
2021.03.03
Tablau DesktopからAmazon Athenaに社内のプロキシサーバ経由で接続する方法
石川覚
2021.02.05
【速報】Amazon Kinesis Data Streams のデータ保持期間が最大1年に拡張されました #reinvent
石川覚
2020.12.11
【速報】『Amazon EMR on Amazon EKS』が発表されました #reinvent
石川覚
2020.12.11
【速報】データ分析アプリケーションの開発、可視化、デバッグできる統合開発環境(IDE) 『Amazon EMR Studio』 (Preview)が発表されました #reinvent
石川覚
2020.12.11
【速報】AWS Lake Formation が3つの新機能トランザクション、行レベルのセキュリティ、アクセラレーションがプレビューになりました #reinvent
石川覚
2020.12.10
【速報】Amazon Redshift の障害を自動的に検出して別のAZで復旧する『Cross-AZ cluster recovery』が発表されました #reinvent
石川覚
2020.12.10
【速報】半構造化データをRedshiftテーブルに直接保存できる新しいデータ型『SUPER』をサポートしました(preview) #reinvent
石川覚
2020.12.10
【速報】Amazon Redshift Federated QueryでRDS MySQLとAurora MySQLに直接クエリを実行できるようになりました(Preview) #reinvent
石川覚
2020.12.10
【速報】機械学習によるパフォーマンスチューニング、Amazon Redshift Performance Tuning – Automatedが発表されました! #reinvent
石川覚
2020.12.10
【速報】クラスタ間でライブデータを安全かつ簡単に共有できる『Amazon Redshift data sharing』プレビュー開始しました! #reinvent
石川覚
2020.12.10
【速報】Amazon Redshift 新型『RA3』に1/12のスケールのra3.xlplus インスタンスが追加になりました! #reinvent
石川覚
2020.12.10
【速報】自然言語で問いかけるBIサービス、QuickSight『Q』が発表されました!(Preview) #reinvent
石川覚
2020.12.02
【速報】 AQUA (Advanced Query Accelerator) for Amazon Redshift がついにプレビュー開始になりました! #reinvent
石川覚
2020.12.02
[Update] Amazon Athena engine version 2がリリース、Federated queriesやGeospatial functions等の新機能、パフォーマンスが改善されました
石川覚
2020.11.15
[新機能] AWS Glue Studio によるビジュアルジョブオーサリングと高度なモニタリングを試してみました
石川覚
2020.09.24
[新機能] AWS Glue 「Glue Version 2.0」のPythonモジュールの更新、pip3によるモジュールインストールがサポートされました!
石川覚
2020.08.12
[新機能] AWS Glue 「Glue Version 2.0」のSpark ETL ジョブの開始時間が10倍速く、最小の請求時間は1分になりました!
石川覚
2020.08.11
Amazon Athena Partition Projectionを用いたHiveパーティションのパーティションプルーニングの自動化
石川覚
2020.07.28
Amazon Redshift Spectrum INSERT INTOでパーティションテーブル作成を試してみました
石川覚
2020.07.07
[新機能]Amazon Athena ルールベースでパーティションプルーニングを自動化する Partition Projection の徹底解説
石川覚
2020.06.28
[動画公開] データ分析を支える技術 DWH再入門 #devio2020
石川覚
2020.06.19
[新機能]Amazon Redshift Spectrum がついにCTASとINSERT INTOをサポートしたので実際に試してみました!
石川覚
2020.06.09
[お知らせ]Amazon Redshiftの手動バックアップ利用料が請求されるようになります
石川覚
2020.05.10
[新機能] Amazon Redshift SpectrumやConcurrency Scalingに使用上限をつけて、通知や利用停止できる『Usage limit details』を試してみました
石川覚
2020.04.26
[新機能] Amazon Redshift スキーマにストレージスペースのクォータが指定できるようになったので試してみました
石川覚
2020.04.22
[新機能] Amazon Redshift Federated QueryがGAになったので試してみました
石川覚
2020.04.19
[アップデート] Amazon Redshift 暗号化ハッシュ関数『SHA2』をサポートしました
石川覚
2020.04.17
Amazon Redshift 新型『RA3』に1/4のスケールのra3.4xlarge インスタンスが追加になりました
石川覚
2020.04.03
Amazon Redshift [アップデート] データレイクで用いるカラム名ありパーティション形式のアンロードをサポートしたので試してみた
石川覚
2020.03.30
Amazon Redshift [新機能]カラムレベルのアクセス制御の挙動を確認してみた
石川覚
2020.03.08
Amazon Redshift [新機能]マテリアライズドビューの徹底解説
石川覚
2020.03.08
Snowflake SQLパフォーマンスチューニング 7 Tips #SnowflakeDB
石川覚
2020.01.29
[レポート] (ANT418) Deep dive and best practices for Amazon Redshift #reinvent
石川覚
2019.12.25
[レポート](ANT222) Analytics with Amazon Athena (フェデレーテッドクエリ ワークショップ) #reinvent
石川覚
2019.12.24
re:Growth2019「re:Invent2019 Analytics Updates 〜 Amazon Redshiftの再設計 RA3×AQUA 〜」について発表しました #reinvent
石川覚
2019.12.18
Snowflake マイクロパーティションとデータクラスタリングの解説 | Snowflake Advent Calendar 2019 #SnowflakeDB
石川覚
2019.12.18
Snowflake「Stage」のユースケースと「バルクロード」の解説 | Snowflake Advent Calendar 2019 #SnowflakeDB
石川覚
2019.12.17
Snowflake 半構造化データサポートの解説 | Snowflake Advent Calendar 2019 #SnowflakeDB
石川覚
2019.12.16
Amazon Redshift の新機能「Auto Vacuum & Auto Sort」の徹底検証 #reinvent
石川覚
2019.12.12
[レポート] (ANT334) オンプレミスデータウェアハウスからAmazon Redshiftに記録的な速さで移行する方法(Fannie Mae) #reinvent
石川覚
2019.12.11
【アップデート】Amazon Redshift の新機能「Auto Vacuum & Auto Sort」バックグラウンドでVacuumが自動実行するようになりました #reinvent
石川覚
2019.12.09
[レポート] (ANT307) Athena deep dive #reinvent2019
石川覚
2019.12.09
#06:ハンズオンラボガイド「半構造化データの操作、ビュー、結合」| Snowflake Advent Calendar 2019 #SnowflakeDB
石川覚
2019.12.06
[レポート] (ANT230) [NEW LAUNCH!] Amazon Redshift の再設計: RA3 と AQUA #reinvent2019
石川覚
2019.12.05
【アップデート】Amazon Redshift の新機能「Federated Query」でRDSとAuroraのPostgreSQLに直接クエリを実行できるようになりました #reinvent
石川覚
2019.12.04
【速報】Amazon Redshiftの次世代ノードタイプ『RA3』が発表されました #reinvent
石川覚
2019.12.04
Amazon Redshift 新しい圧縮エンコーディング『AZ64』とLZO、ZSTDの徹底比較
石川覚
2019.11.11
Amazon Redshift 分散キーの変更について試してみた
石川覚
2019.11.11
Developers.IO 2019 Tokyoで「Effective Datalake 〜基礎からわかるデータレイクの定義と実践〜」というタイトルで発表してきました #cmdevio
石川覚
2019.11.04
Amazon Athena がついにINSERT INTOをサポートしたので実際に試してみました!
石川覚
2019.09.20
安全なデータレイクの構築が容易になる AWS Lake Formation がついにリリースされました
石川覚
2019.08.09
AWS Glue ジョブタイプ『Spark』が Apache Spark 2.4.3 と Python 3.6をサポートしました
石川覚
2019.07.25
Tableau Server 2019.1.1 バックアップ&ログクリーンナップを自動化する
石川覚
2019.07.09
AWS Glue ETLワークロードをGUIでオーケストレーションする『Workflows』を実際に試してみました
石川覚
2019.06.21
AWS Glue Spark ETL ジョブでリアルタイムの進行状況を追跡する『Continuous Logging』をサポートしました
石川覚
2019.06.15
Apache Arrow(PyArrow)を使って簡単かつ高速にParquetファイルに変換する
石川覚
2019.06.14
機械学習を用いた新機能『Amazon Redshift Automatic Workload Management (Auto WLM)』を実際に試してみました
石川覚
2019.06.12
2
3
4
5
6
7
8
AWS
Bedrock
CDK
Google Cloud
Azure
生成AI
Claude
MCP
セキュリティ
モダンデータスタック
セミナー
会社説明会
事例
採用