-
Apache AirflowのER図をSchemaSpyで自動生成するようにしてみた
Apache Airflowベースのシステムを扱っていて、Metastore(PostgreSQL)のデータ構造はどうなってたかな？と調べることがあったので、SchemaSpyでER図を自動生成するようにしてみました。
-
データパイプライン活用における「知見」だけでなく「つらみ」も共有 – Data Pipeline Casual Talk Vol.2 に参加してきた #DPCT
前回「第1回」の開催となった「Data Pipeline Casual Talk」、参加レポートについては下記エントリで言及させて頂きましたが、イベントとしては驚異の競争率且つ実際参加した内容も非常に参加者に好評なものと […]
-
118件のシェア(ちょっぴり話題の記事)
データパイプラインに関する知見をカジュアルに語る！ Data Pipeline Casual Talkに参加してきた #DPCT
昨日(2019年02月13日(水))、下記のイベント(勉強会)に参加してきました。データ分析基盤、また機械学習基盤にとって、要望を満たすデータを整形、準備する『パイプライン』の存在は必要不可欠です。そんな題材をテーマにし […]