Data Engineering Study ＃1「DWH・BIツールのこれまでとこれから」 に参加した

7/15(水) に行われた以下イベントの参加メモです。

• Twitter HashTag : #DataEngineeringStudy

データマネジメント、自分にはむずかしそうだなあ、という感想です。
どう活かすか目的を持つことが第一、というあたりが。いろいろと思いつき駆動なので。
まだまだ"小規模脳"だと思っているので、今回の話を参考に少しずつ規模を大きくしていければなあ、と。
運用で気をつけることなどいろいろ聞けて、良かったです。ありがとうございました。

感じたこと

これやっていかないとだな、と思った

#DataEngineeringStudy テクノロジーを組み合わせていく

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy テーブルやカラムの値の意味をコメントに入れておくのとても大事だと思っている

— 央 (@sogaoh) July 15, 2020

My Tweet Pickup

どうやら自分にとってのやりたいBIはクラウドコストの監視みたいだ

#DataEngineeringStudy クラウド使用料を日次でSlackに飛ばしたいと常々思っている

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy 値が取れてないことをモニタリングするのも結構大事

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy クラウドコスト予測の神はおらぬか

— 央 (@sogaoh) July 15, 2020

全部はこちら↓
https://twitter.com/search?q=%23DataEngineeringStudy%20%40sogaoh%20since%3A2020-07-15%20until%3A2020-07-16&src=typeahead_click&f=live

資料のまとめ

基調講演「Data Platform Guide - 事業を成長させるデータ基盤を作るには」

@yuzutas0 さん

事例紹介1「ZOZOTOWNの事業を支えるBigQueryの話」

塩崎 健弘 さん

事例紹介2「freeeのデータ基盤におけるDWH/BIの運用事例紹介」

@yusuken_0x4C2 さん

おまけ：ツールのことのつぶやきまとめ

思いついたものたちです

#DataEngineeringStudy #今一番気になっているDWH・BIツール 意外なところで trdsql と ov https://t.co/aqJu12tG2vhttps://t.co/1FqLLJR3wR

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy ASTERIA WARP があって DataSpider がない・・・Tarend っていうのもあったような

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy 個人的意見ですが転送には Logstash が便利だと思いますhttps://t.co/zDiSC0S0tO

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy Jira JQLhttps://t.co/evujb3XgpW

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy #freee いつもお世話になっております

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy pgAdmin 出てこなかったなhttps://t.co/rTjBaTdxIN

CSVダウンロードでメモリの使い方がRedashに比べて安定していた記憶（今どうかはわからない）

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy パブリックじゃない回線でAWSとBQ(GCP)を繋いでいる

なにかな？

— 央 (@sogaoh) July 15, 2020

#DataEngineeringStudy 認証機構、個人的にシンプルで軽量な STNS がオススメhttps://t.co/Zb3WnNzCsK

— 央 (@sogaoh) July 15, 2020