目的 Dataflowの概念を理解する Dataflowにさわってみる 今回は今までDataflowにさわったことがない方向けに、Dataflowってそもそもなに？ってところからご説明します。 対象読者 1~2年目データ…
【さわってみよう！】Google Cloud Dataflowって何に使うの？
TAG GCP
Cloud SchedulerとCloud Functionsを使って自動スクレイピングさせて、スプレッドシートに書き出してみた(Python)
ゴール(作成するプロダクト) 「データ領域の求人数がこれからどれくらい上がってくるのかみたい」 実際に可視化してみましょう。ダッシュボードはDataPortalを使いましたが、今回の話では割愛。 今回は月1で求人まとめサ…
データレイク、データウェアハウス、データマートって結局なんなん？
はじめに データレイク、データウェアハウス、データマートって何？って聞かれたらすぐ答えられますか？ なんかこれって概念的な話で会社によって全然異なったりしませんか？ よく聞かれることも多いので、ちゃんと自分の言葉にして残…
