cloud dataflow

/

cloud dataflowについて

タグ cloud dataflow apache beam

概要

  • apache beam alternative
  • 賢いmap reduce
  • オンライン処理ができる

ストリーミングでモニタリングする

  • サンプルコード
  • monitoring
    • 出力をbigqueryをつなげて、monitoring -> メトリック作成 -> 必要ならなmonitoring/alertでアラートを作成する

パイプラインのWeb UIでの確認