DataprepでJobをスケジュール実行する

こんにちは。香田です。

GCPで提供されているCloud Dataprepを利用して、
GCSのデータをBigQueryにロードするJobのスケジュール実行について解説していきます。

今回は下記のようにGCSバケットの日時フォルダに保存されるデータに対して、
毎日指定した時間にスケジュール実行していきます。

続きを読む

BigQuery スロットの使用状況を調査する

こんにちは。香田です。

BigQueryのボトルネック調査時や料金モデル(オンデマンド、定額)の見直しに必要となる
スロット使用状況の確認方法について解説していきます。

スロットの確認方法はいくつかあるけど、どれが確認しやすいんだっけ?
と気になったのでまとめてみました。

続きを読む