BigQuery 用 ETL ライブラリ inbulk について紹介します。inbulk は、 yaml で定義できる BigQuery API の wrapper です。これを利用することでデータ加工のジョブの定義することができ、また差分実行をほぼ BigQuery の内部で行うことができます。