bq query --destination_table でパーティションテーブルを扱う
bq query -- destination_table
でパーティションテーブル使う時のメモ。
特に伝えたいことは前回同様パーティション日付の前の バックスペースを忘れない!
バックスペースを忘れない!!
バックスペースを忘れない!!
1. 新規のパーティションを指定する
bq query --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
2. 既存のパーティションに追加(append)する
bq query --append_table --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
bq query --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
bq query --append_table --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
オプションつけないで既存パーティション指定するとappendされる。
3. 既存のパーティションを上書き(write_truncate)する
bq query --replace --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
bq query --replace --destination_table=dataset.table\$20200401 "SELECT * FROM dataset.table_2 WHERE _PARTITIONTIME = TIMESTAMP('2020-01-01')"
バックスペースなしで --replace
つけると、他のパーティションも全部吹っ飛ぶ大事故に繋がるので気をつける。
参考
Author And Source
この問題について(bq query --destination_table でパーティションテーブルを扱う), 我々は、より多くの情報をここで見つけました https://qiita.com/munaita_/items/f5241f343b1a4443452a著者帰属:元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Content is automatically searched and collected through network algorithms . If there is a violation . Please contact us . We will adjust (correct author information ,or delete content ) as soon as possible .