S3 CLIと標準入出力
はじめに
これまで、S3にデータを入れるときは手元でCSV等を作ってアップロードしたり、逆にS3内のデータを参照するときにはダウンロードしてから参照していたりしていました。
が、(今更ですが)最近になって標準入出力でやりとりできることを知ったので自分用のメモとして残すための記事です。
標準出力への出力
標準出力へ出力できるとパイプが使えるので、色々便利ですよね。
aws s3 cp s3://xxx-bucket/test.csv -
圧縮ファイルもzcatで。
aws s3 cp s3://xxx-bucket/test.csv.gz - | zcat
ただ、--recursiveを指定して複数ファイルを標準出力に出すことはできないようです。
標準入力からS3へデータ作成
S3のオブジェクトがこれで作れると知ったときはちょっとした驚きでした。
echo hogehoge | aws s3 - cp s3://xxx-bucket/test2.csv
Author And Source
この問題について(S3 CLIと標準入出力), 我々は、より多くの情報をここで見つけました https://qiita.com/masjiro/items/0d1c816eed42931de3e3著者帰属:元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Content is automatically searched and collected through network algorithms . If there is a violation . Please contact us . We will adjust (correct author information ,or delete content ) as soon as possible .