Athena の TIMESTAMP は、 yyyy-MM-dd HH:mm:ss を直接サポートしない
現象
Athena の TIMESTAMP は、よくある日付形式 yyyy-MM-dd HH:mm:ssを直接サポートしません。
例えば以下のようなCSVファイルからGlueでテーブルを作り、２番めのカラムの型にtimestampを設定したとします。
sample.csv
1000,2020-05-27 10:58:00
1001,2020-05-28 10:58:00
ここで、 select * from sample を実行してもエラーになります。おそらくこんなエラーメッセージが出ます。
HIVE_BAD_DATA: Error parsing field value '2020-05-27 10:58:00' for field 4: For input string: "2020-05-27 10:58:00"
対策
対策は、テーブルのカラム定義ではstringとして、読むときに date_parse 関数を使うことです。
date_by_stringは、２番めのカラム名だと思ってください。
sample.sql
select date_parse(date_by_string,'%Y-%m-%d %H:%i:%s') from sample
参考リンク
Author And Source
この問題について(Athena の TIMESTAMP は、 yyyy-MM-dd HH:mm:ss を直接サポートしない), 我々は、より多くの情報をここで見つけました https://qiita.com/kazurof/items/23cba632b12fd5c7140e著者帰属：元の著者の情報は、元のURLに含まれています。著作権は原作者に属する。
Content is automatically searched and collected through network algorithms . If there is a violation . Please contact us . We will adjust (correct author information ,or delete content ) as soon as possible .