share facebook facebook twitter menu hatena pocket slack

2017.05.11 THU

僕はまたAthenaのPartitionで死に申した。

高橋 慎一

WRITTEN BY 高橋 慎一

CloudFrontのログ形式が s3://orenocloudfront.com//ORENOPREFIX.2017-04-10-00.1a2b3c4d5e.gz みたいになってるとき、 paritioned by 句をつけてCREATEしたTableからは何をどうあがいてもデータは取得できません。

https://docs.aws.amazon.com/athena/latest/ug/athena-ug.pdf

For the LOCATION clause, using a trailing slash
In the LOCATION clause, use a trailing slash for your folder or bucket, NOT filenames or glob characters. For

example:
Use:
  s3://path_to_bucket/
Don't Use:
  s3://path_to_bucket
  s3://path_to_bucket/*
  s3://path_to_bucket/mySpecialFile.dat

/終わりじゃないといけないんだってさ。
S3の/はディレクトリじゃないって偉い人がいってたのに!!!!!!!

元記事はこちら

僕はまたAthenaのPartitionで死に申した。

高橋 慎一

高橋 慎一

最強。敗北を知らない。

cloudpack

cloudpackは、Amazon EC2やAmazon S3をはじめとするAWSの各種プロダクトを利用する際の、導入・設計から運用保守を含んだフルマネージドのサービスを提供し、バックアップや24時間365日の監視/障害対応、技術的な問い合わせに対するサポートなどを行っております。
AWS上のインフラ構築およびAWSを活用したシステム開発など、案件のご相談はcloudpack.jpよりご連絡ください。