Future Tech Blog
フューチャー技術ブログ
Home
Tags
Athena
Athena
タグの記事
2
投稿
2
著者数
24
総シェア数
2
Twitter
0
Facebook
8
はてブ
14
Pocket
AWS Glueで複雑な処理を開発するときのTips
PySparkを使用したGlueジョブ開発のお話をします。ETLツールとして使用されるAWS Glueですが、業務バッチで行うような複雑な処理も実行できます。また、処理はGlueジョブとして、Apache Spark分散・並列処理のジョブフローに簡単に乗せることができます!
2021.10.11
AWS
Python
Glue
Athena
PySpark
SparkSQL
1
シェア
5
7
DynamoDBをS3へExportして、Glue+AthenaでSQLを実行する
DynamoDBを頻繁に利用しており、連日DynamoDBコンソール画面と睨めっこをしています。DynamoDBのコンソール画面は特定のデータをピンポイントで探すには優秀ですが、データ集計には全く向いていません。
2021.04.03
AWS
SQL
Glue
S3
DynamoDB
Athena
1
シェア
3
7
1