Future Tech Blog
フューチャー技術ブログ
Home
Tags
Athena
Athena
タグの記事
2
投稿
2
著者数
28
総シェア数
2
Twitter
0
Facebook
9
はてブ
17
Pocket
AWS Glueで複雑な処理を開発するときのTips
PySparkを使用したGlueジョブ開発のお話をします。ETLツールとして使用されるAWS Glueですが、業務バッチで行うような複雑な処理も実行できます。また、処理はGlueジョブとして、Apache Spark分散・並列処理のジョブフローに簡単に乗せることができます!
2021.10.11
Python
AWS
Glue
Athena
Tips
PySpark
SparkSQL
1
シェア
6
9
DynamoDBをS3へExportして、Glue+AthenaでSQLを実行する
DynamoDBを頻繁に利用しており、連日DynamoDBコンソール画面と睨めっこをしています。DynamoDBのコンソール画面は特定のデータをピンポイントで探すには優秀ですが、データ集計には全く向いていません。
2021.04.03
DynamoDB
SQL
AWS
Glue
S3
Athena
1
シェア
3
8
1