Future Tech Blog
フューチャー技術ブログ
Home
Tags
AWS
AWS
タグの記事
98
投稿
46
著者数
2650
総シェア数
691
Twitter
128
Facebook
919
はてブ
912
Pocket
AWS Kinesisから呼び出されるLambdaのリカバリー処理について
AWS Kinesis Data StreamとAWS Lambdaを組み合わせたデータストリーミングを扱うシステムで、Lambdaが処理に失敗した場合のリカバリー運用を考える機会がありました。一般的に、Kinesisのようなメッセージングやイベント駆動型のシステムでは、DLQという仕組みを設けます。
2023.05.26
AWS
Lambda
Kinesis
リカバリー
ツイート
シェア
1
3
Amazon OpenSearch Serverless を触ってみた
Amazon OpenSearch Service を触る機会があり、興味があったのでプレビューで公開されていたServerless版でいろいろ試していました
2023.05.25
AWS
入門
OpenSearch
全文検索
ツイート
シェア
はてな
3
AWS Application Composerを使ってみた!
2023/03/07から一般提供が開始された新サービス「AWS Application Composer」を使ってみて、どんな人向けか、強み・弱みは何かというところを見ていきます。
2023.05.09
AWS
ノーコード
ApplicationComposer
ツイート
シェア
はてな
1
RDS Proxy環境下でpg_hint_planを導入する際の注意点
PostgreSQL を使用する際、最適な実行計画が選択されず、クエリの速度が遅くなることがあります。オプティマイザが最適な実行計画を選択できない理由はいくつかありますが、たとえばバッチ処理で大量のデータを投入した直後、統計情報と実データの乖離により、少ないデータに適した計画が大量のデータでは不適切になることがあります。このような場合、PostgreSQL の拡張モジュールである pg_hint_plan により実行計画を固定することで、チューニングが可能です。
2023.04.11
AWS
RDS
RDSProxy
ツイート
シェア
2
1
Terraform とGitHub Actions
こんにちは。TIG DX チームのゆるふわエンジニアの前原です。今までは、GitLab でTerraform を利用する機会が多かったのですが、今回は、GitHub Actions を利用することになりました。そこで実施した内容をこの記事に書いていきたいと思います。
2023.04.05
AWS
Terraform
CI/CD
GitHubActions
3
シェア
はてな
5
Jenkinsのエージェントノードをストレージを永続化しながらスポットインスタンスで運用する
昨今の円安でAWS使用料が増加したことにより、構成見直し等で費用削減を図っている方も多いと思います。私の現場でも費用削減の一環として、先日Jenkinsで使用しているエージェントノードをオンデマンドインスタンスからスポットインスタンスに移行しました。
2023.03.15
AWS
Jenkins
EBS
スポットインスタンス
7
シェア
はてな
3
Python Web APIをAWS Lambdaにデプロイ
この記事はフューチャー Advent Calendar 2022の14日目の記事です。PythonのWeb APIをLambdaにデプロイする方法について解説します。
2023.01.05
AWS
Docker
WebAPI
11
シェア
はてな
2
DynamoDB Streamsは同一ハッシュキーでもソートキーが異なれば順序保証されない
TIG DXユニットの真野です。タイトルに書いたままの内容の記事です。おそらくDynamoDB Streams について調べたことがある方の多くの人には自明な内容だと思います。サマリです。* DynamoDB Streamsの起動順序が保たれるのは 項目単位
2022.10.20
AWS
DynamoDB
Lambda
DynamoDBStreams
失敗談
22
シェア
4
6
【メディア業界】新聞社の編集業務とフューチャーの取組み
こんにちは!2021年入社、TIGメディアユニット所属の武田です。
2022.08.10
AWS
メディア業界
ビジネス
業界ドメイン
新聞業界
8
シェア
はてな
Pocket
AWS Lambdaの初期化処理と初期化タイミングの考慮不足によるはまりどころ
失敗談をテーマにした連載の5本目です。AWS Lambdaで、予約済同時実行数を1に制限して使っていたときに、初期化処理と初期化タイミングの考慮不足により、はまったことがありました。本記事ではLambdaの初期化処理についておさらいした後、はまったケースの事例や原因、対応した方法を紹介します。
2022.06.07
AWS
Lambda
失敗談
TCP
9
3
23
17
RDSの自動再起動によるインフラコストの悲劇
この記事ではクラウドインフラにはつきものの、インフラコストについての失敗談をご紹介します。ぜひご一読いただき、私の屍を乗り越えていく事で、悲劇の発生を未然に防いでいただければと思います。
2022.06.06
AWS
失敗談
RDS
7
シェア
1
8
Lambda×Go並列処理で100万回APIを呼び出す
こんにちは。TIG DXチームの後藤です。2021年7月に新卒でフューチャーに入社しました。業務でAPIを通して数万~100万のデータのバッチ処理を行うLambdaの開発を行ったので、学びを共有したいと思います。
2022.05.16
AWS
性能検証
Go言語
Lambda
並列処理
16
シェア
4
15
AWS Glueの開発環境の構築(2022)
2021年の記事でもAWSの公式のDockerイメージを使って環境構築をする内容の記事があるのですが、Glue3.0の公式のDockerイメージがリリースされていたので、そちらを使って再度Glueのローカルでの開発環境構築の記事を書いてみようと思います。せっかくなので昨年の記事と少しコードを変えようと思い、AWSの公式ドキュメント[^2]に書かれたコードを基に解説します。
2022.04.28
AWS
Glue
環境構築
LocalStack
DockerCompose
JupyterNotebook
2
シェア
2
5
AWS Partner Summit Japan 2022に登壇してみた
2022/3/16(水)に開催されたAWS Partner Summit Japan 2022に縁あって登壇の機会をいただきました。オンラインでしたが、撮影は目黒セントラルスクエア。TV局かなと思うほどの撮影機材や、明らかにプロフェッショナルなスタッフの皆さまに囲まれての発表だったので非常によい刺激をいただけました。終わった後の達成感が凄く良かったです!
2022.04.15
登壇レポート
AWS
事例紹介
7
シェア
1
Pocket
Future Tech Night #19 CodePipelineを用いたECS on EC2でのBlue/Greenデプロイメント
2022年1月28日にFuture Tech Night #19 AWS CodePipelineと新聞向けCMS構築事例を開催しました。こちらの勉強会で「CodePipelineを用いたECS on EC2でのBlue/Greenデプロイメント」というテーマで発表させていただきました。
2022.03.14
登壇レポート
AWS
TechNight
CodePipeline
ECS
BlueGreenDeployment
3
シェア
1
2
AWS Certified SysOps Administrator – Associate 合格体験記
2019年新卒入社筋肉エンジニアの渡邉光です。AWS Certified SysOps Administrator – Associate (AWS SOA-C02) を受験してきました。無事合格できたので、Associate試験は3冠を達成することができました!
2022.03.09
AWS
合格記
SysOpsアドミニストレーター
3
シェア
はてな
3
Future Tech Night #19「新聞業界を変革するクラウドサービス「GlyphFeeds」を支えるAWSサービス」
2022年1月28日にFuture Tech Night #19 AWS CodePipelineと新聞向けCMS構築事例]を開催しました。こちらの勉強会で「新聞業界を変革するクラウドサービス「GlyphFeeds」を支えるAWSサービスというテーマで発表させていただきました。GlyphFeedsとは、フューチャーが独自開発したメディア業界向けのクラウドサービスです。新聞メディアCMS(基幹システム)をAWSフルクラウド&Webアーキテクチャで実現しています。
2022.02.24
登壇レポート
AWS
CMS
GlyphFeeds
TechNight
6
シェア
はてな
1
Pipenv+LocalStackで作るLambda開発環境
PipenvとLocalStackを使用したLambda開発環境の構築を紹介します。本記事で作成するデモアプリは以下のGitHubリポジトリに格納しています。
2022.02.02
AWS
LocalStack
Lambda
開発環境
Pipenv
31
シェア
3
2
Step Functions を利用して感じた Airflow との比較
TIG 所属の多賀です。AWS 上でのワークフロー構築のため、Step Functions を直近で導入しました。
2022.01.11
AWS
技術選定
Airflow
StepFunctions
16
シェア
5
11
LocalStackでS3署名付きURLを使う時に気を付けるポイント
AWS S3を利用してファイルをアップロード、ダウンロードするフロントエンドアプリケーションの実装を行ったのですが、その際ハマったポイントがいくつかあったのでまとめます。AWSの機能をローカル環境で模擬するツールでお馴染みのLocalStackですが、AWS S3の機能も模擬できるようになっています。
2021.11.15
AWS
S3
LocalStack
署名付きURL
CORS
11
シェア
3
7
AWS Certified Database - Specialty合格体験記
TIGの伊藤真彦です。AWS Certified Database - Specialtyに合格しました。これにて2021年に受験できる11資格を全て制覇しました。来年SAP on AWS - 専門知識が登場する事が確定していますが、ひとまず完全制覇です。
2021.11.12
AWS
DB
合格記
4
シェア
はてな
1
AWS Certified Data Analytics - Specialty合格体験記
TIGの伊藤真彦です。先日AWS Certified Data Analytics - Specialtyに合格しました。これで持っているAWS認定資格は10個になりました。
2021.11.12
AWS
データレイク
合格記
ツイート
シェア
はてな
2
AWS GameDay Online参加レポート
先日社内の同じチームの加藤さんに誘っていただき、チームメンバーと4人でAWS GameDay Inlineに参加させていただきました。今回は参加レポートを書きます。
2021.11.11
AWS
DevOps
コンテスト
参戦記
AWSGameDay
4
シェア
はてな
1
AWS利用時に read: connection reset by peer が出たときのリトライ検討
DynamoDBやKinesis Data Streamsなどを利用するサービスをそれなりの期間で稼働させているとポツポツ下記のようなエラーが発生することが分かりました。RequestError: send request failedcaused by: Post ...: read tcp 169.254.0.1:55638->3.113.218.4:443: read: connection reset by peer
2021.10.26
AWS
Network
Go言語
トラブルシュート
リトライ
Kinesis
TCP/IP
20
シェア
3
6
AWS SDK for GoでDynamoDBの式を扱うヘルパーパッケージの使い方
DynamoDBをGoで操作することにかけては、[DynamoDB×Go連載] に参加するくらい関心があるのですが、AWS SDK for Goの公式ライブラリに含まれる、ヘルパーパッケージについて存在を今までスルーしていました。使ってみると業務的には利用一択だと思ったので今後使っていくぞという覚書としてまとめます。
2021.10.25
AWS
Go言語
DynamoDB
式
2
シェア
7
5
1
2
3
4
Next