Future Tech Blog
フューチャー技術ブログ
Home
Tags
AWS
AWS
タグの記事
92
投稿
42
著者数
2583
総シェア数
673
Twitter
128
Facebook
898
はてブ
884
Pocket
Python Web APIをAWS Lambdaにデプロイ
この記事はフューチャー Advent Calendar 2022の14日目の記事です。PythonのWeb APIをLambdaにデプロイする方法について解説します。
2023.01.05
AWS
Docker
WebAPI
11
シェア
はてな
2
DynamoDB Streamsは同一ハッシュキーでもソートキーが異なれば順序保証されない
TIG DXユニットの真野です。タイトルに書いたままの内容の記事です。おそらくDynamoDB Streams について調べたことがある方の多くの人には自明な内容だと思います。サマリです。* DynamoDB Streamsの起動順序が保たれるのは 項目単位
2022.10.20
AWS
DynamoDB
Lambda
DynamoDBStreams
失敗談
22
シェア
4
6
【メディア業界】新聞社の編集業務とフューチャーの取組み
こんにちは!2021年入社、TIGメディアユニット所属の武田です。
2022.08.10
AWS
メディア業界
ビジネス
業界ドメイン
新聞業界
8
シェア
はてな
Pocket
AWS Lambdaの初期化処理と初期化タイミングの考慮不足によるはまりどころ
失敗談をテーマにした連載の5本目です。AWS Lambdaで、予約済同時実行数を1に制限して使っていたときに、初期化処理と初期化タイミングの考慮不足により、はまったことがありました。本記事ではLambdaの初期化処理についておさらいした後、はまったケースの事例や原因、対応した方法を紹介します。
2022.06.07
AWS
Lambda
失敗談
TCP
9
3
23
17
RDSの自動再起動によるインフラコストの悲劇
この記事ではクラウドインフラにはつきものの、インフラコストについての失敗談をご紹介します。ぜひご一読いただき、私の屍を乗り越えていく事で、悲劇の発生を未然に防いでいただければと思います。
2022.06.06
AWS
失敗談
RDS
7
シェア
はてな
8
Lambda×Go並列処理で100万回APIを呼び出す
こんにちは。TIG DXチームの後藤です。2021年7月に新卒でフューチャーに入社しました。業務でAPIを通して数万~100万のデータのバッチ処理を行うLambdaの開発を行ったので、学びを共有したいと思います。
2022.05.16
AWS
性能検証
Go言語
Lambda
並列処理
16
シェア
3
15
AWS Glueの開発環境の構築(2022)
2021年の記事でもAWSの公式のDockerイメージを使って環境構築をする内容の記事があるのですが、Glue3.0の公式のDockerイメージがリリースされていたので、そちらを使って再度Glueのローカルでの開発環境構築の記事を書いてみようと思います。せっかくなので昨年の記事と少しコードを変えようと思い、AWSの公式ドキュメント[^2]に書かれたコードを基に解説します。
2022.04.28
AWS
Glue
環境構築
LocalStack
DockerCompose
JupyterNotebook
2
シェア
2
3
AWS Partner Summit Japan 2022に登壇してみた
2022/3/16(水)に開催されたAWS Partner Summit Japan 2022に縁あって登壇の機会をいただきました。オンラインでしたが、撮影は目黒セントラルスクエア。TV局かなと思うほどの撮影機材や、明らかにプロフェッショナルなスタッフの皆さまに囲まれての発表だったので非常によい刺激をいただけました。終わった後の達成感が凄く良かったです!
2022.04.15
登壇レポート
AWS
事例紹介
7
シェア
1
Pocket
Future Tech Night #19 CodePipelineを用いたECS on EC2でのBlue/Greenデプロイメント
2022年1月28日にFuture Tech Night #19 AWS CodePipelineと新聞向けCMS構築事例を開催しました。こちらの勉強会で「CodePipelineを用いたECS on EC2でのBlue/Greenデプロイメント」というテーマで発表させていただきました。
2022.03.14
登壇レポート
AWS
TechNight
CodePipeline
ECS
BlueGreenDeployment
3
シェア
1
2
AWS Certified SysOps Administrator – Associate 合格体験記
2019年新卒入社筋肉エンジニアの渡邉光です。AWS Certified SysOps Administrator – Associate (AWS SOA-C02) を受験してきました。無事合格できたので、Associate試験は3冠を達成することができました!
2022.03.09
AWS
合格記
SysOpsアドミニストレーター
3
シェア
はてな
3
Future Tech Night #19「新聞業界を変革するクラウドサービス「GlyphFeeds」を支えるAWSサービス」
2022年1月28日にFuture Tech Night #19 AWS CodePipelineと新聞向けCMS構築事例]を開催しました。こちらの勉強会で「新聞業界を変革するクラウドサービス「GlyphFeeds」を支えるAWSサービスというテーマで発表させていただきました。GlyphFeedsとは、フューチャーが独自開発したメディア業界向けのクラウドサービスです。新聞メディアCMS(基幹システム)をAWSフルクラウド&Webアーキテクチャで実現しています。
2022.02.24
登壇レポート
AWS
CMS
GlyphFeeds
TechNight
6
シェア
はてな
1
Pipenv+LocalStackで作るLambda開発環境
PipenvとLocalStackを使用したLambda開発環境の構築を紹介します。本記事で作成するデモアプリは以下のGitHubリポジトリに格納しています。
2022.02.02
AWS
LocalStack
Lambda
開発環境
Pipenv
31
シェア
3
2
Step Functions を利用して感じた Airflow との比較
TIG 所属の多賀です。AWS 上でのワークフロー構築のため、Step Functions を直近で導入しました。
2022.01.11
AWS
技術選定
Airflow
StepFunctions
16
シェア
4
11
LocalStackでS3署名付きURLを使う時に気を付けるポイント
AWS S3を利用してファイルをアップロード、ダウンロードするフロントエンドアプリケーションの実装を行ったのですが、その際ハマったポイントがいくつかあったのでまとめます。AWSの機能をローカル環境で模擬するツールでお馴染みのLocalStackですが、AWS S3の機能も模擬できるようになっています。
2021.11.15
AWS
S3
LocalStack
署名付きURL
CORS
11
シェア
3
6
AWS Certified Database - Specialty合格体験記
TIGの伊藤真彦です。AWS Certified Database - Specialtyに合格しました。これにて2021年に受験できる11資格を全て制覇しました。来年SAP on AWS - 専門知識が登場する事が確定していますが、ひとまず完全制覇です。
2021.11.12
AWS
DB
合格記
4
シェア
1
1
AWS Certified Data Analytics - Specialty合格体験記
TIGの伊藤真彦です。先日AWS Certified Data Analytics - Specialtyに合格しました。これで持っているAWS認定資格は10個になりました。
2021.11.12
AWS
データレイク
合格記
ツイート
シェア
はてな
2
AWS GameDay Online参加レポート
先日社内の同じチームの加藤さんに誘っていただき、チームメンバーと4人でAWS GameDay Inlineに参加させていただきました。今回は参加レポートを書きます。
2021.11.11
AWS
DevOps
コンテスト
参戦記
AWSGameDay
4
シェア
はてな
1
AWS利用時に read: connection reset by peer が出たときのリトライ検討
DynamoDBやKinesis Data Streamsなどを利用するサービスをそれなりの期間で稼働させているとポツポツ下記のようなエラーが発生することが分かりました。RequestError: send request failedcaused by: Post ...: read tcp 169.254.0.1:55638->3.113.218.4:443: read: connection reset by peer
2021.10.26
AWS
Network
Go言語
トラブルシュート
リトライ
Kinesis
TCP/IP
20
シェア
3
5
AWS SDK for GoでDynamoDBの式を扱うヘルパーパッケージの使い方
DynamoDBをGoで操作することにかけては、[DynamoDB×Go連載] に参加するくらい関心があるのですが、AWS SDK for Goの公式ライブラリに含まれる、ヘルパーパッケージについて存在を今までスルーしていました。使ってみると業務的には利用一択だと思ったので今後使っていくぞという覚書としてまとめます。
2021.10.25
AWS
Go言語
DynamoDB
式
2
シェア
7
5
AWS利用料金をSlackに円グラフ付きで投稿する
AWSの利用料金をSlackに通知する仕組みを作成したので共有したいと思います。私が参加しているプロジェクトでは、毎月AWSにいくらかかっているのか、加えてそれぞれのサービスは全体のコストの内どのぐらいの割合を占めているのか知りたいという話があり、今回AWSから利用額を取得しSlackに通知する仕組みを作る流れとなりました。
2021.10.15
可視化
AWS
Go言語
Slack
3
シェア
3
5
AWS Certified Advanced Networking - Specialty合格体験記
TIGの伊藤真彦です。来たる11月13日に[Go Conference 2021 Autumn]に、技術ブログでもお馴染みの澁川さん、辻さんと共に登壇させていただくことになりました。楽しい発表になるように頑張ります。宣伝を挟みましたが、AWS Certified Advanced Networking - Specialtyに合格しましたので、今回も合格体験記を書きます。
2021.10.13
AWS
Network
合格記
3
シェア
はてな
Pocket
S3でクロスアカウントアクセスする時に気をつけるポイント
Amazon S3を利用したファイル連携を行う際、アカウント内に閉じた利用であれば特段問題ない場合でも、システム間連携となるとクロスアカウントが発生し、目的とした操作をするためには然るべき設定が必要になることがあります。自アカウント(アカウントA)のS3バケットに対して他アカウント(アカウントB)から書き込みを行い、アカウントAから当該ファイルを参照する際に注意する設定について紹介していきます。
2021.10.12
AWS
S3
クロスアカウント
2
シェア
3
3
AWS Glueで複雑な処理を開発するときのTips
PySparkを使用したGlueジョブ開発のお話をします。ETLツールとして使用されるAWS Glueですが、業務バッチで行うような複雑な処理も実行できます。また、処理はGlueジョブとして、Apache Spark分散・並列処理のジョブフローに簡単に乗せることができます!
2021.10.11
AWS
Python
Glue
Athena
PySpark
SparkSQL
1
シェア
5
7
AWSクラウドの耐障害性、可用性を高めるための前提知識
先日クラウドサービスの障害について社内で体系的に説明する機会があり、0から全体的なイメージがつかめるような情報を整理してみました。Webサービス、ITソリューションが自前のサーバーではなくクラウドサービスを利用して構築されるようになって久しいですが...と語っていきたい所ですが
2021.10.06
AWS
初心者向け
AWS設計
13
4
54
16
AWS Glue Data CatalogでCSVを扱う
PySparkで予定しておりましたが、PySpark関連として、Glueを題材にさせていただきます。Glueといっても大きく下記の3種類、処理系をいれると4種類に分かれると思っていますが、それぞれ全く別のプロダクトという理解をしています。
2021.10.06
AWS
Python
Glue
データカタログ
4
シェア
2
1
1
2
3
4
Next