社内システムのセキュリティ向上のため、Lambda + CloudFront + S3でインフラ基盤を再構築した話 - Uzabase for Engineers

2024/10/09 99 users Lambda 樋渡 NewsPicks インフラ基盤 基盤

はじめに ソーシャル経済メディア「NewsPicks」SREチーム・新卒エンジニアの樋渡です。今回は、AWSサービスである「Lambda」「CloudFront」「S3」を用いて、弊社で使用している社内向けシステムの基盤を再構築し、開発者体験の向上やセキュリティ対策を行なったお話です。 お話の内容 弊社で使用している社内向けシステ... 続きを読む

Cloudflareに移行したら99％コスト削減できた話

2024/04/08 260 users CloudFlare AWS tl;dr 課金 転送量

どういうこと？/TL;DR AWS → CloudFlareに移行したら費用が99%削減できました。 対象読者 今CloudFront + S3で構築しているけど転送量に困っている人 CloudFlare R2を検討している人 (CloudFrontとCloudFlareをよく間違える人) はじめに 元々、動画CDNの構築はCloudFront + S3で構築していました。 この構成の場合、課金... 続きを読む

CloudFrontだけで短縮URLサービス作ってみた。 - Qiita

2024/01/06 65 users Qiita 短縮URLサービス

はじめに 短縮URLは、オンラインの情報共有において欠かせない存在になっています。 しかし、その便利さの裏でセキュリティ上の問題も指摘されていることがあります。 例えば、QRコードを介した不正サイトへの誘導事例などが報告されています。 原因は「短縮URL」か？　QRコードから不正サイトへ誘導される事例が相次ぐ... 続きを読む

CloudFrontとS3で作成する静的サイト構成の私的まとめ | DevelopersIO

2022/07/31 178 users DevelopersIO 目新しい話 静的サイト 構成 理解

しばたです。 以前の記事でも触れた様にCloudFrontとS3を使って静的サイトを作る構成に対する理解にあいまいな部分があったので改めてまとめてみました。 特に目新しい話も無く知っている人には当たり前の内容かもしれませんが、まあ、自分自身の理解を整理するために記事にしていきます。 1. S3静的ウェブサイトを使う... 続きを読む

【アップデート】Amazon CloudFront を経由しないアクセスのブロックが簡単になりました | DevelopersIO

2022/02/08 119 users DevelopersIO シガー ウイスキー パイプ ブロック

CloudFront の IP が Managed Prefix List でサポートされたので、CloudFront を経由しない想定外のアクセスを簡単にブロックできるようになりました。 ウィスキー、シガー、パイプをこよなく愛する大栗です。 先程のアップデートで CloudFront の IP アドレスが Managed Prefix List でサポートされました。これにより ... 続きを読む

個人開発・スタートアップで採用すべき最強のアーキテクチャを考えた - Qiita

2020/10/28 418 users Qiita RDS DynamoDB GraphQL API

結論 「アジリティ」「コスト最適化」「スモールな構成」「開発スピード」という観点でWebアプリケーションのアーキテクチャを考えてみました。 ServerlessFrameworkを使い倒す フロントエンドはS3 hosting + CloudFrontで。SSRもLambda@Edgeでできます データベースはRDSは使わずにDynamoDBで APIは基本的にGraphQL。必... 続きを読む

プログラミングスクールで、「リアルバーチャルYoutuber」というWebサービスを作りました - 猫Rails

2019/09/11 92 users プログラミングスクール SendGrid 猫Rails 開発

はじめに 作ったWebサービスの紹介 開発日誌 Getting Realを読む エレベーターピッチを作る 技術検証 ペーパープロトタイプを作る 技術選定とシステム構成図の作成 開発の進め方を考える $ rails new Herokuをセットアップ 独自ドメイン設定 + SSL化 SendGridをセットアップ S3 + CloudFrontをセットアップ Googleアナリ... 続きを読む

CloudFrontを使用してS3静的ウェブサイトを提供する手順 ｜ DevelopersIO

2019/04/11 103 users DevelopersIO AWS 前提 手順 ウェブサイト

こんにちは、坂巻です。 S3静的ウェブサイトを、CloudFrontを通じて提供したいと思います。今回はいくつかの前提の元、実施してみました。 前提／構成 DNS管理者、AWS管理者、コンテンツ管理者がそれぞれ別の部等にわかれ、AWSにて提供するウェブサイトは随時増えていく想定です。イメージは以下となります。 DNS管理者 ... 続きを読む

さようならPython、こんにちはGo | Yakst

2018/09/17 117 users Yakst Python タスク 筆者 Go言語

以前はPythonで書いていたようなタスクを、最近ではGoで書くようになったという筆者による、Pythonと比べたGoの良さ、あるいは足りない部分のまとめ 私は、以前はPythonで書いていたようなたくさんの処理でGo言語を使っています。たとえば下記のような処理が挙げられます。 Amazon S3に保存されているCloudfrontのログの... 続きを読む

AWSに関するありがちミスとその対策〜EC2、S3、RDS、Lambda、CloudFrontの場合 - エンジニアHub｜若手Webエンジニアのキャリアを考える！

2018/07/17 1042 users クラウドサービス 必修科目 若手インフラエンジニア アマゾン

Webエンジニアなら誰もがその名を知るクラウドサービス、アマゾン ウェブ サービス（以下、AWS）。法人・個人問わず利用ユーザが増え続けているため、もはや若手インフラエンジニアにとっては「必修科目」になりつつあるでしょう。 一方で、サービス範囲が非常に広いことから、「なにを使えばいいのか？ なにを勉強すれ... 続きを読む

CloudFront + S3 + Lambda@EdgeでBasic認証付きお手軽 静的サイト ( ランディングページ ) 環境を作った – PSYENCE:MEDIA

2018/06/25 64 users PSYENCE Lambda@Edge Media 雅人 関数

CloudFront + S3 + Lambda@EdgeでBasic認証付きお手軽 静的サイト ( ランディングページ ) 環境を作った 大島 雅人 2018.06.25 0 0000 こんにちは。開発支援Gでインフラ運用をしている大島です。 Lambda@Edgeとは、CloudFrontが配信するコンテンツをカスタマイズする関数を実行できる機能のことです。本記事では、これを... 続きを読む

ELBとCloudFrontのアクセスログをサーバレスに集約させてみた ｜ Developers.IO

2018/05/17 52 users サーバレス ELB アクセスログ Developers.IO

Lambda処理内容 SNSのメッセージから、処理対象となるS3のバケット、キーを取得します。 ログの時刻情報として期待するカラムのデータが日付フォーマットに一致しない場合や、カラム数が異常なレコードはエラーレコードとして除外します。 「request」カラムに含まれるURLを「urlparse」モジュールを利用してパースし、解析時に利用頻度の高い「HOST」や「PATH」を事前に抽出します。 「... 続きを読む

“Web Componentsだけ” で新サービスを実装して見えたこと - Qiita

2018/02/13 398 users Qiita DynamoDB Lambda 関数 バックエンド

Double O というサービスを作りました。 フロントエンドはピュアな Web Components を採用していて、バックエンドは Lambda と DynamoDB のみで構成しました。 (厳密には CloudFront とか API Gateway とかもあるけどそこは省いていいよね？) REST API 以外の Util 系の Lambda 関数はすべて AWS Cloud9 で管理する... 続きを読む

自堕落な技術者の日記 : Amazon AWSの認証局が少し怪しい件 - livedoor Blog（ブログ）

2017/05/02 88 users 自堕落 認証局 Amazon AWS ACM ELB

Amazon AWSのELBとCloudFrontで使えるらしい、無料の証明書発行サービスで、AWS Certificate Manager(ACM)というのがあるそうです。( [参考1] )。ちょっと気になったきっかけは JavaからHTTPSで繋ぐと検証失敗するケースがあった はてブを垂れ流すだけのフレンズ @matsuu ん？これJRE同梱のルート証明書にACMのルート証明書が含まれてなかっ... 続きを読む

【朗報】Amazon CloudFrontのキャッシュ削除(Invalidation)が速くなりました【5秒で90%】 ｜ Developers.IO

2017/03/31 67 users Developers.IO 朗報 キャッシュ削除 大瀧 5秒

ども、大瀧です。 本日、AWSのCDNサービス CloudFront のキャッシュ無効化(Invalidation)高速化のアナウンスがありました。 AWS Developer Forums: Announcing Fast Invalidations 試してみた様子をレポートします。 CloudFrontのキャッシュ削除にかかる時間 CloudFrontのキャッシュ削除は、コンテンツのパス単位(... 続きを読む

CloudFrontをかますとキャッシュなしのAPIコールでも速くなるようだ - sonots:blog

2016/07/13 405 users sonots latency ELB APIコール キャッシュ

Slack 社の  Secured API Acceleration with Engineers from Amazon CloudFront and Slack  という資料を読んでいたら、「CloudFront をはさんだらキャッシュしないAPIアクセスでも速くなった :D」 と書いてあったが、CloudFront (例えばjp)から ELB (例えばus) までは依然として latency... 続きを読む

HTTP Live Streaming(HLS)形式の動画をAWS(Amazon Elastic Transcoder、S3、CloudFront)で配信 - 迎 昭宏のブログ

2016/06/18 95 users アダプティブ HLS AWS Apple 仕様

2016 - 06 - 18 HTTP Live Streaming(HLS)形式の動画をAWS(Amazon Elastic Transcoder、S3、CloudFront)で配信 Apple 仕様のHTTP Live Streaming（HLS）を アダプティブ 配信する環境を AWS （ Amazon Elastic Transcoder→S3→CloudFront ）で構築して、配信最適... 続きを読む

まさかのAWSでSSL証明書が無料、ワイルドカードも使えるし自動で更新 | ロードバランスすだちくん

2016/01/22 406 users ワイルドカード ELB AWS シンジ まさか

シンジです。AWSに新機能「AWS Certificateシンジです。AWSに新機能「AWS Certificate Manager」が追加されました。SSL証明書がまさかの無料発行！ただしAWSのELBとCloudfrontに限る制限付きだけど！なので、EC2だけ〜とかでは使えませんのでご注意を。とはいえELBを挟むのもCloudfront使うのもありがちな構成なので、さくっとSSL暗号化通信し... 続きを読む

AmazonのCloudFrontの障害規模はどれくらいだったのか？ - GIGAZINE

2014/12/12 61 users GIGAZINE CDN ＤＮＳ Amazon 恐ろしい事態

By BFLV Amazonの「CloudFront」は、大容量アプリケーション・音楽・動画・オンラインゲームなどのブロードバンドコンテンツの配信を安定かつ低コストで行うためのコンテンツ配信ネットワーク(CDN)と呼ばれるものです。 そんなCloudFrontのDNSにて障害が発生し、CloudFront経由で配信されていたさまざまな画像などのコンテンツが表示されなくなる、という恐ろしい事態が発生... 続きを読む

実践！ヌーラボサービスでの CloudFront の障害対策 - ヌーラボ [Nulab Inc.]

2014/11/28 288 users CDN Cacoo AWS ヌーラボ エッジロケーション

CDNが単一障害点にならないようにするために ヌーラボでは 2010 年 Cacoo の商用サービスの開始に合わせて AWS における運用を開始しました。当時、運用環境として AWS を採択する決め手の一つになったのが CloudFront でした。その後も着々とエッジロケーションは増え、独自ドメインのサポートなど魅力的な機能も提供され、今ではヌーラボの全サービスの静的ファイルの配信で利用している... 続きを読む

AWS - Amazon CloudFront の障害に備えてフェイルオーバーを設定する - Qiita

2014/11/27 161 users ORIGIN CDN フェイルオーバー Qiita AWS

日本時間 2014/11/27 の AM9時〜AM11時頃まで、全世界的に Amazon CloudFront に障害がありました。 CDNとして CloudFront を利用しつつ、障害時にはフェイルオーバーする方法をまとめました。 S3 CloudFrontのOriginがS3でない場合は、この項の設定は関係ありません。 CloudFrontのOriginとしてS3を使う場合、以下のようにしま... 続きを読む

Amazon Web Services ブログ: 【AWS発表】AWSのIPアドレスレンジをJSONで提供

2014/11/23 82 users JSON ファイアウォール AWS JSON形式 ＥＣ

多くのお客様から、AWSにアサインされ、AWSが使っているIPアドレスレンジについて、尋ねられることがあります。お客様によってユースケースは異なりますが、ファイアウォールやネットワークのアクセス制御リストに取り込むのが典型的です。これまでは、EC2、S3、SNS、CloudFront等のフォーラムポストを通じて人が読めるような形で提供してきました。 JSON形式のIPアドレスレンジ JSON形式で... 続きを読む

Amazon EC2から負荷テストを行うときの落とし穴と対策 ｜ Developers.IO

2014/08/08 333 users 落とし穴 Developers.IO ＥＣ 負荷テスト 大瀧

ども、大瀧です。 ここのところ新機能を追いかける記事ばかりだったので、今回は少し毛色の異なるノウハウ系を書いてみます。 負荷テストの前置き(読み飛ばし可) 「Webサイトがテレビ番組で紹介されることになった！大幅なアクセス増がやってくる！」という場合に、ロードバランササービスのElastic Load Balancing(ELB)やCDNのCloudFrontなどスケールするサービスを組み合わせて... 続きを読む

CloudFrontのキャッシュ時間(TTL)はどの程度なのか ｜ Developers.IO

2013/10/11 60 users ttl Developers.IO オリジン サーバ 都元

都元です。 CloudFrontはContents Delivary Network、所謂CDNですが、ざっくりと言ってしまえば、要するにキャッシュ機能を持ったHTTPリバースプロキシです。CloudFrontでは、元々のコンテンツ提供をするサーバのことをオリジンと呼びます。 CloudFrontでは、オリジンから提供されるコンテンツを、エッジサーバと呼ばれる世界各地に点在するコンテンツ配信専用の... 続きを読む

AWSのPublic IPアドレスの一覧 - 元RX-7乗りの適当な日々

2013/07/23 54 users AWS 元RX-7乗り CloudComputing 日々

IT, CloudComputing たまに調べるのでメモ的に。2013年5月24日時点でのAWSの公開情報です。尚、ソースはAWSのフォーラム。 Amazon EC2後述のネットワークで割り当てられているパブリックIPアドレス(EC2分のみ、CloudFrontは除く)を、スクリプトで計算してみたら、"4,177,920"個という数字が出てきました。実際に使われている数は、ネットワークアドレスや... 続きを読む