[AWS CDK] 一撃でCloudFrontとS3を使ったWebサイトを構築してみた | DevelopersIO

2024/03/28 18 users CloudFront DevelopersIO OAC 一撃

パッと静的Webサイトを用意したい こんにちは、のんピ(@non____97)です。 皆さんはパッと静的Webサイトを用意したいなと思ったことはありますか? 私はあります。 AWS上で静的Webサイトを構築するとなると思いつくのは「CloudFront + S3」の構成です。しかし、OACの設定をしたりアクセスログの設定をしたりと意外と設定す... 続きを読む

アクセスログでGooglebotのクロール分析 | asoview-engineering

2020/12/25 14 users Googlebot

Photo by Stephen Phillips - Hostreviews.co.uk on Unsplashアソビュー！ Advent Calendar 2020 の19日目の記事です。 休日の便利でお得な遊び予約サイト「アソビュー！」のSEOを担当している西本です。先日「December 2020 Core Update」が発表されましたが、Googleのアルゴリズム更新に右往左往してしまうのはSEO担当... 続きを読む

2020年9月26日CloudFront障害中のアクセスログを調査してみた | Developers.IO

2020/09/28 28 users CloudFront Developers.IO すずき

2020年9月26日(土)、日本時間の18時前後に発生していたCloudFront障害について、CloudFrontのアクセスログを調査してみました。 AWSチームのすずきです。 2020年9月26日(土)、 日本時間 PM 5:55 から PM 6:45 の間、日本のCloudFrontのエッジロケーションで断続的にエラーが発生していた件について、 CloudFrontのアクセ... 続きを読む

「マンガが快適に読める」を数値化し、SLOをマンガビューワに導入するまで - Hatena Developer Blog

2020/08/31 21 users SLO Sli マンガビューワ 計測 サーバー

マンガビューワにおけるサービスレベルとは なぜSLOを策定したかったのか サービスレベルを単純に決める 何をサービスレベル指標としてどう計測するか 一般的なSLIの表現 期間を移動しながら集計する アクセスログからサーバーのSLIを計測する PageSpeed Insights APIでフロントエンドを計測 プロダクトオーナーとともに... 続きを読む

コマンド一発でウェブサイトのアクセスログをターミナルやウェブブラウザで可視化できる「GoAccess」レビュー - GIGAZINE

2020/06/13 137 users GIGAZINE トラッキングコード ウェブブラウザ 属性

ウェブサイトのアクセス数や訪問者の属性を分析するために「Google Analytics」を使っている人は多いはず。無料のオープンソースソフトウェア「GoAccess」を使うと、トラッキングコードをウェブサイトに埋め込むことなく、リアルタイムにアクセス状況をターミナルやブラウザ上で可視化することができます。 GoAccess - V... 続きを読む

ブラウザで何が起こっているのかを知る Reporting API と ReportingObserver | blog.jxck.io

2020/01/18 15 users エラーログ report jxck.io サーバ 基盤

Intro Web サービスにおいては通常、 Web サーバから取得できるアクセスログやエラーログを取得し解析する基盤を保有するだろう。 しかし、 Web サーバから取得できる情報だけでは、ブラウザで何が起こったのかを知るのは限界がある。 今回は、ブラウザ内で起こったことを知るための Reporting API と、その Report の収... 続きを読む

NLB と ALB のアクセスログは違うんやで、という話 ｜ DevelopersIO

2019/04/27 40 users Alb NLB DevelopersIO 記憶 アップデート

NLB が TLS Termination 対応と同時にアクセスログ出力が可能になったのは記憶にあたらしいかと思います。 このアップデートで、単純に「NLB でもアクセスログが取得できるようになった」と理解していたのですが、取得できる内容はずいぶん違うんやで、ということをきちんと理解しておりませんでした。 というのが、今日... 続きを読む

サイトに“タグ”を置くだけで改善点を見つけてくれるAIコンサルタント「CACICA」 - CNET Japan

2019/04/17 10 users CACICA シンガー カシカ コンサルティング ウェブサイト

シンカーは4月17日、タグを設置するだけでウェブサイトの改善点を見つけ出すAIコンサルタント「CACICA（カシカ）」の提供を開始すると発表した。ツールの利用料は無料で、コンサルティングを受ける場合は1回につき30万円からとなる。 CACICAは、タグ設置のみで始められるAIアクセスログ解析サービス。アクセスログに機械... 続きを読む

タグを設置するだけでAIがサイトの改善点を可視化する「CACICA」のβ版が公開

2019/04/17 36 users CACICA シンガー デジタルマーケティング領域 カシカ

デジタルマーケティング領域でプロダクト開発やコンサルティング事業を手がけるシンカーは4月17日、タグを設置するだけでAIがサイトのアクセスログを分析し、改善点を発見してくれるツール「CACICA（カシカ）」のβ版を公開した。 CACICAはその名の通り、AIがユーザーに変わってWebサイトの現状や課題点を“可視化”してく... 続きを読む

秒間数千件以上のアクセスログでも高速に集計し、可視化できる mackerel-plugin-axslog の紹介 - Hateburo: kazeburo hatenablog

2019/04/05 63 users Hateburo kazeburo mackerel 可視化

Mackerelアンバサダーになりました Mackerelアンバサダーになったので、グッズ頂いた。ありがとうございます pic.twitter.com/UzCmANa84O— Masahiro (@kazeburo) March 23, 2019 ということで、新しいmackerel-pluginの紹介です。 mackerel-plugin-axslog とは Mackerelの公式プラグインに mackerel-plugin-accesslog ... 続きを読む

S3のサーバアクセスログで署名バージョンの確認ができるようになりました ｜ DevelopersIO

2019/03/25 26 users デバッグ パース 正規表現 DevelopersIO 神サイト

確認 Regex101 を利用して、S3のアクセスログのパースに利用できる正規表現を確認してみました。 正規表現のデバッグに重宝した神サイトを紹介してみる 正規表現 (\S+) (\S+) (\S+ \S+) (\S+) (\S+) (\S+) (\S+) (\S+) (\"[^\"]*\") (\S+) (\S+) (\S+) (\S+) (\S+) (\S+) (\"[^\"]*\") (\"[^\"]*\") (\S+) (\S+) (\S+) (... 続きを読む

眠っているログを活用しよう / Rails Developer Meetup 2019で発表しました - フリーランチ食べたい

2019/03/23 25 users Rails developer meetup ロク 資料

RailsDM2019(https://railsdm.github.io/) で発表させていただきました。 タイトルは少し長いのですが、 「ログを解析し続けてわかった、 会社で眠っているアクセスログを活用する5つのプラクティス」 です。 speakerdeck.com 資料内で引用したリンク集 様々な資料を引用させていただいたのでこちらに載せます。 興味を... 続きを読む

静的なIPアドレスを持つNLBがTLS Terminationに対応してアクセスログも出力可能に！ ｜ DevelopersIO

2019/01/25 33 users NLB DevelopersIO ロードバランサー TCP

大栗です。 Network Load Balancer（NLB）はIPアドレスが固定で、秒間数百万リクエストでも簡単にスケーリングするロードバランサーですがTCPのバランシングを行うだけでTLSのTerminationは行なえませんでした。アップデートによりTLSのTerminationが可能になり、アクセスログも出力可能になったのでサポートします。 Ne... 続きを読む

JSON/YAMLで定義可能なHTTPモックサーバーMmockを触ってみる（セットアップ、シンプルなモックの定義、ブラウザでのアクセスログおよびモック定義一覧の確認まで） ｜ Developers.IO

2018/07/26 58 users JSON モック Developers.IO 定義 ブラウザ

外部サービスとの連携などのテストを行う際、テスト環境に制約があったり処理に時間がかかるなどの理由でHTTPモックサーバーが欲しくなることがあります。 本記事ではGo言語で書かれたHTTPモックサーバー、Mmockをご紹介 […] 続きを読む

nginx でアクセスログに記録される IP アドレスを匿名化する - えいのうにっき

2018/05/25 63 users GitHub nginx えいのうにっき アプローチ 匿名化

2018 - 05 - 25 nginx でアクセスログに記録される IP アドレスを匿名化する インフラ関連技術 「あ、 アクセスログ に記録される IPアドレス を匿名化したいな......」と思うこと、ありますよね。 私は昨日から思っています。 ちょっと探してみました。 見つかったアプローチ まず見つかったのが、 GitHub - masonicboom/ipscrub: IP addres... 続きを読む

ALBのログをEmbulk + BigQuery + Redashで可視化する - LCL Engineers' Blog

2018/05/21 19 users Alb LCL BigQuery embulk redash

2018 - 05 - 21 ALBのログをEmbulk + BigQuery + Redashで可視化する Webエンジニアの森脇です。 LCLでは、AWS ALBのアクセスログを分析し、各種KPIを定期的に確認しています。今回は、Embulk + BigQuery + Redashを利用してのログ分析の事例について紹介したいと思います。 概要 AWS ALBのアクセスログは、S3へ記録されます... 続きを読む

時系列データに対する多様体学習について | ココン株式会社

2018/05/19 161 users 時系列データ ニューラルネットワーク エントリ 目次 背景

AI戦略室の坂本です。 今回のエントリはやや技術的な話をしようと思います。 『時系列データに対する多様体学習について』 少し専門的な内容になりますが、お付き合いください。 目次 背景 アクセスログを解析する ニューラルネットワークによる多様体学習 時系列データに対する多様体学習 背景 ココングループではセキュリティ関連の事業を展開しているのですが、セキュリティを考えるときには「いかにして攻撃を防ぐ... 続きを読む

ELBとCloudFrontのアクセスログをサーバレスに集約させてみた ｜ Developers.IO

2018/05/17 52 users サーバレス CloudFront ELB

Lambda処理内容 SNSのメッセージから、処理対象となるS3のバケット、キーを取得します。 ログの時刻情報として期待するカラムのデータが日付フォーマットに一致しない場合や、カラム数が異常なレコードはエラーレコードとして除外します。 「request」カラムに含まれるURLを「urlparse」モジュールを利用してパースし、解析時に利用頻度の高い「HOST」や「PATH」を事前に抽出します。 「... 続きを読む

財務省は「森友文書」の真相が一発で分かる方法をなぜ使わないのか（佃 均） | 現代ビジネス | 講談社（1/3）

2018/03/21 60 users 森友文書 真相 佃 均 財務省 講談社

みんな「紙の書類」ばかり見ているが… 財務省が国有地を森友学園に払い下げた際の決裁文書を改ざんするという、あるまじき事件が発覚した。 裏事情や政局への影響は新聞や専門家、テレビのワイドショーに任せるとして、官公庁の情報システムのアレコレを取材してきた筆者が真っ先に抱いた疑問は、 「財務省は、公文書のアクセスログやタイムスタンプをどのように管理しているのか？」 「そもそもデータ改ざんが不可能なシステ... 続きを読む

NginxのアクセスログをJSON形式で出力する - Qiita

2018/03/18 70 users nginx Qiita JSON形式

http { : log_format json escape=json ' { "time": " $time_iso8601 ",' '"host": " $remote_addr ",' '"vhost": " $host ",' '"user": " $remote_user ",' '"status": " $status ",' '"protocol": " $server_proto... 続きを読む

Kibanaの使い方 〜環境準備〜【Amazon Elasticsearch Service】 ｜ Developers.IO

2017/12/25 13 users KIBA Kibana 備忘録 西村祐二 ロク

どうも！大阪オフィスの西村祐二です。 アクセスログや、さまざまなログをAmazon Elasticsearch Serviceに配信し、Kibanaで可視化するということがよくあると思います。 下記ブログではじめて触ったのですが、すごく使い勝手がよく、使いこなせるようになりたいなと思ったので、 個人的な備忘録も兼ねて、何回かに分けてKibanaの使い方をまとめていきたいと思います。 今回はKiba... 続きを読む

alp と Plack::Middleware::QueryCounter を合わせて使うと捗る - 酒日記 はてな支店

2017/12/04 22 users Middleware Plack LTSV tkuchiki

2017 - 12 - 04 alp と Plack::Middleware::QueryCounter を合わせて使うと捗る @tkuchiki 氏が作っている alp ( Access Log Profiler) は、もはや ISUCON 競技者必須ツールとなった、LTSV 形式の アクセスログ をいい感じに集計してくれるツールです。 github.com 通常は alp では reqtime... 続きを読む

Firebase Cloud FunctionsでFirebase Analyticsのカスタムイベントをリアルタイムで扱う方法 | Nagisaのすゝめ

2017/09/20 25 users イベントログ カスタムイベント クライアントサイド イベン

試した動機 クライアントサイドはAPIのアクセスログやらを直接触る機会がないと思いますが、ふとユーザーの垂れ流しになっているイベントログを使ってあそんでみたいなと思ったのがきっかけです。 なので色々探したところ、 Firebase の Analytics でイベント計測をして Cloud Functions で出力をする方法が見つかったので、そちらの手段を紹介します。 Analytics にイベン... 続きを読む

はてなブログに不正アクセス！？ログイン履歴チェックや記事バックアップなど、事前に防止対策を行おう！ - LIFE LOGS

2017/07/29 24 users LIFE LOGS 天狗 不正アクセス 事前 防止対策

2017 - 07 - 29 はてなブログに不正アクセス！？ログイン履歴チェックや記事バックアップなど、事前に防止対策を行おう！ ブログ運営 ブログ運営-はてなブログ シェアする facebook Twitter Google+ Pocket LIFE LOGSの天狗宇です。 あなたは自分のブログをしっかりと管理していますか？ 実はつい先日、はてなブログの『ログイン履歴に身に覚えのないアクセスログ... 続きを読む

カルーセル、使っていいよ | ネコメシCEOブログ

2017/06/14 27 users カルーセル フツウ ネコメシCEOブログ 部門 啓蒙サイト

カルーセルって、使っていいの？（Should I Use A Carousel? 日本語訳） 何だろうな、この啓蒙サイトは。 そもそも、今どき新たに作成されるカルーセルが、クリックされたいがために作成されてると思ってるって時点でナンセンスだ。 PCよりスマホのほうが多いってアクセスログを見せても、今でもトップページの一番上にこれを載せてくれっていう声が、社内の複数の部門からあがってくるとかフツウな... 続きを読む