KinesisとLambdaでつくるServerlessなログ基盤 @ AWS DevDay Tokyo 2019 [C-2] - Speaker Deck

2019/10/04 54 users マネージドサービス 自前 AWS Lambda 課題

本セッションでは、弊社にて複数サービスで導入しているAWSのマネージドサービス (Lambda、CloudWatch Logs、Kinesis Data Streams、S3、Elasticsearch Service) を活用したServerlessなログ基盤の構成について紹介する。自前でログ基盤を管理しているが管理コストなど課題を感じている人や、コンテナ活用時のロギング構... 続きを読む

DynamoDBのインフラコスト構造と削減策 - ゆううきブログ

2018/04/16 213 users DynamoDB RDS スループット ゆううきブログ 削減策

2018 - 04 - 16 DynamoDBのインフラコスト感覚 Database DynamoDB Amazon DynamoDB は、RDSのようなインスタンスサイズによる課金モデルではなく、ストレージのデータ使用量とスループットを基にした課金モデルになっている。 インスタンスサイズによる課金モデルでないデータストア系サービスとして、他にはS3、Kinesisなどがある。 これらは、AWSの... 続きを読む

Lambda / Kinesis / DynamoDB / X-Ray などを組み合わせた実装を学べる「サーバーレスアプリケーション開発ガイド」を読んだ - kakakakakku blog

2018/03/26 57 users Lambda DynamoDB X-ray 書評 実装

2018 - 03 - 26 Lambda / Kinesis / DynamoDB / X-Ray などを組み合わせた実装を学べる「サーバーレスアプリケーション開発ガイド」を読んだ 本 AWS Lambda 今月発売されたばかりの 「サーバーレスアプリケーション開発ガイド」 を読んだので，書評をまとめたいと思う．著者の西谷さん，献本ありがとうございます！ Amazon Web Servicesを... 続きを読む

はてなエンジニアの愛用キーボード調査（後編）　人気3機種の愛用者に使い心地を聞いてみました - はてなニュース

2017/04/25 448 users 後編 愛用キーボード調査 使い心地 はてなエンジニア 愛用者

2017 - 04 - 25 はてなエンジニアの愛用キーボード調査（後編）　人気3機種の愛用者に使い心地を聞いてみました Web・IT はてな コラム 「はてなエンジニアの愛用キーボード調査」後編では、アンケートで特に人気だった上位3機種「Happy Hacking Keyboard」「MacBook Pro内蔵キーボード」「kinesis（Contoured Keyboard）」を愛用中のエンジ... 続きを読む

はてなエンジニアの愛用キーボード調査（前編）　HHKB、Kinesis……人気上位は意外な結果に!? - はてなニュース

2017/04/25 428 users HHKB 配列 エンジニア 打ち心地 キーボード

2017 - 04 - 25 はてなエンジニアの愛用キーボード調査（前編）　HHKB、Kinesis……人気上位は意外な結果に!? Web・IT はてな コラム エンジニアにとって、重要な仕事道具の一つであるキーボード。キーの配列や打ち心地など、人によってさまざまなこだわりがあります。はてなニュースは今回、「はてなエンジニアの愛用キーボード調査」を実施！ はてなエンジニアに、キーボード選びで譲れな... 続きを読む

Fluentd + Kinesis + Elasticsearch + Kibana / Grafanaでのリアルタイムログ解析基盤 | Tech Blog - リクルート住まいカンパニー

2016/06/01 353 users エンジニア 上野 fluentd elasticsearch

こんにちは、SUUMOスマホサイトの開発チームに所属しているエンジニアの上野です。 今回は、リアルタイムログ解析基盤を紹介します。 背景 皆様はwebサーバログ監視（アクセスログ・エラーログなど）をどのように行われているでしょうか？ スーモスマホサイトでは、アクセス数増加に伴いサーバ台数が増え、csshX地こんにちは、SUUMOスマホサイトの開発チームに所属しているエンジニアの上野です。 今回は、... 続きを読む

Graylog ではじめるログ管理 - クックパッド開発者ブログ

2015/11/25 300 users Kafka セキュリティグループ SaaS fluentd

2015 -11 -25 Graylog ではじめるログ管理 こんにちは。インフラストラクチャー部 セキュリティグループの星 ( @kani_b ) です。 主に "セキュリティ" や "AWS" といったタグのつきそうなこと全般を担当しています。 Fluentd などのデータコレクタ、Kibana やその他 SaaS による可視化、Kafka, Kinesis, Spark などのストリーム処理... 続きを読む

API Gateway / Lambda / Kinesis を使ったストリーミングなバッチ実行基盤の実装 // Speaker Deck

2015/11/21 125 users Lambda ストリーミング Speaker Deck 実装

All slide content and descriptions are owned by their creators. 続きを読む

DynamoDBでTomcatのセッション共有をするとハマるかも - 谷本 心 in せろ部屋

2015/10/19 68 users Tomcat DynamoDB 谷本 AWS cero_t

AWSを仕事で使い始めて1年半、ようやく頭がクラウド脳に切り替わってきた @cero_t です。好きなAWSサービスはKinesisです。まだ使ってませんけどね！ さて、今日のテーマは「AWSでTomcatのセッション共有」です。EC2上で動くTomcatのセッションオブジェクトを、DynamoDBを使って共有するというものです。 話題としてはそれなりに枯れていると思うのですが、実案件で使おうと思... 続きを読む

【制作1日目】 池澤あやかさん、イベント会場がヒートアップ間違いなしのアプリを制作、まずはクライアント側処理です ～ Amazon S3 / Cognito / Kinesis / DynamoDB 登場 （1/8）：CodeZine

2015/04/24 222 users CodeZine DynamoDB Cognito 制作 登場

池澤あやか（いけざわあやか）…… 1991年生まれ。東京都出身。2014年3月に慶應義塾大学環境情報学部を卒業し、受託開発も行う女優として活躍している。先日も、デザインから実装、サーバーまで1人で担当した(!) サイトをカットオーバーしたとのこと。4月からエッジなデジタルクリエイターらを紹介するテレビ番組「SENSORS」（日本テレビ・毎週土曜日 深夜25：25 ～ 25：55放送）にも出演中。 ... 続きを読む

AWSのフルマネージドサービスのみ使ってIoT向けビッグデータ基盤を構築する ｜ Developers.IO

2015/04/20 67 users AWS フルマネージドサービス Developers.IO

はじめに KinesisやRedshiftを使ったビッグデータ基盤の運用負荷を減らせないかと考えていたところ、Lambdaが正式公開されましたのでAWSのフルマネージドサービスだけで構築できないかやってみました。今回、構築したのはスマホアプリやIntel Edisonなどの端末からセンサー情報をKinesisに送信後、S3を経由してRedshiftにデータをロードするところまでになります。処理とし... 続きを読む

AWS LambdaとElastic Transcoder - Qiita

2014/11/25 52 users Qiita DynamoDB invent トリガー ファイル

AWS Lambdaはre:Inventで発表されたクラウド上でコードスニペットをイベントドリブンで実行出来るプラットフォームです。 S3 EventNotificationやDynamoDB、Kinesisと連携することが出来ます。例えば、S3にファイルがPUTされたら、そのイベントをトリガーにしてDynamoDBに情報を書き込んだり、AWS SDKを利用して他のAWSサービスを呼び出すことも可... 続きを読む

Kinesis でフリーザを撃て！

2014/03/16 125 users Kinect ピタゴラスイッチ DynamoDB フリーザ

Kinesis でフリーザを撃て！ Presentation Transcript 自己紹介 しみず @shimy_net 発売中 近日発売 iOS逆引きレシピ AWS芸人 無駄に技術を使って 面白いLTをする 過去の発表 自転車でDynamoDB ピタゴラスイッチで自動化 Kinect でキックスタート 今回は Kinesis Kinesisとは？ Kinesis ビッグデータ リアルタイム分析... 続きを読む

理想の開発環境 - mixi Engineers' Blog

2012/05/31 755 users mixi Engineers 理想 Blog 開発環境 外界

たんぽぽグループの森本です。 一日の半分近くを机に座ってすごすエンジニアにとって、快適な開発環境は切実な問題です。 外界からうけるストレスを極力排除し、効率よくフロー状態にはいることと、フロー状態を長く維持することはとても重要です。 お前は今までに購入したキーボードの数をおぼえているのか？と突っ込まれてもしかたが無いキーボード遍歴を重ねましたが、KINESISに出会い キーボードに関してはまぁまぁ... 続きを読む

mixi Engineers' Blog » 理想の開発環境

2011/05/17 565 users mixi Engineers 理想 Blog 開発環境 外界

たんぽぽグループの森本です。 一日の半分近くを机に座ってすごすエンジニアにとって、快適な開発環境は切実な問題です。 外界からうけるストレスを極力排除し、効率よくフロー状態にはいることと、フロー状態を長く維持することはとても重要です。 お前は今までに購入したキーボードの数をおぼえているのか？と突っ込まれてもしかたが無いキーボード遍歴を重ねましたが、KINESISに出会い キーボードに関してはまぁまぁ... 続きを読む