ログ基盤のFluentdをFluent Bitに移行して監視ツールを実装した話 - Mirrativ Tech Blog

2024/06/28 149 users fluentd MLOps インターン vim環境 インフラ

はじめまして、Azuma（@azuma_alvin）です。現在大学院の1年生で、2024年2月から4ヶ月間ミラティブのインフラチームにインターンとして参加しました。普段はインフラやMLOpsといった領域に興味があり、最近はVim環境の整備がマイブームです。 本記事では、ログ基盤をFluentdからFluent Bitへ部分移行した経緯とその2種類... 続きを読む

Retty の Terraform CI/CD 解体新書 - Retty Tech Blog

2022/11/18 160 users Retty Terraform 解体新書 箇所 前回

Retty インフラチームの幸田です。 6月に実施したマイクロサービス強化月間で公開した記事では、マイクロサービス環境を Terraform を利用して刷新した話を書きました。 engineer.retty.me この記事では前回と重複する箇所もありますが、Terraform の CI/CD にフォーカスした内容を書こうと思います。 CI を整備するにあ... 続きを読む

「入門 監視」を読んでからの取り組みを紹介します - WILLGATE tech blog

2019/09/26 359 users 監視 入門 WILLGATE tech blog 小林 民主化

「入門 監視」を読んだ フロントエンド監視 なぜフロントエンド監視が必要なのか どうやってフロントエンド監視をしているのか Runbookを作ろう なぜRunbookが必要なのか Runbookをどう使っていくか 監視の民主化 勉強会開催 今後 こんにちは！インフラチームの小林です。 今回はインフラチームが現在取り組んでいる、運... 続きを読む

NLB + Fluentd の構成でファイルディスクリプタが枯渇する謎の現象を解消した話 - Repro Tech Blog

2019/07/03 178 users Repro NLB SRE ファイルディスクリプタ 伊豆

Repro インフラチーム (SRE + 分析基盤) の伊豆です。今回は、Repro のデータ収集基盤で私たちが遭遇した問題を紹介したいと思います。 具体的には、AWS Network Load Balancer(NLB) + Fluentd の構成でファイルディスクリプタが枯渇する謎の現象に遭遇したので、その問題の調査記録と解決策を共有します。また、この問... 続きを読む

サービスごとに分散してしまった Ansible のコードを共通化する - WILLGATE tech blog

2019/04/10 69 users Ansible 高畑 気合い ウィルゲート 後輩

こんにちは！インフラチームの高畑です！ ついに新年度を迎えぼく自身も入社 2 年目となってしまいました。 後輩も入社してきたのでより一層気合い入れて業務に取り組む必要性をひしひしと感じています。 さて、今回はウィルゲートの各サービスを陰ながら支えている Ansible を共通化したお話をいたします！ これまでの ... 続きを読む

強いインフラが組織を創る / #jtf2018 - Speaker Deck

2018/07/29 197 users Speaker Deck jtf2018 組織 課題 変化

これまで目指していた「変化に強いインフラ」の話から、Microservices における課題、インフラチームが目指しものの変化、それをどう解決していくか？という話をしました July Tech Festa 2018 at 産業技術大学院大学(公立大学法人 首都大学東京) 続きを読む

インフラチームからSREへ / SRE in Mercari Developers Summit 2018 // Speaker Deck

2018/02/16 90 users SRE Speaker Deck メルカリ 新しいインフラ

インフラチームからSREへ
 〜メルカリを支える新しいインフラのあり方 Developers Summit 2018/2/16 続きを読む

デブサミ2018「インフラチームからSREへ〜メルカリを支える新しいインフラのあり方」講演メモ #devsumi - 元RX-7乗りの適当な日々

2018/02/16 52 users SRE devsumi デブサミ2018 メルカリ 講演メモ

楽しみにしていた Kazeburo 先生のセッション。 電車が遅れていたおかげで間に合わないかと思ったけど、自己紹介が始まったところで、なんとか滑り込み。 メモを書いたので貼り付けておきます。 自己紹介 〜2006 京都のスタートアップ 2006〜 mixi 2010〜 Livedoor(NHN, Line) 2015〜 Mercari SREとの出会い インフラエンジニア？ mixi時代は「アプ... 続きを読む

Kubernetesを使った変化に強いインフラ――Wantedlyのインフラチームが大切にしていること (1/3)：CodeZine（コードジン）

2017/08/18 53 users CodeZine Wantedly Kubernetes

Wantedlyの開発現場で活用されている技術や手法は、日々進化するプロダクトに合わせて柔軟に変化しています。この連載では実際の開発で取り組んでいる技術や手法を、実務に使える形でお伝えしていきます。第1回はWantedlyのインフラチームが大切にしている「変化に強いインフラ」づくりについて、Kubernetesの活用方法を交えて紹介します。 はじめに 本連載は、 WANTEDLY TECH BOO... 続きを読む

インフラチームと開発チームの垣根をなくすためにAWSのCI環境を構築した話 - VOYAGE GROUP techlog

2017/02/20 393 users techlog データベースサーバ AWS 垣根 CI環境

こんにちは、VOYAGE GROUP システム本部の @s-tajima です。 PHPカンファレンス2016 の「 老舗メディアが改善に取り組んでいる話 」でもお話した通り、長年オンプレミス環境で稼働してきたECナビを、AWSに移転しようというプロジェクトが進行しています。 そしてなんと先日、約24時間のメンテナンスを経てECナビの本体(Webサーバ, 管理画面サーバの一部, データベースサーバ... 続きを読む

Yahoo! JAPANの新しいメッセージングシステムと、それをOSSで開発するエンジニアの素顔 - はてなニュース

2016/12/12 495 users OSS 素顔 エンジニア Japan Yahoo

国内有数のWebサイトであるYahoo! JAPANでは、その膨大なトラフィックを支える大規模なインフラチームを擁しています。大量なだけではなく、多様なサービスが生み出すさまざまなデータを処理したいという要求から、オープンソースとして公開されたばかりのメッセージングシステム「Pulsar」が生まれました。長年親しんだ六本木から移転したばかりのYahoo! JAPAN新オフィスで、同社のプラットフォ... 続きを読む

【Go言語】append使い分けのススメ 〜スライスの先頭へ要素を追加するとき、中身の型は固定長？可変長？〜 | eureka tech blog

2016/12/07 3794 users unshift スライス 可変長 Go言語 事案

【Go言語】append使い分けのススメ 〜スライスの先頭へ要素を追加するとき、中身の型は固定長？可変長？〜 こんにちは、pairs事業部の山下です。 最近はインフラチームから離れて、pairs GlobalチームでPMとして日々を送っています。 一応エンジニアなので、手が空けば実装もします。 そんな中、久しぶりにGoを書いていて、 スライスの先頭に要素を追加(Unshift)したい 事案が発生し... 続きを読む

83億レコードを移行し、日々2,500万レコードのアクセスログをBigQueryに記録している話（インフラ編） | Money Forward Engineers' Blog

2016/08/03 295 users BigQuery アクセスログ ビルド マネーフォワード 村上

こんにちは。 インフラエンジニアの村上です。 マネーフォワードのインフラチームは、サービスに関わるインフラから、自社の作業環境、開発環境、さらにはサービスのインフラの中でも物理的なものからOS・ミドルウェア・アプリケーションのメンテナンス・ビルド・リリース・運用まで幅広く関与しています。 今回はGoogle Cloud PlatformのBigQueryを活用してアクセスログの分析環境を構築した時... 続きを読む

GitHubを使って法務コミュニケーションのスピードを2倍にした話 by 大谷 昌継 | Wantedly, Inc.

2016/07/20 429 users GitHub Wantedly カスタマーサービス Inc

ウォンテッドリー株式会社コーポレートチームの大谷です。 カスタマサービスチーム仲野さんが書いた ”GitHubで実現する、カスタマーサービスとエンジニアの非同期コミュニケーションのすすめ” に良い反響がありましたので、コーポレートチームでも行っている活動をお話したいと思います。 Wantedlyのコーポレートチームは ”働くメンバーの生産性を上げる” ことをミッションとしています。インフラチームが... 続きを読む

cybozu.com のリバースプロキシを nginx にリプレイス - Cybozu Inside Out | サイボウズエンジニアのブログ

2016/05/07 133 users リバースプロキシ nginx リプレイス Hazama 深谷

2015 - 02 - 20 cybozu.com のリバースプロキシを nginx にリプレイス インフラ こんにちは。インフラチーム Hazama の深谷です。 デブサミ 2015 で、cybozu.com の自社製リバースプロキシを全面的に再実装した話をしてきました。 今回は、そちらの資料を紹介いたします。 cybozu.com ではお客様ごとに異なるサブドメイン（ex. demo.cybo... 続きを読む

秒間100万リクエストを支えるオープンソースのコードを書くヤフーのインフラチームに、はてなエンジニアが迫る - はてなニュース

2016/04/05 639 users ヤフー オープンソース コード はてなエンジニア コミッタ

国内有数のWebサービスを手がけるYahoo! JAPANは、その毎秒100万リクエストという膨大なトラフィックを支える大規模なインフラチームを抱えています。そのうち画像などを配信するプライベートCDNでは、オープンソースのATS（Apache Traffic Server）をキャッシュサーバーに採用し、本家OSSプロジェクトでの開発にも積極的に参加しています。OSSのコミッタを業務とするYaho... 続きを読む

nginx の設定をレビューするときの観点をまとめてみた - Cybozu Inside Out | サイボウズエンジニアのブログ

2015/11/19 551 users nginx サイボウズエンジニア nojima 観点 野島

2015-11-20 nginx の設定をレビューするときの観点をまとめてみた インフラ こんにちは。 インフラチームの野島（@nojima）です。 チームのメンバーに nginx の設定について気をつけるべき点を共有するために、レビュー観点を書きました。 せっかくなのでここで公開します。 ほとんどの項目は自分やチームのメンバーの実体験に基いています。 レビュー観点 server server_n... 続きを読む

大人のスタートアップは大人のリリースができる。そう、ChatOpsならね。 - Mercari Engineering Blog

2015/10/15 324 users ChatOps カスタマーサポート タスク メルカリ 構築

2015-10-15 大人のスタートアップは大人のリリースができる。そう、ChatOpsならね。 このブログをご覧のみなさま初めまして。@siroken3です。メルカリではインフラチームに所属しており、リリースの仕組み構築を担当しています。 メルカリのリリースについて メルカリではカスタマーサポートから受け取る改善要望、プロダクトとしてまだやれてないことなど多くのタスクがあり現在も継続して開発とリ... 続きを読む

nginx-build〜nginxのビルドプロセスを自動化〜 - Mercari Engineering Blog

2015/08/26 95 users ビルドプロセス nginx cubicdaiya レスポンス

2015-08-26 nginx-build〜nginxのビルドプロセスを自動化〜 インフラチームの@cubicdaiyaです。今回はnginxのビルドプロセスを自動化するツールであるnginx-buildについて紹介します。 メルカリとnginx メルカリでは多数のnginxを活用し、高速なレスポンスやサービスの安定稼働を実現するのに重要な役割を果たしています。実際の活用事例には、 リバースプロ... 続きを読む

WEB+DB PRESS Vol.88 にメルカリのデータベース設計の記事を書きました - Mercari Engineering Blog

2015/08/20 63 users メルカリ データベース設計 Web+DB Press 運用

2015-08-20 WEB+DB PRESS Vol.88 にメルカリのデータベース設計の記事を書きました 2015年8月22日発売のWEB+DB PRESS Vol.88 にメルカリのデータベース設計、運用に関する特集記事をインフラチームの@cubicdaiya、@siroken3、@kazeburoの3人で書かせて頂きました。 WEB+DB PRESS Vol.88gihyo.jp 特集のタ... 続きを読む

インターンを支えるpixivの開発環境 - pixiv engineering blog

2015/04/06 64 users pixiv catatsuy インターン 週間 選考

2015-04-06 インターンを支えるpixivの開発環境 ツイート インフラチームの @catatsuy です． ピクシブ株式会社では現在春・夏の年に 2 回 2 週間のインターンを行っているのと，選考の過程として 1 週間のインターンを行っています．その際に実際に pixiv の開発に携わってもらいたいことがあります． しかし残念ながら pixiv を開発する環境を用意するのは以下の理由から... 続きを読む

『pixivエンジニアが教えるプログラミング入門』という本が出ます - pixiv engineering blog

2015/03/11 335 users pixivエンジニア catatsuy プログラミング入門

2015-03-11 『pixivエンジニアが教えるプログラミング入門』という本が出ます ツイート インフラチームの @catatsuy です． 去年非エンジニアの新卒にプログラミング研修というのをやりました． 非エンジニアの新卒にプログラミング研修を行いました - pixiv engineering blog 非エンジニアの新卒にプログラミング研修を行いました - pixiv engineeri... 続きを読む

nginx の拡張モジュールを書いて DoS 対策をした | Cybozu Inside Out | サイボウズエンジニアのブログ

2015/02/25 104 users DOS nginx ロードバランサ リバースプロキシ 野島

こんにちは。インフラチームの野島です。最近、cybozu.com はロードバランサを Apache を nginx に置...こんにちは。インフラチームの野島です。 最近、cybozu.com はロードバランサを Apache を nginx に置き換えました。 (参考: cybozu.com のリバースプロキシを nginx にリプレイス) 置き換えの一環として、Apache に実装していた D... 続きを読む

NginxとLuaを用いた動的なリバースプロキシでデプロイを 100 倍速くした

2015/02/20 256 users Lua リバースプロキシ nginx デプロイ Apac

Transcript 1. NginxとLuaを用いた動的 なリバースプロキシでデ プロイを 100 倍速くした サイボウズ株式会社 深谷敏邦 #devsumi [19-G-6] 1 2. 自己紹介 • 深谷 敏邦 • 2012年サイボウズ株式会社入社 • インフラチーム Hazama 所属 (2012/09~) • お仕事 • デプロイツールの作成 • MySQL HA 環境の構築 • Apac... 続きを読む

cybozu.com のリバースプロキシを nginx にリプレイス | Cybozu Inside Out | サイボウズエンジニアのブログ

2015/02/20 133 users リバースプロキシ Hazama nginx サブドメイン 深谷

こんにちは。インフラチーム Hazama の深谷です。デブサミ 2015 で、cybozu.com の自社製リバースプロ...こんにちは。インフラチーム Hazama の深谷です。 デブサミ 2015 で、cybozu.com の自社製リバースプロキシを全面的に再実装した話をしてきました。 今回は、そちらの資料を紹介いたします。 cybozu.com ではお客様ごとに異なるサブドメイン（ex. d... 続きを読む