小規模ウェブサービス向け、サーバ監視入門

2011/08/18 828 users データベースサーバ メールサーバ ウェブサーバ リソース 資金

どうも、すのまるです。 今日は久しぶりに インフラ周り の話をします。 AV女優.com を始めとする、 小規模ウェブサービス向けのサーバ監視 です。 個人でサービスを立ち上げた場合、潤沢な資金がないことから、十分なリソースを確保出来ません。 本来なら可用性を持つシステムを組みたいところを、1台のサーバにウェブサーバもデータベースサーバも、メールサーバも載せたシステムはざらにあります。 AV女優.... 続きを読む

MySQLをmaster:slave=1:1構成にして参照をslaveに向けるのがなぜ良くないか - 酒日記 はてな支店

2011/06/20 494 users slave レプリケーション master MySQL 参照

MySQLのmasterとslave 1:1にして参照をslave向けるのってやりたがる人多いみたいだけど、性能たいして上がらない割に可用性落ちるだけだからやめようキャンペーン 2011-06-19 00:16:30 via YoruFukurouMySQL はレプリケーションが簡単に構成できるのですが、時折 master 1台 に対して slave 1台、更新処理は master に、参照は s... 続きを読む

【これはすごい】Twitter検索を3倍高速化した記事の翻訳 - nokunoの日記

2011/04/19 281 users nokuno エンドユーザ トラフィック twitter検索

これはすごい！ というわけでTwitter検索を3倍高速化したという記事を翻訳してみました。Twitter Engineering: Twitter Search is Now 3x Faster2010年春。Twitterの検索チームは、我々の増え続けるトラフィックに対応し、エンドユーザにとっての遅延を減らし、我々のサービスの可用性を向上させ、新しい検索の機能を素早く開発できるようにするため、検... 続きを読む

Amazon SQS のメッセージを処理するアプリケーションを本番で運用するために考えるべき基本的な 5 つのこと - あらびき日記

2020/10/19 274 users アプリケーション あらびき日記 Amazon SQS 本番

Amazon SQS は可用性やスケーラビリティの高いメッセジキューサービスであり、AWS の代表的なサービスの 1 つと言えるでしょう。ところが、本番の運用に耐えられるアプリケーションにしようと思うと考えることが意外に多いものです。本エントリーでは簡単なサンプルアプリケーションをベースに、本番で運用するために考... 続きを読む

SaaS系スタートアップのリアルなAWSアーキテクチャ設計

2021/04/12 272 users GCP AWS モニタリング インフラ 基盤

概要 AI革命のインフラを目指すSaaS系スタートアップのFastLabel（最近資金調達しました！記事はこちら）で働いているが、今までGCPで動かしていたインフラを訳あってAWSに基盤を載せ替えることになった。 スタートアップは何よりスピードが求められるが、だからといってセキュリティやモニタリング、可用性を疎かにはで... 続きを読む

Amazon EC2/S3の使い方解説、決定版をAWSが公開 − ＠IT

2010/01/15 259 users AWS スケーラビリティ Amazon プラクティス EC2

2010/01/15 米アマゾン傘下のAmazon Web Servicesは1月14日、クラウドコンピューティング上でシステム構築を行う場合のベスト・プラクティスをまとめた「Architecting for the Cloud: Best Practices」を公表した。 これまでにも同社は、AWSのサービスを組み合わせてスケーラビリティや可用性を実現する事例を紹介したり、具体的なサービスの組み... 続きを読む

みんなの銀行：日本初の「デジタルバンク」として Google Cloud に勘定系を構築。Cloud Spanner で銀行基幹システムで求められる可用性を実現 | Google Cloud Blog

2021/09/10 240 users Cloud Spanner 勘定系 デジタルバンク 構築 銀行

GCP を試すStart building on Google Cloud with $300 in free credits and 20+ always free products. 無料トライアル 2021 年 5 月にサービス提供を開始した「みんなの銀行」&... 続きを読む

DSAS開発者の部屋:いかにして冗長構成を作るか 〜DSASの場合〜

2006/08/17 205 users DSAS Bac 冗長構成 active ISP

DSASはいかにして可用性を高めているか、ちょっと紹介したいと思います。 今回は概略ということでざざざっと説明します。個別の構成についてはまた回を改めて紹介したいと思います。 │ │ ┌┴┐ ┌┴┐ │ │ │ │ISPの上位ルータ └┬┘ └┬┘ │ │ 〜〜〜〜〜〜〜〜〜〜〜〜〜〜〜〜〜 責任分解点 │ │ ┌┴┐ ┌┴┐ │ ├─[ lb(active) ]─┤ │ │ ├─[ lb(bac... 続きを読む

Amazonクラウドが「Amazon EC2 Auto Recovery」開始。システム障害を検知するとインスタンスを自動的に別システムへ移動、復旧 － Publickey

2015/01/13 197 users Publickey コンフィグレーション 復旧 インスタンス

Amazon EC2 Auto Recoveryは、インスタンスが稼働しているサーバのシステム障害が検知されると、インスタンスが自動的に別のサーバへ移動、再起動し、システムをシステム障害から復旧させる機能。 移動したインスタンスは、IDやIPアドレス、コンフィグレーションなども含めて移動前のインスタンスと同じものになります。 これにより利用者は、クラウド上でいままで以上に可用性を高めることが容易に... 続きを読む

非分散データベースを分散データベース化する「Dynomite」、Netflixがオープンソースで公開 － Publickey

2014/11/06 193 users Publickey memcached redis 単体 限界

RedisやMemcachedといったインメモリデータベースは非常に高速にレスポンスを返してくれるデータストアですが、それ単体ではスケーラビリティや可用性などに限界があります。 The Netflix Tech Blog: Introducing Dynomite - Making Non-Distributed Databases, Distributed Netflixがオープンソースで公開し... 続きを読む

インメモリデータベース「MemSQL 2.0」公開。数百ノードへスケールアウト可能で大規模データベース対応へ － Publickey

2013/05/01 187 users Publickey インメモリデータベース インメモリ 従来

データベースをまるごとメインメモリ上で処理することにより、従来のハードディスクベースのリレーショナルデータベースよりも劇的な高速化を実現するインメモリデータベース。オープンソースのインメモリデータベースであるMemSQLの最新版「MemSQL 2.0」が公開されました。 MemSQL 2.0はインメモリのスピードとSQLでの問い合わせ、スケールアウト機能、そしてエンタープライズ対応の可用性など、4... 続きを読む

OracleJapan - ニュースリリース - Oracle News Release Summary: オラクル、可用性と拡張性の高いMySQL構成の管理を簡素化する「MySQL Fabric」を発表

2014/05/28 173 users Categories 抄訳 オラクル カリフォルニア州 簡素化

Oracle News Release Summary: オラクル、可用性と拡張性の高いMySQL構成の管理を簡素化する「MySQL Fabric」を発表 ダウンロード 2014 5 28 Categories: コーポレートニュース （本資料は米国2014年5月27日にオラクル・コーポレーションより発表された プレスリリースの抄訳です） 2014年5月27日 カリフォルニア州レッドウッドショアズ... 続きを読む

Gmail、2013年の可用性は稼働率99.978％、年間ダウンタイム2時間以内だったとGoogleが明らかに － Publickey

2014/03/24 156 users セキュリティ Publickey Gmail Google

Googleはセキュリティへの取り組みとして、先週のOfficial Gmail Blogにポストされた記事「Staying at the forefront of email security and reliability: HTTPS-only and 99.978% availability」で2つのことを明らかにしました。 Official Gmail Blog: Staying at ... 続きを読む

[初級編] なぜ「AWS で負荷分散は３AZ にまたがるのがベストプラクティス」と言われるのか 可用性の面から考えてみた | Developers.IO

2020/08/23 151 users アーキテクチャ ベストプラクティス AWS サーバ 負荷分散

水平分散のアーキテクチャを考えるときに、「負荷分散装置の下に並べる分散先 (サーバ) は３台以上がよい」「AWS であれば３ AZ にまたがるとよい」とはよく聞かれます。それがどういう意味をもつのか、主に可用性の面から考えてみました。 みなさん、AWS使ってますか！（挨拶 AWSに限らず、ある程度の規模の何かしらの... 続きを読む

ITエンジニアのCAPの定理 - from scratch

2013/09/28 119 users 定理 Consistency CAP ノート ITエンジニア

2013-09-29 ITエンジニアのCAPの定理 考え方 CAPの定理というのがある、「ノード間のデータ複製において、同時に一貫性、可用性、分断耐性の3つの特性を同時に保証することはできない。」というもの。説明をwikipediaにゆずると、 ・一貫性 (Consistency)： 全てのノードにおいて同時に同じデータが見えなければならない。 ・可用性 (Availability)： ノード障害... 続きを読む

SRE Magazine - 001号（2024/04/01）

2024/04/01 98 users netmarkjp フィ 発刊 巻頭言 入門

巻頭言：SRE Magazineを始めました 書いた人：しょっさん（ @syossan27 ） SRE Magazineの発刊についての想いなどを書いてます。 ばばさんがお勧めする「SRE入門」と「SRE入門の入門」に効く書籍や文章 書いた人：ばば/netmarkjp さん（ @netmarkjp ） SRE入門に効く書籍や文章を紹介しています。 非常時の可用性をフィ... 続きを読む

[第1回]Kubernetesの公式チュートリアルをやって基本を抑える ｜ Developers.IO

2018/05/07 98 users Kubernetes コンニチハ デプロイ クラスタ 分量

コンニチハ、千葉です。 Kubernetesを勉強中です。Kubernetesは簡単に使えて、かつコンテナのデプロイや可用性を向上することができます。高度なことを簡単に使えるようにテクノロジーが注ぎ込まれています。 チュートリアルでは、クラスタの起動からアプリケーションのデプロイ、確認、公開、アップデートまで基本的なライフサイクルを身につけられます。分量が多いので2回に分けて、チュートリアルをやっ... 続きを読む

Amazon RDS MySQL/PostgreSQLのトランザクション性能が2倍に、可用性とスケーラビリティも高める新「マルチAZ配置オプション」登場

2022/03/03 91 users スケーラビリティ PostgreSQL MySQL リート

Amazon RDS MySQL/PostgreSQLのトランザクション性能が2倍に、可用性とスケーラビリティも高める新「マルチAZ配置オプション」登場 Amazon Web Servicesは、Amazon RDSのトランザクションの処理速度を最大で2倍にし、3台のクラスタ構成で可用性を高め、リードのスケーラビリティも向上する、新たな「Multi-AZ Deployment... 続きを読む

SingleAZ配置のEC2インスタンスで障害発生時の影響を最小化する ｜ DevelopersIO

2019/08/27 90 users 西澤 DevelopersIO 東京リージョン 一方 最小限

西澤です。8/23(金)に東京リージョンにおいて大規模な障害が発生し、多くのシステムが影響を受けました。この障害に際して、可用性を担保する設計の重要性を考えさせられた一方で、切り捨てるものを決め、迅速に復旧し、障害の影響を最小限に抑えることも大切なことだと痛感しました。シングル構成のシステムを運用され... 続きを読む

楽天市場のシステム開発にRuby on Railsを採用 - 楽天 (MYCOMジャーナル)

2007/03/15 81 users MYCOMジャーナル Rails 楽天 組織 楽天市場

楽天は15日、同社の提供するインターネットサービスの開発手段として"Ruby on Rails (以降、Rails)"の採用を開始したことを発表した。同社はネットワーク応用通信研究所からRailsトレーニングプログラムを受講した開発グループ"Ruby プロジェクトチーム"を組織、今後のサービス開発においてRailsを活用していく旨を発表した。 同社はこれまでにも、高い拡張性や可用性を実現し費用対効... 続きを読む

Open database life: 新著「Webエンジニアのための データベース技術[実践]入門」

2012/03/06 77 users 新著 リレーション インデックス SQL文 データベース

2012年3月6日火曜日 新著「Webエンジニアのための データベース技術[実践]入門」 データベース技術に関する新著を執筆しました。「Webエンジニアのための データベース技術[実践]入門」という本です。 第1章：データベースがないと何が困るのか 第2章：インデックスで高速アクセスを実現する 第3章：テーブル設計とリレーション 第4章：SQL文の特徴とその使いこなし方 第5章：可用性とデータの複... 続きを読む

[AWS] 可用性の高い堅牢なデプロイプロセスについて考える ｜ Developers.IO

2017/07/08 75 users AWS Developers.IO アプリケーシ 実行環境

こんにちは。こむろ＠今は東京です。 アプリケーション開発において、実行環境へのデプロイプロセスはとても重要です。AWSでもCodeDeployやElasticbeanstalk、OpsWorksと言った各種デプロイプロセスをサポートするサービスがあります。しかし、実際にどれが自分たちのスタイルに一番相性が良いのでしょう？最終的に全て結果は同じです。アプリケーションが環境へデプロイされ、アプリケーシ... 続きを読む

Windows Azure対応「クラウドデザインパターン」正式版が公開。可用性、データ管理、メッセージング、セキュリティなど8カテゴリで24パターン － Publickey

2014/01/30 75 users availability 図版 メッセージング パターン 概要

作成したのはマイクロソフトのPatterns＆Practiceグループで、今回公開されたのは全部で8カテゴリ24種類のパターン。残念ながら英語で記述されており、日本語化は検討中途のことですが、図版が豊富に使われているため見るだけでも概要が分かるでしょう。 8カテゴリ24パターン 今回公開されたのは以下の8カテゴリ。リンク先には、対応するデザインパターンが説明されています。 Availability... 続きを読む

Hadoopの可用性について（私訳） - developer’s delight

2011/02/13 67 users Hadoop Cloudera ついで 勢い Blog

この記事はClouderaのBlogの記事”Hadoop Availability | Apache Hadoop for the Enterprise | Cloudera”の私的翻訳です。Hadoopの可用性については興味のある方も多いと思いますので、読むついでに訳してみました。勢いで訳したので質に関しては責任を持てませんのでよろしくお願いします。間違いなどがありましたらご指摘いただければ助か... 続きを読む

Azure 仮想マシンにおける可用性の考え方 – ainaba's blog

2017/05/31 57 users Azure 随所 仮想マシン 若干今更 タイトル

はじめに 若干今更な感じもするタイトルではありますが、やはり Azure に初めて取り組む方にはわかりにくく、かつ重要視される部分でもありますので、改めてまとめてみたいと思います。「考え方」というタイトルの通り、本記事では技術的にはあまり深入りしないように、なるべく簡潔に記載していきたいと思います。さらに深く追求したい方向けは随所にリンクを貼っておきますので、そちらをご参照いただければと思います。... 続きを読む