［速報］「The Amazon Builders' Library」発表。大規模分散システムの構築、運用などについて、Amazonが学んできたことをコンテンツとして公開。AWS re:Invent 2019 － Publickey

2019/12/05 34 users Publickey インフラ library AWS re

［速報］「The Amazon Builders' Library」発表。大規模分散システムの構築、運用などについて、Amazonが学んできたことをコンテンツとして公開。AWS re:Invent 2019 Amazon.comが開発してきた世界最大級の電子商取引システムや、それを支えるインフラであるところのAmazon Web Servicesは、世界でも最も複雑で巨大な分... 続きを読む

Googleの大規模分散システムに適した高効率のRPC実装gRPCがCloud Native Computing Foundationに寄贈された | TechCrunch Japan

2017/03/02 24 users RPC grpc リモートプロシージャコール CNCF ほか

Googleが今日（米国時間3/1）、同社の高性能なリモートプロシージャコール( remote procedure call , RPC)フレームワーク gRPC を、 Cloud Native Computing Foundation , CNCF)に寄贈する、と発表した。CNCFはすでに、Google生まれのコンテナオーケストレーションツールKubernetesやそのほかのコンテナおよびマイク... 続きを読む

VMwareがコンテナ専用の管理ツール「VMware Photon Controller」をオープンソースで公開。大規模分散システム向けにマルチテナント対応、MesosやKubernetesなど混在管理 － Publickey

2015/11/16 97 users Publickey Mesos Kubernetes 公開

VMwareは、同社が「クラウドネイティブなアプリケーションのためのプラットフォーム」の一部として開発していたコンテナ専用の管理ツール「VMware Photon Controller」をオープンソースで公開しました。 「VMware Photon Controller」は、Dockerをはじめとするコンテナ型仮想化を利用した大規模分散システムを管理するために、vSphere製品群とは別のソフトウ... 続きを読む

大規模分散システムの現在 -- Twitter

2015/06/23 582 users system Twitter 丸山不二夫

Transcript 1. 大規模分散システムの現在 @maruyama097 丸山不二夫 2. Most of our systems are big “Future transformers” - Marius Eriksen 3. predictable performance is difficult to achieve. In a predictable system, worst-c... 続きを読む

Goと大規模分散システムの相性 - ワザノバ | wazanova

2014/11/24 133 users スループット wazanova ワザノバ 分散システム 相性

Googleで分散システムの開発をてがけ、現在はソーシャルメディア mttr.toを立上げ中のBen Sigelmanが、Goを分散システムの開発に利用する場合の、メリットおよびチャレンジについて講演しています。 分散システムのあるべき姿 分散システムの勘所は、最上位ビットをパフォーマンス的にも構造的にもうまく扱うことができるかというのがポイント。その効果が一番大きい。スループットの改善のような詳... 続きを読む

O'Reilly Japan - ZooKeeperによる分散システム管理

2014/09/22 46 users ZooKeeper Hive Hadoop YARN 協調

ZooKeeperは、Apacheソフトウェア財団のオープンソースプロジェクトの1つで、大規模分散システムの協調動作を実現するツール。分散システムが協調動作するために必要なコア機能を提供することで、開発者の負荷を大幅に低減します。HiveやHadoopの新しいスケジューラであるYARNなど、多くのプロジェクト、企業、組織で利用されつつあります。分散システムの協調動作に頭を悩ませていた多くの開発者に... 続きを読む

大規模分散システムのレスポンスを向上させる工夫 - ワザノバ | wazanova

2014/07/31 82 users wazanova ワザノバ レスポンス 工夫

https://www.youtube.com/watch?v=1-3Ahy7Fxsc 1 comment | 1 point | by WazanovaNews ■ comment by Jshiike | 約2時間前 GoogleのJeff Dean（Senior Fellow, システム & インフラグループ）による、Velocity Conference 2014のキーノートスピーチです。... 続きを読む

Docker専用のLinux軽量OS「CoreOS」が、商用サポート「CoreOS Managed Linux」と管理ツール「CoreUpdate」の提供を開始 － Publickey

2014/07/01 149 users Publickey CoreOS フード Docker専用

CoreOSは、アプリケーションの実行環境をDocker Engineに最適化し、軽量なOSを目指すLinuxディストリビューションの1つです。 ブート可能なOSの領域を内部に2つ持つことでOSのロールバックを実現しつつ安全にOSにパッチを当てることができ、また分散環境で利用することを前提にしたシステムツールを採用することで、大規模分散システムの構築を得意とするOSです。 CoreOSは、オープン... 続きを読む

大規模分散システム ”Amazon Web Services” の使い方

2013/11/11 408 users Amazon Web Services AWS 使い方 概要

大規模分散システム ”Amazon Web Services”の使い方 橋本 幸司 Software Development Engineer Amazon Web Services Agenda !   Amazon Web Services (AWS)の概要 !   大規模分散システム“AWS”の使い方 •  Asynchronous IO •  Retries with Exponenti... 続きを読む

クラウドにおけるKVSの機能概要と３つの実現方式をおさらい

2012/05/01 19 users KVS おさらい 分散 クラウド サーバー

そのため、クラウドシステムではKVS（キー・バリュー・ストア）と呼ばれるデータストアを用いることになります。今日は、KVSの機能要件と、３つの実現方法について、おさらいしたいと思います。 1.クラウドシステムにおけるKVSの機能概要 クラウドの大規模分散システムで使用されるKVSには、3つの機能要件が求められます。 多くのサーバーに分散配置されても、登録・参照・更新などで整合性のあるアクセスができ... 続きを読む