Deep Dive 大規模システムアーキテクチャ／開発組織エンジニアリング / Deep Dive Large-Scale System Architecture, Development Organization Engineering

2024/03/17 114 users アブストラクト 深堀りし アーキテクチャ Deep Dive

学生向けのイベント技育祭2024にて、大規模システムにおけるアーキテクチャの触りをお話したものです。 ビギナー向けなのでそれほど深いお話はしておりません。 【アブストラクト】 本トークでは大規模システムアーキテクチャで考慮すべき事柄とそれを実現する技術スタックや運用システムを深堀りし、それらを実現するた... 続きを読む

大規模システムのリプレイスを2度経験したPMが語るシステム移行プロジェクトで重要なこと - JMDC TECH BLOG

2022/06/09 33 users リプレイス JMDC 参画 JMDC TECH BLOG 事例

JMDCの開発本部データ基盤開発部の新倉です。JMDCには大型案件に自由度高く取り組める環境があります。今回は私が実際に経験したDWHシステムの2度のリプレイスの事例をお伝えします。1度目はPL（プロジェクトリーダー）、2度目はPM（プロジェクトマネージャー）としてプロジェクトに参画。その経験からシステム移行プロ... 続きを読む

再考 - ドメインサービス　 - まっちゅーのチラ裏

2020/10/22 21 users ドメインサービス ビジネスロジック アーキテクチャ 再考 責務

自分が大規模システムで組むアーキテクチャは基本的にはCleanArchitectureを踏襲しているが、その中の構成要素であるドメインサービスだけは少し独自(?)の解釈をしていて、書籍などでよく見る ビジネスロジックを持つが、状態をもたない 複数の集約にまたがる処理を書く場所 という責務の他に、外部システムへの委譲処理... 続きを読む

Java を使った Web アプリにおける脆弱性対策 | yamory Blog

2020/05/22 13 users Java 堅牢 ライブラリ アプリケーション プラットフォーム

Java は業務システムをはじめ、Web アプリケーション、Android アプリの開発等で世界中で幅広く使われている言語です。 プラットフォームに依存しない環境と堅牢さ、ライブラリの多さ、需要の多さから、大規模システム、エンタープライズ向けアプリケーションの開発でも多く採用されています。 実際に業務において Java ... 続きを読む

大規模システムにおける5つのログ転送パターン - New Relic公式ブログ

2020/05/18 26 users New Relic公式ブログ 5つ

大規模なスループットが発生するサービスでは、ログ送信それ自体の負荷や安定性について考慮する必要が高まります。それについて論じたブログ記事 Pros and Cons of Five Enterprise-Ready Log Forwarding Patterns の抄訳です。 初めて分散ロギングを扱うとき、開発者は本能的に、アプリケーションのログをアプリケーシ... 続きを読む

大規模システムでの Linux のメモリ管理

2020/02/16 385 users Linux メモリ管理

(This post is also available in English.) この記事は Linux memory management at scale を 著者の Chris Down さんの許可 を得て Hiroaki Nakamura が日本語に翻訳したものです。 原文のライセンス は CC-BY 4.0 であり、翻訳のライセンスも同じく CC-BY 4.0 とします。 cgroup2 プロジェクトでの私の仕事の一部とし... 続きを読む

[システム運用] Spring Boot + Spring Cloud + ElastiCache + DynamoDBで構成されたシステムのメンテナンス -問題編- ｜ Developers.IO

2018/05/26 32 users DynamoDB ElastiCache 狭間 役目 部署

[システム運用] Spring Boot + Spring Cloud + ElastiCache + DynamoDBで構成されたシステムのメンテナンス -問題編- はじめに こんにちは。こむろ＠札幌です。 4月から部署異動し、ここ数年の大規模システムのアプリケーションからインフラまでの運用と開発経験を活かし、 Prismatix の開発と運用の狭間をブリッジする役目として開発に参加しています。... 続きを読む

ノンプログラミングで大規模システムを開発可能、ラクラスがフレームワーク「SQN」を発表：SQNで開発した「ラクラス人事クラウドサービス」の販売も開始 - ＠IT

2018/05/14 43 users ノンプログラミング 所望 ブログ フレームワーク 各タスク

SQNで開発した「ラクラス人事クラウドサービス」の販売も開始： ノンプログラミングで大規模システムを開発可能、ラクラスがフレームワーク「SQN」を発表 ラクラスは、プログラミングを必要とせずに大規模情報システムを開発できるフレームワーク「SQN」を開発した。クラス図やフローチャート、各タスクに対するデータ操作をそれぞれ定義することで、所望の処理を実行させる。 ラクラスは2018年5月10日、プログ... 続きを読む

Kubernetes活用に至るまで――リクルートテクノロジーズがコンテナを大規模システムの本番環境へ適用した事例：先行事例に学ぶKubernetes企業活用の現実（2） - ＠IT

2018/04/09 38 users リクルートテクノロジーズ コンテナ Kubernetes

先行事例に学ぶKubernetes企業活用の現実（2）： Kubernetes活用に至るまで――リクルートテクノロジーズがコンテナを大規模システムの本番環境へ適用した事例 本連載では、サービスの開発、提供のアジリティ向上の一助となることを目的として、企業における「Kubernetes」の活用について解説する。今回は、リクルートテクノロジーズにおいて筆者が取り組んだ事例を基に、コンテナ仮想化技術を本... 続きを読む

みずほ銀行、勘定系システム移行の成否を占う | 日経 xTECH（クロステック）

2018/02/26 261 users 山場 xTech 成否 全面刷新 懸案解決

この記事は日経 xTECH有料会員または、日経コンピュータ購読者限定ですが、2018年2月28日5時まではどなたでもご覧いただけます。 勘定系システムの完全統合と全面刷新――。16年前の発足時からの懸案解決に向け、みずほ銀行が動き出す。6月からいよいよ、構築を終えた新勘定系への切り替え作業に取り掛かる。総額4000億円を超える世界最大のプロジェクトは最後の山場を乗り越え、「3度目」の大規模システム... 続きを読む

ニュース - TIS、COBOLの大規模システムをJavaに自動変換する移行支援サービス：ITpro

2017/04/11 28 users TIS ITpro COBOL メインフレーム Java

TISは2017年4月11日、メインフレームで稼働するメガステップクラスの大規模アプリケーションを、オープン環境に移行するのを支援する「Xenlon～神龍 マイグレーションサービス 」を4月から順次提供開始すると発表した。習得率が減少し保守要員の確保が難しいCOBOLの大規模アプリケーションを、技術者の確保が容易なJavaに移行することで、運用コストを低減して運用継続性を担保する。 高い再現性で業... 続きを読む

PHPからScalaに乗り換えたチャットワークさん、その後どうですか？（前編） | HRナビ by リクルート

2016/08/19 631 users Scala チャットツール ChatWork ＣＴＯ PHP

IT芸人の異名を持つ、トレタの増井雄一郎さんが「今、気になる人」に直撃する連載。今回は、ビジネス向けチャットツール「 チャットワーク 」を手がけるChatWorkでCTOを務める山本正喜さんの登場です。 チャットワークは世界205の国と地域、10万7000社以上で使われるチャットツール。2014年4月には、PHPと独自フレームワークで構築した大規模システムをScalaで刷新すると宣言し、エンジニア... 続きを読む

PlayFrameWorkをただの静的型付けMVCだと思って本番稼動させると死ぬ - サナギわさわさ.json

2016/03/09 297 users Playframework サナギ ミッションクリティカル

2016 - 03 - 09 PlayFrameWorkをただの静的型付けMVCだと思って本番稼動させると死ぬ プログラミング PlayFrameWork PlayFrameWorkが流行り始めてから割と経ちますので、そろそろ正式採用しようと考える方も多いのではないかと思います。 強力な静的型付けで守られたPlayは、ミッションクリティカルなシステムや数万行を超える大規模システムの構築に特に向いて... 続きを読む

大規模システムの保守における技術的負債とチームのモラル

2016/02/03 238 users 負債 モラル 保守 InfoQ 龍太郎

大規模システムの保守における技術的負債とチームのモラル 作者： Ben Linders , 翻訳者 吉羽 龍太郎 投稿日 2016年2月2日 | 共有 |  後で読む マイリーディングリスト Agile Testing Days 2015 において、Thomas Bradford氏はテストがなく大きな技術的負債のあるモノリシックなJavaベースのシステムの保守に関する経験について語った。InfoQ... 続きを読む

SIerのエンジニア必見！「SIerからWeb系」転職成功者が語る7つの秘訣

2015/10/30 155 users SIer 一端 資質 大人数 エンジニア

エンジニアの転職市場を賑わす「SIerからWeb系」のリアルに迫るSIerのエンジニア必見！「SIerからWeb系」転職成功者が語る7つの秘訣 SIerからWeb系への転職を考えるエンジニアは多いもの。クライアント企業に常駐して、大人数で大規模システムの一端を担うSIerと、小さな組織でサービスを作り続けるWeb系では、その働き方や求められる資質は、同じエンジニアとはいえ、正反対と言えるほど異なる... 続きを読む

Scala採用を決めて一年たった、CTOの雑感 | チャットワーククリエーターズブログ

2015/04/26 439 users ＣＴＯ ChatWork Scal Scala 満場一致

こんにちは！ChatWork CTOの山本です。 ChatWorkでは一年前に、PHPの独自フレームワークでつくられた大規模システムを、Scalaを使ってゼロベースでつくりなおすという決断をしました。 Scala採用までの経緯を三行で： カウボーイ開発で約4年間積み上げてきたPHPのシステムがもはや限界 ゼロベースでつくりなおそうと開発合宿を開催。満場一致でScalaに決定！ しかし社内にScal... 続きを読む

はてなサマーインターン2014

2014/06/17 91 users はてなサマーインターン メンター はてなの エンジニア 本物

はてなサマーインターンで 本物のWebサービス開発を 体験しよう 今年も、はてなサマーインターンの夏がやって来ます！ はてなのエンジニアがメンターとなり、Webエンジニアとしての技術を身につけ、はてなの「本物」のサービスやシステムに触れられる「はてなサマーインターン2014」の参加者を募集します。 実際にユーザーに提供される機能を開発する「サービス開発コース」と、大規模システムの基盤技術の開発/研... 続きを読む

Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて - ゆううきブログ

2014/05/26 366 users ブロックデバイス Graphite LiSA rsync 論文

2014-05-26 Linuxのブロックデバイスレベルで実現するrsyncより高速な差分バックアップについて Kernel Linux 論文 社内で論文輪読会みたいなことやってて、そこで紹介した論文の内容についてです。 最近、Graphite に保存しているデータのバックアップ（データ同期）に rsync 使ってて、かなり遅いので困ってた。 LISA っていう 大規模システム、sysadmin ... 続きを読む

FacebookやGoogle、「WebScaleSQL」をオープンソースで公開 - ITmedia ニュース

2014/03/28 147 users Twitter Facebook GitHub MySQL

オープンソースデータベース「MySQL」を大規模システムで利用しているFacebook、Google、Twitter、LinkedInが直面する共通の問題を解決する目的で開発中のブランチ「WebScaleSQL」をGitHubで公開した。 米Facebookは3月27日（現地時間）、米Google、米Twitter、米LinkedInと協力し、オープンソースのデータベース「MySQL」のブランチ「... 続きを読む

Kodai's Blog: Zabbixで10,000台のサーバーを監視する

2013/11/03 133 users Zabbix ダッシュ サーバー パフォーマンス 監視対象

2013年11月3日日曜日 Zabbixで10,000台のサーバーを監視する Zabbixは重い！というツイートや情報があったりするのですが、海外ユーザーのサポート経験からZabbixのパフォーマンスは驚くほど良くなっていると思っていて、どこに違いがあるのか不思議に思っていたりします。 Zabbix社で大規模システムというと、監視対象が数千台規模以上、1秒あたりの監視項目数(Zabbixのダッシュ... 続きを読む

教育電子化へＩＴ結集　日本マイクロソフトなど30社　　：日本経済新聞

2013/05/09 16 users 富士通 NEC NTTドコモ 日本マイクロソフト 各社

日本マイクロソフト（ＭＳ）とＮＴＴドコモ、ＮＥＣ、富士通など約30社は教育現場のＩＴ（情報技術）化に向けた協議会を設立する。学校や地方自治体からの相談窓口を一本化するとともに、各社が強みの技術を持ち寄り大規模システムを構築し提案する。政府は2020年をめどに全生徒に情報端末を配備する計画を打ち出している。協議会の設立で生徒がタブレット（多機能携帯端末）などを使って学習できる環境の整備に弾みがつき… 続きを読む

複雑さとの戦い、CAがDevOps関連の新ソリューション：大規模システムの開発サイクルが遅いワケ - ＠IT

2013/04/26 25 users DevOps関連 遅いわけ 戦い 開発サイクル 複雑さ

少ない予算で、より速くアプリ開発と提供のサイクルを回す――。モバイル端末やソーシャル・ネットワークの普及でB2C、B2Bのインタラクションが増す中、特に決済系などEコマースで利用されているメインフレームを含む基幹システムのアプリ開発のスピードアップが急務となっている。現在、6～12カ月かかっている開発サイクルを数週間、あるいは数日へと加速することは可能だろうか？ 2013年4月21日から3日間、C... 続きを読む

1000 台超の大規模システムにおける Solaris NFS 実装の問題

2012/06/30 204 users 実装 問題

藤原 克則 ( FUJIWARA Katsunori ) 前職で、 HPC ( High Performance Computing ) 系システムのために Solaris 向けファイルシステムを実装したのを機に、 OpenSolaris 勉強会に参加。 「入門Mercurial Linux/Windows対応」、 「俺のコードのどこが悪い?―コードレビューを攻略する40のルール」、 「アセンブラ... 続きを読む

これがWikipediaの裏側、知られざる大規模システムの実態「Wikipedia / MediaWiki におけるシステム運用」 - GIGAZINE

2010/11/05 1127 users GIGAZINE Facebook MediaWiki 実態

Wikipediaといえば世界で第5位の訪問者数を誇る巨大サイトですが、システム運営に携わる人間は世界でわずか6人、しかもこれはボランティア込みという恐るべき少人数で、第4位のFacebookのサーバ数が3万台を超えているのに対して、Wikipediaはわずか350台で運用している……などというような感じで、知られざる今のWikipediaの実態が「KOF2010」にて本日行われた講演「Wikip... 続きを読む

グーグルが構築した大規模システムの現実、そしてデザインパターン（1）～MapReduce編 － Publickey

2010/08/24 361 users Publickey ACM コンピュテーション グーグル 講演

グーグルが「Evolution and Future Directions of Large-Scale Storage and Computation Systems at Google」（グーグルにおける、大規模ストレージとコンピュテーションの将来の方向性）という講演を、6月に行われたACM（米国計算機学会）主催のクラウドコンピューティングのシンポジウム「ACM Symposium on Cl... 続きを読む