TiKVにおけるトランザクションとMVCCの話

2024/04/20 7 users MVCC pingcap TiDB アーキテクチャ 全体

はじめに PingCAPの小板橋です。はじめまして！ TiDBの入門記事から上級者編まで幅広く取り扱う本アカウント第5回目は「TiKVにおけるトランザクションとMVCCの話」についてをまとめていきたいと思います。 TiKVの仕組み まずは、TiKVの仕組みについてを見ていきましょう。 全体のTiDBクラスターのアーキテクチャについて... 続きを読む

ブラウザからDBに行き着くまでただまとめる

2024/03/31 378 users プロトコル ブラウザ サーバ 負荷 データベース

はじめに あなたはECサイトのブラウザからデータベース(DB)に情報が行き着くまでにどんな技術が使われているか説明できますでしょうか？ どのようなプロトコルが用いられ、どの技術を駆使してサーバと通信しているのか、Webサーバでは何が行われ、どのようにして負荷が分散されているのか、トランザクションはどのように... 続きを読む

どのレイヤー（層）でトランザクションを実装すべきか

2024/02/28 171 users UseCase レイヤー 分離 アプリケーション ビジネス領域

このように、層ごとに関心事の分離を行うことで、保守性の高い（変更容易性や再利用性等）アプリケーションを実現できます。 しかし、「トランザクション」においてはどうでしょうか。 トランザクションはビジネス領域においても、技術領域においても関心事がある内容です。 そういう曖昧なものは「ひとまず usecase 層... 続きを読む

サーバーレスアーキテクチャの数理的理解と分析 #devsumi / Developers Summit 2023 Summer

2023/07/27 61 users devsumi サーバーレスアーキテクチャ 冪等性 考慮事項

Developers Summit 2023 Summer で使用したスライドです。 サーバーレスアーキテクチャは強力ですが、同時に冪等性やトランザクションなど特有の考慮事項が必要であり、高い設計力が求められます。ところで、安全なプログラムを書く上で、静的型付き言語は広く利用されていますね。型はいわば実行前に間違いを検出できる... 続きを読む

DB外の副作用をトランザクションから分離しよう / Isolate out-of-DB side effects from transactions

2023/04/20 169 users 副作用

DB外の副作用をトランザクションから分離しよう / Isolate out-of-DB side effects from transactions 続きを読む

マイクロサービスとトランザクション - Qiita

2022/12/12 195 users 所持品 サーバー機能 マイクロサービス化 GS2 残高管理

AWS for Games Advent Calendar 2022 9日目の記事です。 Game Server Services(GS2) ではゲームに必要となるサーバー機能をマイクロサービス化し、皆さんに提供しています。 マイクロサービスには所持品の管理や、ゲーム内ストア、課金通貨の残高管理など30を超える機能を用意しており、これらを組み合わせながらゲーム... 続きを読む

分析系とトランザクションのクエリの壁は消失する!? Google Cloudが予測する2025年までに実現するクラウドテクノロジの動向

2022/10/19 10 users クエリ BigQuery 動向 年次カンファレンス 予測

Google Cloudの年次カンファレンス「Next 22」のデベロッパキーノートで発表された”10の予測”の中から、岩尾エマはるかさんが紹介した4つのトレンドをレポートします。 10月12日から14日にかけてオンラインで開催されたGoogle Cloudの年次カンファレンス「Google Cloud Next ’22」では、BigQueryによる非構造化データの... 続きを読む

MySQLで発生し得る思わぬデッドロックと対応方法

2022/07/04 292 users デッドロック 温床 MySQL パク 手元

はじめに この記事は実際の業務で発生した MySQL のデッドロックとそのいくつかの回避方法や対応方法を（テーマは変えて）手元で実行できるコードを用いて解説する記事です。具体的には「トランザクション張っておけば大丈夫」と思ってませんか？ バグの温床になる、よくある実装パターンの記事で紹介されている「1on1 ... 続きを読む

Amazon RDS MySQL/PostgreSQLのトランザクション性能が2倍に、可用性とスケーラビリティも高める新「マルチAZ配置オプション」登場

2022/03/03 91 users スケーラビリティ PostgreSQL MySQL リート

Amazon RDS MySQL/PostgreSQLのトランザクション性能が2倍に、可用性とスケーラビリティも高める新「マルチAZ配置オプション」登場 Amazon Web Servicesは、Amazon RDSのトランザクションの処理速度を最大で2倍にし、3台のクラスタ構成で可用性を高め、リードのスケーラビリティも向上する、新たな「Multi-AZ Deployment... 続きを読む

佐賀パターン - AWS処方箋のガイダンス

2021/09/10 26 users ガイダンス 齟齬 矛盾 分散アプリケーション 翻訳

翻訳は機械翻訳により提供されています。提供された翻訳内容と英語版の間で齟齬、不一致または矛盾がある場合、英語版が優先します。 佐賀パターン サガパターンは、分散アプリケーションの一貫性を確立し、データの一貫性を維持するために複数のマイクロサービス間のトランザクションを調整するのに役立つ障害管理パタ... 続きを読む

P2Pの「分散型ビットコイン取引所」を作るとTwitterのジャック・ドーシーCEOが発表 - GIGAZINE

2021/08/30 5 users GIGAZINE Twitter ピアツーピア Square

TwitterのCEOであるジャック・ドーシー氏が2021年8月28日に、「仲介が不要なピアツーピア(P2P)のトランザクションで法定通貨とビットコインの取引を可能にする暗号資産取引所」を設立すると発表しました。ドーシー氏が計画するオープンソースのプラットフォームは、自身がCEOを務めるモバイル決済サービス会社・Squareで... 続きを読む

大手金融機関バンカメのアナリストがビットコインを批判　「富の貯蔵手段とてし非実用的」 | Cointelegraph | コインテレグラフ ジャパン

2021/03/18 7 users インフレ 貯蔵 ビットコイ Cointelegraph 一方

バンク・オブ・アメリカのアナリスト、フランシス・ブランシュ氏は、ビットコインを「非常に不安定」で「非現実的」であり、富の貯蔵やインフレのヘッジ手段としては役に立たず、壊滅的な資産であると批判した。 ブランシェ氏は、決済大手企業Visaが1時間あたり2億3600万件のトランザクションを処理する一方、ビットコイ... 続きを読む

「トランザクション張っておけば大丈夫」と思ってませんか？ バグの温床になる、よくある実装パターン

2020/12/19 405 users 温床 パク RDBMS 実装パターン PostgreSQL

この記事は DeNA 20 新卒 Advent Calendar 2020 19日目の記事です。 はじめに MySQLやPostgreSQLに代表されるRDBMSではトランザクションと呼ばれる仕組みが提供されています。多くのWebアプリケーションエンジニアはこのトランザクションを駆使してDBとやりとりをするロジックを組み立てることになります。 しかし不整合... 続きを読む

AWSの負荷テストソリューションを試してみた | Developers.IO

2020/10/29 5 users AWS Developers.IO JMeter シナリオ

シナリオを用いた負荷テストツールとしてJMeterやGatlingなどがございますが、AWSでも負荷テストのソリューションが用意されております。 こちらのソリューションは、Fargateで1秒あたり選択した数のトランザクションを生成する数千規模の接続ユーザーを簡単にシミュレートできます。 本エントリでは、AWSの負荷テストソ... 続きを読む

MySQL のレプリケーションから10年間逃げてきた我々が学んだこと8選 - Cybozu Inside Out | サイボウズエンジニアのブログ

2020/10/26 436 users レプリケーション SRE MySQL サイボウズエンジニア

こんにちは。クラウド運用チームで SRE をしている飯塚です。 今回は、MySQL のレプリケーション機能を約10年もの間ずっと使ってこなかった私たちが、レプリケーションを使った高可用性構成に移行するための取り組みの中で学んだことについて紹介します。 背景 巨大なテーブルへの primary key の付与 トランザクション... 続きを読む

MariaDBでAUTO_INCREMENTの値が戻る罠 | GMOアドパートナーズグループ TECH BLOG byGMO

2020/05/26 12 users byGMO MariaDB auto_increment

GMOアドマーケティングのT.Kです。 MariaDBでAUTO_INCREMENTの値が戻る現象に遭遇したので、紹介したいと思います。 発生条件はパーティションを使っているテーブルに対して、並列トランザクションでINSERTを行い、片方のトランザクションで払い出したAUTO_INCREMENTの値を使わなかった場合です。 検証環境 OS: CentOS 7... 続きを読む

Go でトランザクションをフルスクラッチで実装した - kawasin73のブログ

2019/12/07 23 users フルスクラッチ かわしん kawasin73 途中 興味

一歩ずつ一歩ずつ前へ進んでいく、確実に。どうも、かわしんです。 到底 1 記事に収まるような内容ではなく長いので、トランザクションの作り方に興味のない方は途中の「なぜ Go なのか」まで読んでいただければ嬉しいです。 この記事は、Go2 Advent Calendar 2019 の 7 日目と セキュリティキャンプ 修了生進捗 #seccam... 続きを読む

Shiro Kawai on Twitter: "これはかなりすごいソーシャルハック。 「怪しいカードの利用がありました。マイアミで使いましたか?」 (いいえ) 「わかりました。このトランザクションはブロックし

2019/10/09 642 users マイアミ https t.co 本人確認 利用

これはかなりすごいソーシャルハック。 「怪しいカードの利用がありました。マイアミで使いましたか?」 (いいえ) 「わかりました。このトランザクションはブロックします。本人確認のためメンバー番号を」 (メンバー番号自体は特に秘密でな… https://t.co/NHMlzcqkEj 続きを読む

詳解 google-cloud-go/spanner — トランザクション編 – google-cloud-jp – Medium

2019/05/24 14 users Spanner medium Session セッション 前回

はじめに前回 は google-cloud-go/spanner のセッション管理について見てみました。セッション管理だけでも Session Pool や Session のライフサイクルの管理など、やっていることは非常に多岐に渡っていましたね。 今回はそのセッションの上でどのように Cloud Spanner のトランザクションが動くのか、クライアントライ... 続きを読む

GoogleのモバイルBaaS用データベース「Cloud Firestore」が正式版に。東京リージョンでも提供開始、オフラインDBやトランザクションもサポートするNoSQL － Publickey

2019/02/01 33 users スケーラブル Publickey NoSQL 東京リージョン

GoogleのモバイルBaaS用データベース「Cloud Firestore」が正式版に。東京リージョンでも提供開始、オフラインDBやトランザクションもサポートするNoSQL Googleはモバイル向けのスケーラブルなバックエンドデータベースとして提供している「Cloud Firestore」の正式リリースを発表しました。 Cloud Firestore has gone G... 続きを読む

MySQLのストレージエンジンを自作してみる - 備忘録の裏のチラシ

2019/01/08 194 users ストレージエンジン RDB 備忘録 アーキテクチャ MySQL

MySQL のストレージエンジン（SE）を自作してみたときのメモ。バージョンは 8.0.13。 とりあえずアーキテクチャをざっくりと掴むことが目的なので、ストレージエンジンの自作といっても非常に単純な操作しかできないものです。 RDB らしさでもあるインデックスや行レベルロック、トランザクションなどの高度な処理は実装... 続きを読む

DynamoDBのトランザクションについてFAQ形式で答えてみる #reinvent ｜ DevelopersIO

2018/11/28 41 users DynamoDB reinvent 待望 FAQ形式 疑問

公式ブログにてDynamoDBのトランザクションがネイティブサポートされました！概要は岡さんの記事でご確認ください。 [速報]待望のDynamoDBのトランザクションがリリースされました！ #reinvent こちらでは、トランザクションということは、、、、どこまでできるんだろう？という疑問にお答えできるようにFAQ形式で回答し... 続きを読む

[速報]待望のDynamoDBのトランザクションがリリースされました！ #reinvent ｜ DevelopersIO

2018/11/27 48 users DynamoDB reinvent ACID ネイティブ 待望

先程、公式ブログにてDynamoDBのトランザクションがネイティブでサポートされた事が発表されました！！ DynamoDBトランザクションは、単一のAWSアカウントおよび領域内の1つ以上のテーブルにわたって、開発者に原子性、一貫性、分離性、耐久性（ACID）を 提供します。 1つの論理的なビジネス操作の一部として、複数のア... 続きを読む

Amazon Aurora ServerlessでHTTPSエンドポイントができ本当にサーバーレスアーキテクチャで利用可能になる！ ｜ DevelopersIO

2018/11/21 99 users リージョン DevelopersIO バージニア北部 筆者

※: 本表は現在確認できる情報から筆者が独自に作成しています。 注意 Aurora ServerlessのData APIは現在Beta版のため、変更される可能性があります。 Data APIではトランザクションはサポートされません。 レスポンスは最大1,000行で1MBのサイズ制限があります。 現在利用可能なリージョンは米国東部 (バージニア北部)... 続きを読む

「アクセスの約86％がbotだった」　航空会社の予約サイトが悩むbot (1/2) - ITmedia NEWS

2018/10/30 420 users bot 良性 タスク 迷惑bot事件簿 一方

「全アクセス数の約86％がbotだった」――日本航空のインバウンド向け国際線予約サイトのトランザクションを、2017年に分析したところ、そんな実態が明らかになった。 新連載：迷惑bot事件簿 さまざまなタスクを自動化でき、しかも人間より早く処理できるbot。企業にとって良性のbotが活躍する一方、チケットを買い占めるb... 続きを読む