#CloudNativeDB NewSQLへの誘い - Speaker Deck

2021/07/16 18 users NewSQL つまみぐい tzkb アジェンダ 誘い

Transcript NewSQLへの誘い Cloud Native Database Meetup #1 , 2021/7/16 こば( @tzkb） 6 最近やっていること • 色んなDBをつまみぐい、@ITで連載中 7 1. そもそもNewSQLとは？ 2. ストレージエンジンの観点から 3. 分散トランザクションの観点から 4. 更に詳しく知りたい方へ アジェンダ 8 そもそもNewSQLとは？ 1 9 ... 続きを読む

Cloud Native時代のデータベース - Speaker Deck

2021/06/11 29 users Speaker Deck データベース つまみぐい tzkb

Transcript Cloud Native時代の データベース ～ ストレージエンジンと分散トランザクション ～ Infra Study 2nd Season , 6/11 こば( @tzkb） 2 最近やっていること • 色んなDBをつまみぐい、@ITで連載中 3 1. そもそもRDBMSって何？ 2. ストレージエンジンの課題 3. 分散トランザクションの課題 4. Cloud Nativeなデー... 続きを読む

MVCCとInnoDBでの実装について - shallowな暮らし

2021/05/17 136 users InnoDB MySQL MVCC shallow 前半

こんにちは。id:shallow1729です。先日はredo logを中心にストレージエンジンについて解説を行いましたが、今回は同時実行制御、特にMySQLなど多くのデータベースで採用されているMultiversion Concurrency Control(MVCC)という技術にフォーカスしようと思います。 今回の記事ではまず前半でMVCCというものがどういうも... 続きを読む

MySQLでredis storage engineを作った - tom__bo’s Blog

2020/05/31 19 users MySQL tom__bo’s blog InnoDB 自作

MySQLのストレージエンジンはplugableになっていて、APIを実装すれば自作のストレージエンジンを組み込むことができる。 ということで、試しにRedisをストレージエンジンとして使うRedis Storage Engineを作りました。 github.com 途中で飽きてしまった ちまちま実装するよりC++の勉強とInnoDB読んだほうが良さそうと思... 続きを読む

MySQL 8.0.18 の実装を読み解きながら簡単なストレージエンジンを自作する - それが僕には楽しかったんです。

2020/01/16 13 users insert MySQL 余談 実装 info

はじめに MySQL をビルドする ストレージエンジンを自作する Example エンジンをベースにする handlerton の作成とインスタンス化 テーブルを作成する 余談・気になったところ テーブルを開く INSERT の実装 ha_tina の存在 テーブルスキャン store_lock の実装 external_lock の実装 rnd_init の実装 info の実装 extra... 続きを読む

MySQLのストレージエンジンを自作してみる - 備忘録の裏のチラシ

2019/01/08 194 users RDB 備忘録 アーキテクチャ トランザクション MySQL

MySQL のストレージエンジン（SE）を自作してみたときのメモ。バージョンは 8.0.13。 とりあえずアーキテクチャをざっくりと掴むことが目的なので、ストレージエンジンの自作といっても非常に単純な操作しかできないものです。 RDB らしさでもあるインデックスや行レベルロック、トランザクションなどの高度な処理は実装... 続きを読む

Cassandraのストレージエンジンを入れ替えて高速化した「Rocksandra」、Instagramがオープンソースで公開。Javaのガベージコレクションによる遅延を大幅に解消 － Publickey

2018/03/12 169 users Cassandra ガベージコレクション Java 遅延 スト

Cassandraのストレージエンジンを入れ替えて高速化した「Rocksandra」、Instagramがオープンソースで公開。Javaのガベージコレクションによる遅延を大幅に解消 Instagramは、NoSQLデータベースのCassandraで発生していたJavaのガベージコレクションに起因する遅延を解消し、高速化した 改良版Cassandraをオープンソースで公開したと発表しました 。 スト... 続きを読む

Apache Hadoopエコシステムにおける、異なるファイル形式とストレージエンジンのパフォーマンス比較

2017/02/17 32 users CERN original 原文 著者 Blog

Apache Hadoopエコシステムにおける、異なるファイル形式とストレージエンジンのパフォーマンス比較 著者/Author: Zbigniew Branowski (Cern) 原文/Original： http://blog.cloudera.com/blog/2017/02/performance-comparing-of-different-file-formats-and-storag... 続きを読む

MariaDB、カラム型データベースエンジン「MariaDB ColumnStore」発表。OLAPへ参入 － Publickey

2016/04/07 146 users OLAP Publickey MariaDB 参入 カラム型

MariaDB、カラム型データベースエンジン「MariaDB ColumnStore」発表。OLAPへ参入 MariaDB ColumnStoreは、その名が示す通りMariaDBのストレージエンジンとして組み込めるカラム型のデータベースエンジンです。 一般のデータベースエンジンはデータを行単位で扱うのに対して、カラム型データベースエンジンは列単位で処理するのが最大の特徴です。 データを列単位で処... 続きを読む

Amazon Auroraを東京リージョン提供翌日から使い始めて - ゆーすけべー日記

2015/12/02 78 users ゆーすけべー日記 Amazon Aurora Aurora

2015-12-02 Amazon Auroraを東京リージョン提供翌日から使い始めて AWS 概要 とあるサービスでは、Amazon Web Servicesをベースにインフラを組んでいる。データベースにおいてはRDSのMySQLのストレージエンジンを利用していたが、Amazon Auroraへと移行をした。それはAuroraがTokyoリージョンでの提供を開始した翌日のことで、中々勇気がいるこ... 続きを読む

NoSQLの「Cassandra 3.0」がリリース。リファクタリングされたストレージエンジン、マテリアライズドビューなど － Publickey

2015/11/11 66 users マテリアライズドビュー Cassandra NoSQL 注目

NoSQLの「Cassandra 3.0」がリリース。リファクタリングされたストレージエンジン、マテリアライズドビューなど NoSQLデータベースの代表的なソフトウェアの1つ、Cassandraへの注目が高まっています。米アップルは昨年、iCloudなどに保存されている10ペタバイトものデータを7万5000ノードで構成されるCassandraで運用していることを明らかにし、Netflixでも250... 続きを読む

外部キー制約に伴う小話

2015/02/13 83 users 外部キー制約 小話 InnoDB 割愛 night

Transcript 1. 外部キー制約に伴う ロックの小話 2015/2/13 「外部キー Night」 @ichirin2501（いちりんちゃん） 1 2. はじめに 2 検証環境 ・MySQL 5.5.28 ・ストレージエンジン InnoDB ・トランザクション分離レベル REPEATABLE-READ, READ-COMMITTED ! 時間の都合上インデックスの話は割愛 3. スライドの... 続きを読む

MongoDB、高性能なストレージエンジン「WiredTiger」買収。Berkeley DBのアーキテクトが開発 － Publickey

2014/12/16 49 users キーバリュー スケーラビリティ Publickey メモリ

NoSQLデータベースの1つでドキュメント指向データベースとして知られるMongoDBが、高性能のデータベースエンジンを提供するWiredTigerの買収を発表しました。 WiredTigerはマルチコアとメモリを活用することで高い並列性によるスケーラビリティと高性能を追求したデータベースエンジン。安定して低いレイテンシーと高いスループットを実現すると説明されています。 開発チームは、キーバリュー... 続きを読む

JavaScript - Loki.js: Mongo風APIを持ったクライアントJS/node両対応のストレージエンジン - Qiita

2014/11/07 29 users Qiita JavaScript

某アプリでストレージどうしようかなーという感じだったので適当に探してて、昨日echo.jsで偶然紹介されてたライブラリ、試してみたらチョット便利だったので紹介。 Lightweight javascript in-memory database: LokiJS 注意: 自分はnode環境下で試したので、以下のサンプルはnode用です。ブラウザでも動くはずです。 特長 Mongo風API。 var ... 続きを読む

社内勉強会(1) – MySQLのトランザクション | アロハ技術者ブログ

2014/07/24 35 users トランザクション MySQL SQL 日頃 社内勉強会

今月から社内勉強会は、社員が持ち回りで講師を担当することになりました。 初回のテーマは「MySQLのトランザクション」です。 MySQLにほぼ限定した形でトランザクションについて発表をしました。 資料は以下の5章立てになっています。 1.トランザクションとは 2.ストレージエンジン 3.トランザクションの開始と終了 4.ACID特性 5.オートコミット 日頃の業務では、実行したSQLの動作確認をし... 続きを読む

日々の覚書: MroongaのラッパーモードでInnoDBを使う落とし穴

2014/04/15 17 users InnoDB ストレージモード mroonga 覚書 落とし穴

2014年4月15日火曜日 MroongaのラッパーモードでInnoDBを使う落とし穴 Mroonga(ストレージモード)はトランザクション非対応だから、ラッパーモードでInnoDBにしてトランザクション…とか考えているとハマる(かもしれない)落とし穴。 Mroongaのラッパーモードは「データは任意のストレージエンジンに」「転置索引はGroonga上に」作るモードであって、飽くまでGroonga... 続きを読む

MySQLでMyISAMからInnoDBに乗り換える際に知らないとハマる、怖い話 - Y-Ken Studio

2013/12/05 361 users InnoDB MyISAM Engine MySQL 怖い話

photo by byte MySQLといえば、巷ではInnoDBばかり注目され、MyISAMの地下アイドル化がにわかに語られる今日この頃、皆様いかがお過ごしでしょうか。 まあカジュアルにストレージエンジンを変換するだけで済むなら、簡単なのです。 -- legacy_my_tableをInnoDBストレージエンジンに変換する ALTER TABLE legacy_my_table ENGINE=I... 続きを読む

ストレージエンジンであそんでみた // Speaker Deck

2013/10/28 130 users Speaker Deck

こうなるはずだったんですがlightningのVGA変換アダプタとmini display portの変換アダプタを間違えて持って行ってしまいましたorz 次回から忘れないように全部まとめてキーホルダーに付けようと思います（´・ω...:.;::.. 続きを読む

無料で容量1TBに増えた「Flickr」にどんなファイルでも保存できるようにするストレージエンジン「Filr」 - GIGAZINE

2013/05/22 303 users YouT GIGAZINE Flickr デモムービー 形式

by Graham Smith PNGのtEXtチャンクとしてどのような形式のファイルでも埋め込んでしまい、リニューアルしたFlickrの無料で1TBもあるスペースを大容量ストレージのようにして扱ってしまおうというのが「Filr」です。 ricardobeat/filr · GitHub https://github.com/ricardobeat/filr 実際に使っているデモムービーがYouT... 続きを読む

高性能、大容量対応のMySQL/MariaDB向けストレージエンジン「TokuDB」がオープンソース化される | SourceForge.JP Magazine

2013/04/23 68 users MVCC MySQL MIT ラトガース大学 ビッグデータ

MySQL/MariaDB向けのストレージエンジン「TokuDB」を開発する米Tokutekは4月22日、初のオープンソース版となる「TokuDB 7.0」を公開した。MySQLで50GB以上のビックデータの活用を実現できるという。 TokuDBは、マサチューセッツ工科大学（MIT）、ラトガース大学、ニューヨーク州立大学の研究者らが開発したMVCCおよびACID準拠のストレージエンジン。書き込み中... 続きを読む

PHP開発者のMySQLの間違いトップ１０:phpspot開発日誌

2010/11/25 315 users MySQL phpspot開発日誌 InnoDB リカバリ

Top 10 MySQL Mistakes Made by PHP Developers PHP開発者のMySQLの間違いトップ１０。 手慣れている人にとっては知ってることも多いかもしれませんが、初心者が役立ったり、知らない部分のカバーとしてメモとして書いてみます MyISAMを使っている デフォルトはストレージエンジンにMyISAMだけどInnoDBを使おう リカバリ可能でオンラインバックアップ... 続きを読む

漢(オトコ)のコンピュータ道: まるで魔法のようなストレージエンジン？？VP for MySQLによる驚愕のテーブル操作テクニック。

2010/04/20 250 users SPIDERストレージエンジン NoSQL WRITE性能

2010-04-20 まるで魔法のようなストレージエンジン？？VP for MySQLによる驚愕のテーブル操作テクニック。 先日、SPIDERストレージエンジンについて2度に渡り本ブログで紹介した（その１：Not Only NoSQL!! 驚異的なまでにWRITE性能をスケールさせるSPIDERストレージエンジン、その２：快適スケールアウト生活への第一歩。SPIDERストレージエンジンを使ってみよ... 続きを読む

ウノウラボ Unoh Labs: 国産MySQLストレージエンジン「Spider」の作者、斯波健徳氏に聞く

2009/07/16 342 users SPIDER ウノウラボ InnoDB Unoh Labs

こんにちは。中村です。 MySQLにはMyISAM、InnoDB、CSVなどのいくつかストレージエンジンがありますが、皆さんはSpiderというストレージエンジンを聞いたことはありますでしょうか。Spider Storage Engineは斯波健徳さんにより作成されたDatabase Shardingを可能にするストレージエンジンでMySQL 5.1で利用可能です。 先日、某集まりで斯波さんとお会... 続きを読む

【特集】MySQLの新ストレージエンジン Falcon徹底リサーチ (1) Falconとは (MYCOMジャーナル)

2007/03/02 140 users Falcon InnoDB MYCOMジャーナル MySQL

2007年1月に、MySQL ABは新しいストレージエンジン※である「Falcon」のアルファ版をリリースした。Falconは、現在広く使われているストレージエンジン「InnoDB」に代わる選択肢のひとつとして期待されている。本稿は、このFalconの技術的な特徴について解説する。 ※テーブルの種類のこと。MySQLでは、InnoDBやMyISAMなど、さまざまな種類のテーブルがあり、テーブル単位... 続きを読む