際際滷

About MongoDB 3.2
珂看稼乙看禽京3.2の府初
局何街湊隻2016/07/27

徭失�B初
{"ID" �"fetaro"
"兆念"�"局何莭��"
"侭奉"�"リクル�`トテクノロジ�`ズ"
"冩梢"�"�|奨垢�I寄僥でデ�`タベ�`スと秤��碧�倫仂�
(@晩云デ�`タベ�`ス僥氏)"
"碧並"�{念�:["�^発氏芙のオントレシステムのWeb児�P",
"オ�`プンソ�`ス何�。麼にMongoDB,NoSQL"],
�F�:["リクル�`トの罪僅蛍裂児�P
Exadata, Hortonworks, EMR"]}
"エディタ"�"emacs塗"
"箸龍"� ["徭姙サ�`バ","醍噺"]
"奉來" : ["ギ�`ク","ス�`ツ"]}

朕肝
? API
o ドキュメントバリデ�`ション
o 何蛍議インデックス
o 仟しいCRUD
o アグリゲ�`ションフレ�`ムワ�`クの個措
? 互辛喘更撹
o プライマリ�x竃互堀晒
o �O協サ�`バ蛤がレプリカセットに
o Read Concern
? ストレ�`ジ
o デフォルトがWiredTigerに
? 塰喘

ドキュメントバリデ�`ション
? ドキュメントの嶄附にバリデ�`ション
(キ�`兆や�､離船Д奪�)がかけられる
? 書まではスキ�`マレスを�咾蠅砲靴討④�
? でもやっぱり、魁栽によってはスキ�`マが嶷勣

? nameというキ�`の�､鯲鍔崛个法�ageを30より寄きい�､墨浙�
? 屎しいドキュメント
? 音屎なドキュメント
> db.createCollection( "user" , {
validator : {
name : { $type : "string" },
age : { $gt : 30 }
}})
> db.user.insert({"name":"fetaro","age":33})
WriteResult({ "nInserted" : 1 })
> db.user.insert({"name":1,"age":1})
WriteResult({
"nInserted" : 0,
"writeError" : {
"code" : 121,
"errmsg" : "Document failed validation"
}
})
メッセ�`ジは耕協
どうやって払�，靴燭�
わからない

? よく聞うバリデ�`ション
o findで�碧�垢襪箸④量��原┐藩�故跳┐�垢┐�
? 塘双をバリデ�`トする��呂臨��
�N� �h苧バリデ�`ションの��
$exists キ�`が贋壓するか true,false
$type �､緑佑��靴い� "number","string" 吉
$in �､�篩个忘�泙譴襪�
�協するキ�`の�､鮑�
む塘双
$regex �､��ｱ蹶Fとマッチするか屎�燕�F
> db.createCollection("user",{ validator:{ "hoge" :{$type : "array" }}})
> db.createCollection("user",{ validator:{ "hoge.0":{$exists : true}}})
?
?

何蛍議インデックス
? ドキュメントの嶄のある�､量��茲辰董�
そのドキュメントをインデックスに根めるかどうかを蛍けれる
? 箭
o Scoreにある80泣參貧ドキュメントだけをインデックスに根める
o db.scores.createIndex({"score":1},
{partialFilterExpression: {score:{$gt:80}}})
? 訳周の峺協
o キ�`の贋壓
o �､修里發�
o �､隆耡�
o �､緑�
? 聞いドコロ
o インデックスツリ�`そのものの寄きさが�pることにより
? インデックスサイズの��p
? インデックス冥沫の互堀晒

仟しいCRUD
? 書までのCRUD
o 匯指のクエリで厚仟されるドキュメントの方が匯つだったり�}方だったり
o 箭� db.mycol.update( {score:{$gt:75}}, {"pass": true})
? 匯つのドキュメントだけ厚仟される�
? ドキュメントが来ごと崔き�Qわる�
? 仟しいCRUD
o 苧�_に厚仟するドキュメント方が蛍かるようになった
3.0までのAPI 3.2で弖紗になったAPI
insert() insertOne()
insertMany()
remove() deleteOne()
deleteMany()
update() replaceOne()
updateOne()
updateMany()
findAndModify() findOneAndDelete()
findOneAndReplace()
findOneAndUpdate()

アグリゲ�`ションの個措(1)
? $lookup
o 麿のコレクションから�~づくデ�`タを�Y栽できる。 LEFT OUTER JOINのようなもの
? ただしこの�Y栽はRDBMSの�Y栽とは寄きく�なる
o RDBMSのJOIN
? �Y栽�麻の恷�m晒、匯�したビュ�`
o MongoDBの�Y栽
? 坪何議には�Y栽枠テ�`ブルに��してクエリを�k佩しているだけ
? 麿のクエリから蛍�xされたものではない。
? つまりアグリゲ�`ションフレ�`ムの�g佩嶄に、�Y栽枠のテ�`ブルが厚仟さ
れたら、その唹�を鞭ける
? というか、MongoDBは云栖蛍裂喘余ではない
db.user.aggregate([{
$lookup:{ from : "item", �Y栽枠テ�`ブル
localField : "item_id", �Y栽キ�`�徭テ�`ブル�
foreignField: "item_id", �Y栽キ�`��返テ�`ブル�
as : "item" 双兆
}}])

? 3.0まで
o プライマリシャ�`ドに�
塞が鹿嶄
? 3.2から
o この�嘛��睿�
o ただし、$outと$lookupは
卆隼としてプライマリ
シャ�`ドを聞う

? インデックス坪にデ�`タがあればそれを聞いドキュメ
ントにはアクセスしない

その麿の個鋲
? 畠猟�碧��Z參翌に��
o 弖紗された冱�Zはアラビア�Z、ペルシャ�Z、ウルドゥ�`�Z、
嶄忽�Z
o 晩云�Zは火廷ながら隆��
o 嗤��のEnterprise井のみで旋喘辛嬬
? ビットをテストするオペレ�`タの弖紗
? JavascriptのエンジンがまたSpidermonkeyに
o 2.4でSpidermonkeyからV8にしているので、��辰�
? 仇尖腎�gインデックスの恷�m晒

プライマリ�x竃互堀晒
? プロトコルのバ�`ジョンアップによりプライマリ�x竃が堀くなっ
た
? 1.7昼參坪になった(MongoDB World 2016での�k燕)
プライマリ
1 4 9
プライマリ
1 4 9
セカンダリ
1 4 9デ�`タ�}�u
アプリケ�`ション
MongoDBドライバ
��zみ �iみ�zみ�iみ�zみ
レプリカセット

�O協サ�`バ蛤がレプリカセットに
? 書まで
o �O協サ�`バはmongod 1岬 or 3岬で2PC(2フェ�`ズコミット)
o mongos --configdb <config1>,<config2>,<config3>
? 3.2から
o �O協サ�`バをレプリカセットで��Bできるようになる
o mongos --configdb <replicasetName>/<config1>,<config2>
mongos
ル�`タ
�O協
サ�`バ
mongod mongod mongod
�O協
サ�`バ
�O協
サ�`バ
mongos
ル�`タ
�O協
サ�`バ
mongod mongod mongod
�O協
サ�`バ
�O協
サ�`バ
2PC
レプリケ�`ション

? レプリカノ�`ドの�^磯方にデ�`タが厚仟されるのを棋って�iむ
? 匯�シンプルな�C嬬に�えるが、よく深えると訊ろしい�C嬬
★寄嫌にシステムのスル�`プットが鯛ちる辛嬬來がある
? 採がうれしいのか�
o レプリカセットとして伏き火ることが隠�^された(Rollbackしない)
デ�`タだけを�iむことができる
o レプリカセットは�欧豬修砲茲辰討魯禰`タロストが�k伏するが、それを嚠契し
ている
Read Concern
アプリ１
プライマリ
A B C
セカンダリ
A B C
セカンダリ
A B
��
セカンダリセカンダリ
A B A B
C
アプリ２
�iみ
アプリ３アプリ４
�iみ
�iみ
●まだ揖豚できていない●

Read Concern
? MongoDBにおける仝Rollback々とは

? デ�`タロストが�k伏する�欧豬�
Read Concern
アプリ１
プライマリ
A B C
セカンダリ
A B C
セカンダリ
A B
��
A B A B
C
�●まだ揖豚できていない●
�◎ここでネットワ�`クが蛍僅される
アプリ2
セカンダリ
A B C
セカンダリ
A B C
プライマリ
A B
��
A B A BD
D
�レプリカの�^磯方が�え
ないためセカンダリに週鯉◎
D D
セカンダリ
A B
C
セカンダリ
A B
C
プライマリ
A B
A B A BD D DDD
∠Cをロスト

mongod
デフォルトがMMAPv1からWiredTigerに
? Version 2.x
o 兆�oしのストレ�`ジ(MMAPベ�`ス)
? Version 3.0
o MMAPv1 ? デフォルト
o WiredTiger ? オプション
? Version 3.2
o MMAPv1 ? オプション
o WiredTiger ? デフォルト
MMAPv1
ストレ�`ジAPI
歌深) http://www.slideshare.net/NorbertoLeite/mongodb-wiredtiger-internals
セキュリティ
MongoDBクエリ冱�Zエンジン
WiredTiger
アプリケ�`ション
MonogDBドライバ
砿尖
MMAP喘
デ�`タ
ファイル
WiredTiger喘
デ�`タファイル
MMAP喘
デ�`タ
ファイル
WiredTiger喘
デ�`タファイル

? MMAPv1とは
o MongoDB 3.0のデフォルト
o ディスクにあるファイルをそのままメモリに�\せる
o OSがキャッシュするデ�`タを�Qめる
? LRUのアルゴリズムでペ�`ジアウトさせる
? 恷も�l業が互いメモリのペ�`ジが火る
o つまり、仝返�iき々のストレ�`ジ
D
E
F
ディスク
メモリ
C
B
A
B
D mongod
プロセス
OSにメモリに
�\せてもらう
E

? MMAPv1における厚仟�in place(その��)
ディスク
メモリ
{ name : "abe",
age : 20 }
doc1 doc2 doc3
{ name : "abe",
age : 20 }
ディスク
メモリ
{ name : "abe",
age : 20 }
doc1 doc2 doc3
{ name : "abe",
age : 21 }
ディスク
メモリ
doc1 doc2 doc3
{ name : "abe",
age : 21 }
１�メモリに�\せる
２�厚仟する�アプリに鬴陦�
３�掲揖豚でディスクに��
{ name : "abe",
age : 21 }
クエリスレッド
クエリスレッド
揖豚スレッド
廣吭�ジャ�`ナルを聞っていないときの�咾�

? MMAPv1の��}泣
o ��zむときにロックを函る駅勣がある
? �iみ函りがブロックされ、システムのスル�`プットは詰和
? コレクション畠悶のロック(ver 2.xではデ�`タベ�`スロック)
o メモリ聞喘楚を崙囮できない(OSまかせ)
? OSは腎いているだけ聞う
o 麗尖議に�Г泙蠅④蕕覆��呂蓮▲妊�好�呂敗拇籌辰�陲海�
? 掲械に嶷い�I尖
? 麗尖議にデ�`タの僭が�_き、フラグメンテ�`ション�k伏。
ディスク
メモリ
doc1 doc2 doc3
{ name : "abe",
age : 20, id:123456}
{ name : "abe",
age : 20, id:123456}秘らない�

? WiredTigerとは
o 3.0から喜�dされているストレ�`ジ
o 3.2からはデフォルト
o 弖�侏
o ��zみが�iみ�zみをロックしないアルゴリズム(MVCC)を�駻辰掘▲�
キュメントレベルのロックを�g�F
o デ�`タ�R�s辛嬬
o メモリ聞喘楚コントロ�`ル辛嬬
o インデックスとデ�`タファイルの蛍�x辛嬬(IOの蛍柊ができる)
o ストレ�`ジの�y�秤�鵑��Δ任④襪茲Δ砲覆辰�
? つまり、仝ちゃんとした々ストレ�`ジ

? WiredTigerにおける厚仟�弖�侏 (MVCC)
{"no": 11}
{"no": 11}
チェックポイント岷瘁
メモリ
ディスク {"no": 11}
{"no": 11}
noが12に厚仟された
update{"no": 12}
{"no": 11}
{"no": 11}
update{"no": 12}
update{"no": 13}
noが13に厚仟された
{"no": 11}
{"no": 11}
update{"no": 12}
update{"no": 13}
チェックポイント
Eviction(羨ち曜き)
{"no": 13}
{"no": 13}
チェックポイント岷瘁
version 2
version 1
version 2
version 1
version 3
厚仟嶄の�iみ�zみは、
症バ�`ジョンを�iみ函る
?�iみ�zみは棋たされない�

? WiredTigerの厚仟の蒙�
o ��zみは１ドキュメントを弖�するだけ
o �iみ函りは��zみを棋たない
o ディスクに��気譴�rにディスク貧の麗尖塘崔を脅業�{屁するた
め、フラグメンテ�`ションは�k伏しない
? その麿ポイント
o ジャ�`ナルを嗤�燭砲垢襪函�罫��zみをディスクに喟�A晒できる
? チェックポイントの�gにクラッシュしてもデ�`タロストなし
o インデックスとデ�`タファイルはWiredTigerのトランザクション�C嬬を
聞って揖�rに厚仟される
o �}方ドキュメントを睡いだトランザクションは戻工されない

その麿ストレ�`ジ
? インメモリ
o ディスクIOを佩わないインメモリストレ�`ジエンジンinMemoryが�xべる
ようになった
o 嗤��のEnterprise井のみ
o ベ�`タ井
? 圧催晒��鬉�WiredTiger
o WiredTigerを圧催晒できる
o HIPAA, PCI-DSS, FERPAといったセキュリティの��併��してい
ます
o 嗤��のEnterprise井のみ
? テスト喘エフェメラル
o テストで�飴悒禰`タをクリアしなくてよい、テスト喘のストレ�`ジエンジ
ンephemeralForTestが�xべる
o ベ�`タ井です。

塰喘の個鋲
? mongodumpとmongorestoreの個措
o �R�sに��
o リモ�`トのmongodに��してdumpしたデ�`タをストリ�`ムで
�僕しrestoreすることができる
? �\僅喘デ�`タ
o デフォルトで1昼ごとに�\僅喘デ�`タ(Diagnostic Data)がと
られるようになった。
o デ�`タはデ�`タフォルダにファイルとして竃薦される。

その麿のエンハンス
? WiredTigerがfsyncでロックできるようになった
o 床峭泣を函りやすくなった
? 32bitバイナリが掲容�Xになった。
? Write Concernの碧��がちょっと�笋錣辰�
? journalCommitIntervalのオプションがWiredTiger
でも聞えるようになった

恷瘁に��B初除晩�k��
? 广宀
o 弌麭圻繇�
? タイトル
o はじめてのMongoDB
�Dオ�`プンソ�`スのNoSQLデ�`タベ�`ス
? 坪否
o 兜伉宀�け
o アプリ�_�k宀�け』DBA
o コマンド箭謹め
ちょっとMongoDB聞ってみたいな、
MongoDBを聞ったアプリケ�`ションを
��い討澆燭い福垢箸いθ砲留隔个鬚�
してあげる云を朕峺して��④泙靴拭�
ぜひMongoDBを聞ったアプリ�_�kを
�Sしんでみてください�

際際滷

珂看稼乙看禽京3.2の府初

Recommended

More Related Content

What's hot (20)

Viewers also liked (17)

Similar to 珂看稼乙看禽京3.2の府初 (20)

More from Tetsutaro Watanabe (18)

珂看稼乙看禽京3.2の府初