いちだいで たりないとき、わけて しまう

いちだいでは たりなくなる

まえに データベースが
きょだいな そうこだと まなびました。
あんぜんに しまい はやく さがしましたね。
でも じょうほうは とまらず たまります。
ひとが ふえ、きろくが ふえ、
しゃしんや どうがまで はいってくる。
どんなに 大きな そうこ いっけんでも
いつかは いっぱいに なって もう しまえません。
いちだいでは たりなくなる しゅんかんが きます。

データを おして どんどん ふやしてみて。いちだいの ようりょうを こえると もう しまえません。

いちだいが いっぱいに なりましたね。
もっと いれたくても ばしょが ない。
もっと 大きな コンピュータに かえても
それさえ いつか また いっぱいに。
いちだいを かぎりなく そだてるのには
はっきりした げんかいが あります。
なら やりかたを かえないと。
いちだいを そだてる かわりに
なんだいかに ふやしたら どう?

なんだいかに わけて しまう

やりかたは おもったより かんたん。
データを かけらに わけて
なんだいかに ちらして しまうのです。
いちだいが ぜんぶを かかえて くるしむ かわりに
それぞれの だいが いちぶだけ うけもつ。
たとえば なまえが A から M までは 1ばんだい、
N から Z までは 2ばんだいに しまう ぐあい。
こう にもつを きざんで わけるのを
ぶんさんと いいます。
シャーディングとも いいます。

かけらを おして なんだいかに わけて しまってみて。それぞれの だいは ぜんたいの いちぶだけ。

にもつが なんだいかに ちらばりましたね。
いちだいが かかえていた ふたんが かるく なった。
データが もっと ふえたら
ただ だいを もう いちだい たせば いい。
すると あたらしい かけらは あたらしい だいが うけもつ。
こう ふやして いけるので
とても 大きな データも しまえます。
でも ひとつ しんぱいが でてきます。
その いちだいが きゅうに しんだら どうする?

おなじものを コピーして おく

わけて しまうと ひとつ よわみが あります。
ある かけらを うけもつ だいが しぬと
その かけらが まるごと きえます。
だから おなじ データを
なんだいかに コピーして おきます。
いちだいが しんでも
コピーを もった べつの だいが ひきつぐ。
だから データが こわれません。
こう おなじものを なんだいかに コピーするのを
ふくせいと いいます。

コピーを おして おなじ データを なんだいかに おいてみて。いちだいを けしても べつの だいが いきていて こわれません。

いちだいを けしても へいきでしたね。
コピーが そばで まもって くれた おかげ。
ここで ふたつを かならず くべつします。
わけて しまう ぶんさんは かけらを きざんで
べつべつの だいに わけること、
コピーして おく ふくせいは おなじものを
なんだいかに おなじように おくこと。
ぶんさんは わける、ふくせいは コピーする。
ふたつは にて みえても まったく ちがう しごとです。

ゆるい うつわ、NoSQL

でも データが ぼうだいに おおく
とても はやく でいり しなければ ならないと
きびしい ひょうが かえって じゃまに なります。
れつを そろえて おく きまりが
はやさを ひきとめるからです。
だから きまりを ゆるめた うつわを つかいます。
ひょうの かわりに キー ひとつに あたい ひとつを ぶらさげて
すぐ いれて すぐ とりだす ぐあい。
まえに みた ハッシュを 大きく そだてた ようなもの。
こんな ゆるい うつわを NoSQL と いいます。

きびしい ひょうと ゆるい キー-あたいの うつわを おして くらべてみて。ゆるい ほうが きょだいで はやい しょりに ゆうり。

ゆるい うつわは
きまりが すくない ぶん じゆうで はやい。
ひょうのように れつを きっちり そろえなくても
キーさえ あれば あたいを すぐ いれて とりだす。
そのかわり れつを そろえる きれいさは
すこし てばなすことに なります。
なにを えて なにを てばなすか
つかいかたに あわせて えらべば いい。
きょだいで はやい データには
この ゆるい うつわが よく あいます。

データの りょういきを まとめましょう

ここまで とおい みちを あるいてきました。
あたいを しまう うつわから はじめ、
その うつわを あつめた データベースを みて、
きょだいな ひょうから ほしい ぎょうを
はやく さがす ほうを まなびました。
ちかみちを つくる インデックス、
ひょうどうしを つなぐ かんけい、
とちゅうで きれても あんぜんな しょりまで。
そして きょうは いちだいで たりないとき
わけて しまい コピーして おく ほうを みました。

データ りょういきの おおきな すじを じゅんに おして とじてみて。(うつわ → データベース → はやい さがし → インデックス → かんけい → あんぜんな しょり → わけて しまうと ふくせい)

ひとことに まとめると こうです。
データが いちだいで てに おえなければ
なんだいかに きざんで わけて しまい(ぶんさん)、
こわれないよう なんだいかに コピーします(ふくせい)。
わけると コピーするは ちがう しごと。
きょだいで はやい しょりの ためには
ひょうを ゆるめた うつわ NoSQL を つかいます。
これは ハッシュを 大きく そだてた うつわなので、
つぎに であう じんこうちのうの
ぼうだいな データへ つながる はしです。

これで データを あつかう 大きな えが
ひとめで みえてきますね。
ちいさな うつわ ひとつから はじめ
なんだいかに わけて コピーする
きょだいな いとなみまで きました。
じょうほうを あんぜんに しまい
はやく さがし 大きく そだてる この うでが
つぎの りょういきである じんこうちのうを
ささえる じばんに なります。
データが あつまる ところで
かんがえる きかいが そだつのです。