最初はApacheネタで行くつもりが、最近は何でも有りになってきた。
うっかりソフトの世界に来てしまったエンジニアの苦悩・・・
うっかりソフトの世界に来てしまったエンジニアの苦悩・・・
2014-08-21
Mongoクエリー・ベース・レプリケーション
mongodb | |
レプリカセット間レプリケーション
MongoDBではレプリカセットを跨いでデータを同期する手段が無い。
そもそもレプリカセット自体が冗長構成を目的としているので設計に組み込まれていないのだろう。
しかし現実は Staging環境や、PV系/集計系の分離など、用途はある。
今は、レプリカセットのslaveを1台切り離してそこで何かするしかない。
フレッシュデータじゃないし運用も面倒。
monmo-repl
https://github.com/monmo/monmo-repl
なければ作れば良いので作った。
oplogベースの同期を行う。-s で指定したレプリカセットのPRIMARYのoplogを読み、-d で指定したレプリカセットに反映していく。
PRIMARYダウン時の挙動など、まだ未テストの部分は多いが
『とりあえず動く』
程度の完成度。
例
ReplicaSet1 =sync=> ReplicaSet2 [ 127.0.0.1 ] [ 127.0.0.1 ] - 27017 - 28017 - 27018 - 28018 - 27019 - 28019 ./bin/monmo-repl.sh -s 127.0.0.1:27017,127.0.0.1:27018,127.0.0.1:27019 -d 127.0.0.1:28017,127.0.0.1:28018,127.0.0.1:28019 -i
仕様
- 例によって bash , mongo シェルしか要らない
- 同期元のレプリカセットのmasterのoplogを読む(将来、選択可能になる可能性あり)
- インデックスの同期はオプショナル(解析用には専用のindex持ちたいだろうし)
- 起動時に完全同期オプション(-f) は遅い。。。
- 同期対象DB を指定できる(デフォルト全て)
コメントを書く
トラックバック - http://d.hatena.ne.jp/hiroppon/20140821/1408609522
リンク元
- 136 https://www.google.co.jp/
- 24 https://www.facebook.com/
- 22 http://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=1&ved=0CBwQFjAA&url=http://d.hatena.ne.jp/hiroppon/20131126/1385477732&ei=CLH1U6W9Bobi8AWb7IDQBw&usg=AFQjCNHA44o8wHaY6dqoag-UEm0XbT35EQ
- 16 http://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=3&ved=0CCwQFjAC&url=http://d.hatena.ne.jp/hiroppon/20081130/1228069539&ei=Ibr1U-XXJsq9uAT0_oDQAw&usg=AFQjCNE70ob18v_2Gl6roz6nE2cAswcKaw&bvm=bv.73231344,d.dGc
- 14 http://t.co/iUN4suL9jd
- 14 http://www.google.co.jp/url?url=http://d.hatena.ne.jp/hiroppon/20130509/1368061417&rct=j&frm=1&q=&esrc=s&sa=U&ei=uND1U_PDGo7p8AX4uoGABQ&ved=0CEQQFjAH&usg=AFQjCNFqpR8g27_PH1KDAEzXFj4cksrc4g
- 13 http://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=2&ved=0CCMQFjAB&url=http://d.hatena.ne.jp/hiroppon/20130326/1364265864&ei=ibf1U--TDdPc8AX_ooLoCA&usg=AFQjCNEbmR3sw-iFjo6E-Y2Sjf9YTpMGpA&bvm=bv.73231344,d.dGc
- 10 http://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=4&ved=0CDgQFjAD&url=http://d.hatena.ne.jp/hiroppon/20081130/1228069539&ei=_rP1U-ONNorh8AWQw4H4Cw&usg=AFQjCNE70ob18v_2Gl6roz6nE2cAswcKaw&bvm=bv.73231344,d.dGc
- 9 http://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&frm=1&source=web&cd=3&ved=0CCwQFjAC&url=http://d.hatena.ne.jp/hiroppon/20140507/1399478133&ei=3sj2U6f3NJXn8AXM4IHgBQ&usg=AFQjCNELSRiKP_Aasb2IE3kR9EgPyklEkQ
- 8 http://b.hatena.ne.jp/