2007年04月11日

Amazon EC2とS3の連携2題

Posted by nene2001 at 14:02 / Tag(Edit): amazon ec2 s3 mysql / 0 Comments: Post / View / 2 TrackBack このエントリーを含むはてなブックマーク

EC2はイメージを使ってバックアップできるというけれど、実は160GBくらいの領域が用意されるうち、一部しかイメージ化されない(少なくとも左のリンクの記事を書いた時は)。
正確に書くと、/dev/sda1は大半がイメージ化されるが、/dev/sda2は全くイメージ化されない模様。
以前エマーソンさんに聞いたら、「えー、そんなことないはずですよー、また詳しい話質問してください」と言われたけど、とりあえずその後/dev/sda1の容量が拡張されて、当面やりたい事をやるには不足はなくなったので、問い合わせてない。
でも、自分でイメージを作るスクリプトのec2-bundle-volの中を覗いてみたら、きっちり/dev/sda2相当の領域をイメージ作成外とするよう設定されてたし、その設定を外してイメージ作成してみても、イメージ展開してみるとやっぱり/dev/sda2相当の領域は展開されなかったので、間違いないと思うのだけど...。

上に書いたことが間違いなければ、EC2は160GB近いディスク領域を提供してくれるけど、その領域の大半はバックアップも簡単でなく(というか普通のサーバと同じ)、かつインスタンスがもし落ちるような事があれば、復旧絶対不可能で気化してしまう危ない領域ということになるんじゃないかと思う。
そうなると、せっかくS3という巨大で安価なストレージ領域がそばにあるんだから、連携させてうまくバックアップ取れるようにしたいというのが人情で。
その手の話題を2つ紹介。

1つ目は、S3の領域を直接EC2上にマウントできるようにするというもの。
なんか色々Javaとか使わないといけないみたいなので、私はまだ試していないんだけど、これができれば、/dev/sda2上のデータを、同一サーバ上にマウントされたS3に定期バックアップとるようにしてやることで、/dev/sda2も比較的安心して使えるようになる。
できればさらに一歩進んで、/dev/sda2上のファイル領域をS3上のファイル領域のキャッシュのように使えるような、普通は/dev/sda2にアクセスするんだけど、ファイルを変更などすればS3にも自動的に遅延書き込みされるような、そんなのができればいいなあ。

2つ目は、MySQLのストレージをS3上に配置するという、ガッツのあるアプローチ。
こっちは試してみようと思いDLしてみたが、mySQLのソースツリーが必要との事だけどうちのサーバのmySQLはXAMPPで落としてきたものなのでソースツリーがないので、とりあえず保留中。
READMEとか目を通してみたら、マジで全部のmySQLデータベースのストレージをS3上に移す、ということではなく、MyISAMやInnoDBなんかと同様のDBエンジンとして新たに「AWSS3」というのを定義し、そのエンジン上で、ハッシュキー:値の2カラム固定のテーブルをS3上に配置する、と言う形みたい。
私の読み間違い出なければ。

だからmySQLといっても、実際にはハッシュDBみたいな使い方しかできないっぽい。
そういう事もあって、導入はタスクキュー内の優先順位を下げまくっています。

Related query words in Google & Yahoo
Related Books from Amazon
Trackback to this entry
TrackBack URL :
Trackbacks
Amazon商品とその商品に関連した動画を同時検索
Excerpt: AmaTube 【NETA BLOG】Amazonの商品を検索すると、同時に関連した動画を表示します。2578万個の動画から検索...
Weblog: のこぶろぐ
Tracked: 2007年04月13日 20:18
EC2へのS3領域マウントソリューションは有料になってた
Excerpt: 先のエントリで紹介した、Amazon S3のストレージ領域をEC2サー...
Weblog: ここギコ!
Tracked: 2007年04月14日 11:41
Comments
コメントはありません。
Post a comment












Remember personal info? 
2007年04月
Su Mo Tu We Th Fr Sa
1 2 3 4 5 6 7
8 9 10 11 12 13 14
15 16 17 18 19 20 21
22 23 24 25 26 27 28
29 30          

About Me

Navigation

Search
Google
Web
kokogiko.net
Archives
Recent Entries
Recent Comments
Recent Trackbacks
姫路のオモシロ寿司屋(ここギコ!)
0系こだまとひかりレールスターに乗ってきた ドクターイエローも見た
姫路のオモシロ寿司屋(ここギコ!)
位置情報ベース広告AdLocalへ一般からも入札が可能に
「定義できない」とのたまうものを自説根拠の説明の中で延々と使う不誠実(笑)(ここギコ!)
文化は変わっていくのは当たり前だからこそ、今問われているのはリアルタイムの選択
現代アイヌの政治運動は利権獲得のためのようだな。(むにゅう!の平和大好き! はてな基地)
文化は変わっていくのは当たり前だからこそ、今問われているのはリアルタイムの選択
的外れですた恥ずかしい Googleは世界標準の絵文字を作ろうとしてるわけではない、少なくとも、今のところ(ここギコ!)
絵文字標準化でのキャリア批判に思うこと
すごい職場の活性法(これが答えだ)
人員がクラスタ化できている職場と言うのはうらやましい そろそろ限界です
文化は変わっていくのは当たり前だからこそ、今問われているのはリアルタイムの選択(ここギコ!)
大和民族の定義云々について
歴史のダイナミズムの元では右翼こそ変わらなければならない(ここギコ!)
右翼はアイヌや沖縄を包摂する論理を構築すべきではないのか
右翼はアイヌや沖縄を包摂する論理を構築すべきではないのか(ここギコ!)
大和民族の定義云々について
政治と祭祀が不可分と考えるなら、全ての祭祀を引き受けるのが筋(ここギコ!)
大和民族の定義云々について
Hatena bookmarked
My del.icio.us

Banners

Syndication
Powered by
Get it!!