HandlerSocketソースコード公開しましたby higuchi.akira2010/08/23 11:10on MySQLはじめまして、樋口と申します。先日のDeNA Technology Seminar #2でお話させていただきました HandlerSocket Plugin for M... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
こんにちは、システム本部技術部たんぽぽGの森本です。先日のmixi大規模障害の原因となったmemcachedの不具合の詳細な解明ができました。 再来週まで発表を見合わせようと思ったのですが、早くお伝えしたほうがいいと思いましたので公開発表致します。memcachedとlibeventmemcach... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
memcachedのように一時的なデータを高速に扱えながらもデータをファイル上に永続化できるサーバとして、「Kyoto Tycoon」という製品を開発することにした。もちろん、Kyoto Cabinetをストレージにしたネットワークサービスを提供するものである。実のところ、決まっているのはその点と... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
こんにちは。システム本部技術部たんぽぽGの森本です先日のmixi大規模障害についての続報です 今回は小ネタはありませんはじめにまず初めにtwitter/blogなどを通じて今回の問題の解析を行っていただいたみなさんに感謝の言葉を捧げたいと思いますkzk_moverさんstanakaさんmala(b... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
memcachedの活用と運用 実践編第1回 memcachedの起動オプションを把握しようTweet2010年8月17日長野雅広memcached, 起動オプションキャッシュ, オプション, バージョン, デフォルト, default, statsこの記事を読むのに必要な時間:およそ 3 ~ 6... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
こんにちは。システム本部技術部たんぽぽGの森本です先日のmixi大規模障害についてのブログです。 はじめにお断りしておきますが、弊社CTOがtwitterで公開した以上の情報はまだ得られておりません。 twitterでは書ききれなかった細部を補足してみたいと思います現状判明しているのは以下の点です... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
ファイルディスクリプタが不足してmemcachedが落ちたとして、そのときには、3万強の接続となってるはず。3万強の接続となるにはアプリケーションサーバ側のmax clientが平均60として500台以上必要。そんなに増えたん? [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
Rails, MongoDB, Heroku | 00:29 | Heroku上のRailsからMongoDBの中身を参照できるあたりまで試してみました。忘れないうちにメモしておきます。今回やってみてわかったことは下記。 今はrails 3.0.0.rcだとそのままデプロイできない MongoDB... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
クラウド時代の新しいデータベースとして、非リレーショナルな構造を持つNoSQLデータベースが話題になっています。そのNoSQLの中で、もっとも注目されているデータベースの1つがApacheのCassandraです。Cassandraは、Facebookで大規模データ処理のために開発され、その後オー... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
クラウド上のデータベースとして、分散型のキーバリューストア(分散KVS)を用いることが多くなった。分散KVSは、スケーラビリティーに優れており、特にユーザー数が多いシステムでは利用価値が高い。ただし、分散KVSにはいくつかの制約があり、システム開発に利用する際には、これまでの“RDBMS脳”をいっ... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
Twitterが分散フレームワーク「Gizzard」公開! Scalaで書かれたShardingを実現するミドルウェアTwitterは独自に開発した分散フレームワークの「Gizzard」をオープンソースとして公開しました。GizzardはScalaで書かれたJavaVM上で動作するミドルウェアで、... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
NoSQLを知る〜kumofsから学ぶNot only SQLの技術 と題して、Developers Summit 2010で発表しました。twitterの#devsumi2010 kumofsを見る限りでは大変ご好評をいただいたようで、ひとまずほっとしています。 プレゼンテーションの資料を公開し... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
分散Key-Valueストアの本命 kumofs を、本日オープンソースソフトウェアとしてリリースしました!kumofs@github kumofs関連資料まとめ kumofsとは?kumofsは、実用性を重視した分散データストアです。レプリケーション機能を備え、一部のサーバーに障害が発生しても動... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
scale outの技術首藤 一幸Last-updated: January 5, 2010注: このページの文章は以下の記事の元原稿です。首藤一幸,"スケールアウトの技術",クラウドの技術, pp.88-101,(株)アスキー・メディアワークス, ISBN978-4-04-868064-6,20... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
首藤 一幸Last-updated: January 5, 2010注: このページの文章は Software Design 誌 2010年 2月号に掲載された以下の記事の元原稿です。Software Design 誌編集部の了承の元に、本ウェブページに掲載しております。首藤一幸:"key-val... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
マトモに使えるRPCライブラリ MessagePack-RPC for Ruby のバージョン 0.2.0 をリリースしました!新たにコネクションプーリングの機能を追加しました。一度接続したコネクションを共有して使い回すことができます。コネクションを何度も張り直す負荷と遅延を削減でき、リソースの消... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
『 dev:PragmaticProgrammingTechniques:NOSQLPatterns: 』 [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
Song of Cloudで送金のトランザクション処理パターンが紹介されていました。http://songofcloud.gluegent.com/2009/11/blog-post_18.html同様のpython版がこちらDistributed Transactions on App Engi... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
有限会社スティルハウス 吉川和巳 2009/11/11 RDBとは別の、クラウド時代のデータベースとして注目を浴びている「分散Key-Valueストア」。その本命ともいえる、Googleの数々のサービスの基盤技術「Bigtable」について徹底解説月間3000万PVの大規模サイトの運用費が月額4万... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|
Hadoop World Report:優良企業はなぜHadoopに走るのかオープンソースの大規模分散データ処理システム「Hadoop」の人気がうなぎ登りだ。Yahoo!やAmazon、FacebookといったIT業界の巨人たちだけでなく、VISAやJP Morganといった有名企業までHadoo... [ 詳細 ] [ 関連 ] [ ニコニコ風 ]
|