【Team 2ch】分散コンピューティング総合304【UD→BOINC】

936 ：名無しさん？：2012/08/29(水) 13:23:15.28 ID:???

長文スマソ

WCG アップロード/ダウンロード不調の調査が進んでいるようだ。
やはりGPFSがクサイらしい

ttps://secure.worldcommunitygrid.org/forums/wcg/viewpostinthread?post=389140
ttps://secure.worldcommunitygrid.org/forums/wcg/viewpostinthread?post=389655

1) サーバには、WU配布用の格納フォルダを1024個つくってあるが、
　このうち約半数(≒512個)が、フォルダ情報1個あたり14MBと、ありえないほど大きくなっている。
　読み書きが激しいためフォルダ情報の更新日時などが頻繁に更新される(←ここは俺の推測です)が、
　GPFSの仕様上、一度大きくなったものは小さくなることはないため、更新ごとにサイズがどんどん大きくなってしまう。(古いゴミデータが残り続ける)
　で、そのようなフォルダが512個ぐらいあるので、フォルダだけで14MB x 512個 = 約7GBの領域を食いつぶしており、
　処理高速化のためのキャッシュメモリサイズ2GBを大幅に超えている。

2) 不調が発生してるとき、GPFSの応答速度(読み書き)が、通常の約10倍遅くなっている (1ms→10ms)
　根本原因は不明だが、エラーを発生させず現象を再現させる方法を見つけたので、今後はクライアントに迷惑をかけずに
　調査が進められるだろう。


で、対策として、

1a) 異常にでかくなっているフォルダを再作成する処置を行ったところ、36時間の間、不調が起こっていない。
　これは、6月以来の最長記録だという。しかし、まだ安心するには早いため、注意深く見守る必要がある。

1b) キャッシュメモリサイズを増やす。これは今週末ぐらいに実施する予定。クライアントへの影響はない。

だとさ。