アカウント名:
パスワード:
なんとなくスパースなデータだろうと想像できるので、圧縮したらえ、圧縮済でPBですか?...移行用I/Fはやっぱりパラな光ファイバなんでしょうね。データセンタも神岡(の地下)にあるんだろうか
#門外漢です
>データセンタも神岡(の地下)にあるんだろうか
大昔見学したが、スーパーカミオカンデの処理システムは坑道の外にあった。何度かリプレースしてるだろうが当時は確か富士通のハードだったなー
どんな感じのデータなんでしょうね。あまり圧縮できないということはノイズが多いとか?
スーパーカミオカンデでの実験の一例ですけど、たぶんこんなデータじゃないかとスーパーカミオカンデのイベントディスプレイ http://t2k-experiment.org/ja/?page_id=1369&preview=true [t2k-experiment.org]
これは画像変換されたものを表しているので、生データはどんなようになってるのかはわからないのですけど。
多チャネルの高速A/Dコンバータが絶え間なく吐き出すデータを圧縮する暇も無くひたすら記録するだけです意味の無い捨てても良いデータかどうかは後で分析してからでないと分かりません
いや、data reduction はしてなくても data compression はしてるから
より多くのコメントがこの議論にあるかもしれませんが、JavaScriptが有効ではない環境を使用している場合、クラシックなコメントシステム(D1)に設定を変更する必要があります。
UNIXはただ死んだだけでなく、本当にひどい臭いを放ち始めている -- あるソフトウェアエンジニア
PetaB級データロガー (スコア:0)
なんとなくスパースなデータだろうと想像できるので、圧縮したら
え、圧縮済でPBですか?
...
移行用I/Fはやっぱりパラな光ファイバなんでしょうね。
データセンタも神岡(の地下)にあるんだろうか
#門外漢です
Re:PetaB級データロガー (スコア:1)
展開前と展開後の両方を保存できる記憶容量が必要だよね。
テープ→HDDとかHDD→テープだとHDD容量は半分とかにできるけれど、圧縮しながらテープライブラリに記録していくって勇気が要るなー。途中でこけたら最初からやり直しになりそう……
単なるコピーと違ってCPUでの圧縮が律速段階になるから、どのくらいの転送速度が出るのか、どれくらいの時間が掛かるのか、事前に計算しにくそう……
自分ならやりたくねぇ。その分記録メディアを多く購入しようよ……
Re: (スコア:0)
>データセンタも神岡(の地下)にあるんだろうか
大昔見学したが、スーパーカミオカンデの処理システムは坑道の外にあった。
何度かリプレースしてるだろうが当時は確か富士通のハードだったなー
Re: (スコア:0)
どんな感じのデータなんでしょうね。あまり圧縮できないということはノイズが多いとか?
Re:PetaB級データロガー (スコア:1)
スーパーカミオカンデでの実験の一例ですけど、たぶんこんなデータじゃないかと
スーパーカミオカンデのイベントディスプレイ http://t2k-experiment.org/ja/?page_id=1369&preview=true [t2k-experiment.org]
これは画像変換されたものを表しているので、生データはどんなようになってるのかはわからないのですけど。
Re: (スコア:0)
多チャネルの高速A/Dコンバータが絶え間なく吐き出すデータを圧縮する暇も無くひたすら記録するだけです
意味の無い捨てても良いデータかどうかは後で分析してからでないと分かりません
Re: (スコア:0)
いや、data reduction はしてなくても data compression はしてるから