パスワードを忘れた? アカウント作成
この議論は賞味期限が切れたので、アーカイブ化されています。 新たにコメントを付けることはできません。

ペタバイト級のデータの移行」記事へのコメント

  • by Anonymous Coward on 2015年10月20日 17時12分 (#2903384)

    なんとなくスパースなデータだろうと想像できるので、圧縮したら
    え、圧縮済でPBですか?
    ...
    移行用I/Fはやっぱりパラな光ファイバなんでしょうね。
    データセンタも神岡(の地下)にあるんだろうか

    #門外漢です

    • PBクラスのデータを圧縮展開って、それだけでも大変そう。
      展開前と展開後の両方を保存できる記憶容量が必要だよね。
      テープ→HDDとかHDD→テープだとHDD容量は半分とかにできるけれど、圧縮しながらテープライブラリに記録していくって勇気が要るなー。途中でこけたら最初からやり直しになりそう……

      単なるコピーと違ってCPUでの圧縮が律速段階になるから、どのくらいの転送速度が出るのか、どれくらいの時間が掛かるのか、事前に計算しにくそう……

      自分ならやりたくねぇ。その分記録メディアを多く購入しようよ……
      親コメント
    • by Anonymous Coward

      >データセンタも神岡(の地下)にあるんだろうか

      大昔見学したが、スーパーカミオカンデの処理システムは坑道の外にあった。
      何度かリプレースしてるだろうが当時は確か富士通のハードだったなー

    • by Anonymous Coward

      どんな感じのデータなんでしょうね。あまり圧縮できないということはノイズが多いとか?

      • スーパーカミオカンデでの実験の一例ですけど、たぶんこんなデータじゃないかと
        スーパーカミオカンデのイベントディスプレイ http://t2k-experiment.org/ja/?page_id=1369&preview=true [t2k-experiment.org]

        これは画像変換されたものを表しているので、生データはどんなようになってるのかはわからないのですけど。

        親コメント
      • by Anonymous Coward

        多チャネルの高速A/Dコンバータが絶え間なく吐き出すデータを圧縮する暇も無くひたすら記録するだけです
        意味の無い捨てても良いデータかどうかは後で分析してからでないと分かりません

        • by Anonymous Coward

          いや、data reduction はしてなくても data compression はしてるから

UNIXはただ死んだだけでなく、本当にひどい臭いを放ち始めている -- あるソフトウェアエンジニア

処理中...