修士研究の解析データが数百GBになったときの整理とバックアップの進め方

解析データが数百GBになって、どう扱えばいいのか迷う。必要なデータを失わずに、研究を進めたい。

研究に必要なデータだと思うと、削除してよいか迷いますよね。

残すデータを分けよう

まず、原本と再生成できる中間ファイルを分け、それぞれの容量と保存先を確かめてみてください。残す必要のあるデータが分かると、どれを削除して、どれを移すか決めやすくなります。

中間ファイルでも、作り直しに長時間かかるものは、すぐに削除すると研究を進める妨げになります。削除を考えるのは、作り直す方法が分かり、必要な原本とコードが残っているものだけにしておきましょう。

日々の解析に使う場所と、失ったときに戻すための保存先を分けます。同じドライブ内でフォルダを分けても、ドライブの故障に備える別コピーにはなりません。

研究室や大学の保存先について、次の点を確認してください。

必要な容量があり、保管の条件も合っていれば、新しい機材を買わずに別コピーを残せます。

外付けSSDを使うと、PCとは別の保存先にコピーを置けます。ただし、そこへ移してPC側を削除するとコピーは一つに戻るので、空きを増やすことと、バックアップを残すことは分けて考えてください。

人の情報や持ち出し制限のあるデータは、外部の保存機器や個人向けクラウドへコピーする前に、研究室のルールを確かめてください。指導教員や管理担当者に次の点をそれぞれ確認すると、どう保存するか決められます。

コピーには、次のソフトが使えます。

同期先のファイルを削除する設定は、どのように動くか分かってから使ってください。

解析ソフトがデータを書き終えたことを確認し、コピーするデータと保存先の空き容量を確かめる
元データを残したまま、別の保存先へコピーする。最初から移動や削除はしない
転送エラーがないか、ファイル数や容量が合っているかを確認し、重要なファイルは開けるか試す。原本と中身が同じかを調べるには、SHA-256などのチェックサムも使える
別コピーを確認してから、削除してよいと判断した中間ファイルを整理する。原本の保存先は残す

容量やファイル数が同じでも、中身の一致まで確認できるわけではありません。チェックサムは内容の一致を調べる方法で、解析ソフトで開けるかの確認とは役割が異なります。