2008-03-12

数据存储的十条经验

在Grid Gurus上,总结十条使用数据的很有价值的经验,翻译如下:
  1. 多数情况下不会立即就要全部的输出数据,甚至不用考虑为了检验而将数据从网格移到桌面。
  2. 重建一个巨型文件的计算时间量是很大的。
  3. 应用多线程来进行读写数据的不是一个轻松的方法。
  4. 从网络移动数据需要花费很多时间。
  5. 同一时间仅能一个进程以读写方式打开文件,一个大型文件会比几个单个文件阻塞更多的修改操作。
  6. 完全备份文件是非常困难的。不能仅仅将复制到磁盘的内容烧制成DVD或复制到磁带,一旦需要恢复某个文件,这将耗费大量的时间。
  7. 存储设备上的文件碎块会越来越严重,这会导致数据寻找时间的增加。
  8. 可以不再使用内存映射文件。
  9. 永远要对大型文件进行校验。
  10. 最后,如果已经适当地将任务分布在网格上,不应当使用如此大型文件。

没有评论: