为什么几个小文件传输比一个大文件传输慢?
在日常中,会遇到几个小文件传输居然比一个大文件传输慢,为什么传输许多小文件(例如壁纸或照片)比传输相同大小的大文件要慢呢?
当你说“传输”时,是否可能意味着通过不同位置之间的网络?
如果是这样,那是由于与每个相同大小的文件(例如压缩文件)处理相同的速度相比,传输文件时每个文件的传输更大。
简单说明: 传输时,计算机必须保留要复制的所有文件的索引。每个人都有一个左右的索引。这会产生碎片等。
现实生活中的场景:假设您要搬家。拥有一个装满所有物品的大盒子而不是5个单独的盒子会更容易吗?拥有单独的盒子意味着您必须跟踪其中的所有小物品,否则事情很容易出错。
如果这些小文件中的一个或多个文件已损坏,并被Windows锁定,则可以解释为什么小文件传输速率比单个大文件要慢。
同样,如果这些小文件位于不同的目录中,而不是位于一个目录中,那么这可以解释为什么速率会变慢。
在游戏中使用cpu和ram传输文件。Win7使用大量RAM来获得这些加速的文件传输速率。
其实在生活中也会有很多小文件传输比大文件传输慢的情况。 有多种原因...
假设您的硬盘驱动器进行了很好的碎片整理,则复制单个大文件将是连续读取,磁头移动很少,而各种小文件更可能散布在整个磁头上,从而导致磁头为每个文件进行大量跳跃。
复制文件不仅仅是在一个位置读取数据并将其写入另一位置。有一些元数据(安全性选项,文件属性等)需要从源中读取,写入目标中,并且需要为每个文件更新诸如主文件表之类的集中数据。
如果将文件复制到另一个文件系统,则还需要执行其他操作,例如FAT32并不支持NTFS的所有属性和元数据,并且具有不同的群集大小。这些也是系统必须照顾的事情。
如果您通过网络将文件复制到另一个系统或卷上,则还有其他作用,例如验证等。
这就是为什么常见的备份策略是将所有数据本地压缩(压缩为一个大的压缩文件或映像文件),然后通过网络将该一个大文件传输到存储。
镭速提供海量小文件传输解决方案,提供小文件传输加速服务,小文件传输每秒5000个以上,百万数量级文件能在5分钟内完成列表,相同文件秒传速度可达每秒20000个,速度比传统的FTP快100倍以上。