再请教有关硬盘复制文件过程中,大幅降速的可能原因
4002 18
[1 楼] ColorPig [资深泡菜]
22-6-14 12:11
从希捷酷鱼(ST2000DM006)复制924G(文件数1900+)的文件到希捷酷鹰(ST4000VX007)中
大部分时间速度都在170-180MB/秒
但是中途有一段时间,降速到20+MB/秒
最终全程平均速度为123MB/秒左右

因为都是影视/视频文件,没有更小、数量更大的照片文件,
很奇怪复制过程期间为何会如此大幅降速,
正好那段时间,文件在磁盘转速最慢的磁道上?
感觉好像是源盘(酷鱼)的因素。。。

附上复制时的速度图,截图时,速度已(触底反弹)恢复到正常速度 本帖最后由 ColorPig 于 2022-6-14 12:28 编辑
[19 楼] Bohnenkaffee [陈年泡菜]
22-6-16 16:57
影呆 发表于 2022-6-16 15:42
我的还好,正在将yapsy大神的PS合集共380G考进NAS。

试了一下fast copy稳一些,70上下吧。硬盘都比较老,只有一块单独使用的硬盘速度是200,也就没什么用。
[18 楼] 影呆 [资深泡菜]
22-6-16 15:42
Bohnenkaffee 发表于 2022-6-14 12:28
我目前用的电脑和nas之间都不太稳定。。。具体什么原因未知。

我的还好,正在将yapsy大神的PS合集共380G考进NAS。
[17 楼] CATWK [泡菜]
22-6-16 11:35
zhby9818 发表于 2022-6-16 11:20
N多文件不再一个扇区里,硬盘需要寻迹的时间就慢下来了吧


扇区不需要,不在一个柱面(磁道)才需要移动磁头
[16 楼] zhby9818 [资深泡菜]
22-6-16 11:20
N多文件不再一个扇区里,硬盘需要寻迹的时间就慢下来了吧
[15 楼] nahcooo [资深泡菜]
22-6-14 21:51
ColorPig 发表于 2022-6-14 19:36
剩余空间太小,今天这个并不存在,2T盘有近一般空着,4T盘3/4空着;

我猜测有几个可能:
1)SATA转USB3.0的转接线链接的不稳定;
2)2T硬盘某些磁道有问题了,这是最令人担心的,但是HD Tune扫也没显示警告;
3)复制的文件都是PT影片/电视剧,是不是降速的时候就是有些文件有问题。。。
4)降速时电脑卡了?


你说的也有可能

如果USB3.0不稳定,就会掉到USB2.0上去。。。。

而USB2.0的移动硬盘速度就是20多,不到30MB/s
[14 楼] ColorPig [资深泡菜]
22-6-14 19:36
nahcooo 发表于 2022-6-14 19:19
刚想说你从新复制一下那些国产电视剧,结果发现你已经格盘了,那就没办法了

虽然你是1G一集,很大的文件,但可能当初复制进入磁盘的时候由于某种原因产生了大量磁盘碎片,1个1G的文件如果碎成了1000块,那么和1000个1M的文件也差不多了。

最常见的产生磁盘碎片的原因是磁盘空间即将用满,例如你的硬盘上只剩1.1G空间了,你却还要复制进1G的文件,那么唯一可行的办法就是把这个文件掰碎成无数的碎片,每一个犄角旮旯里都塞一点点,当要读取的时候,自然要去各个角落里寻找,这样就慢了。

重新复制的时候由于是个空白盘,这些文件自然是连续写入在磁盘的其它地方的,速度不会慢。


剩余空间太小,今天这个并不存在,2T盘有近一般空着,4T盘3/4空着;

我猜测有几个可能:
1)SATA转USB3.0的转接线链接的不稳定;
2)2T硬盘某些磁道有问题了,这是最令人担心的,但是HD Tune扫也没显示警告;
3)复制的文件都是PT影片/电视剧,是不是降速的时候就是有些文件有问题。。。
4)降速时电脑卡了?
[13 楼] nahcooo [资深泡菜]
22-6-14 19:19
ColorPig 发表于 2022-6-14 19:15
补充几个信息:
1、一个重要I/O细节未说,我是在R7000笔记本上用SATA转USB3.0的转接线链接机械硬盘的
(当然每个机械硬盘分别用上一个12v 2A的电源);
2、复制时候,我没在试用这台R7000,除了开着浏览器外,还有发现降速、才打开HD Tune看下硬盘温度;
3、整个任务是复制924G(文件数1900+)的影片/电视剧,总体没有太多小文件的,

话说理论上 SATA转USB3.0的转接线可能是降速的原因
但是为何降速只发生在复制国产中的一小段时间?

严重降速的时候我关注了一下,是在复制某国产电视剧集,
虽然单文件平均大小要小一些、1G或不到1G,但远不是几十M照片很小而多那种。。。

我的希捷酷鱼(ST2000DM006)是(深坑)2碟(单碟1T)
下午完成复制后,我将此希捷酷鱼重新格式化(慢速)了,忘了再测一下复制降速时的“某国产电视剧集”
现在重新格式化后,从酷鹰 copy 回 酷鱼这几十G的 “某国产电视剧集”,速度正常在180MB/s

...


刚想说你从新复制一下那些国产电视剧,结果发现你已经格盘了,那就没办法了

虽然你是1G一集,很大的文件,但可能当初复制进入磁盘的时候由于某种原因产生了大量磁盘碎片,1个1G的文件如果碎成了1000块,那么和1000个1M的文件也差不多了。

最常见的产生磁盘碎片的原因是磁盘空间即将用满,例如你的硬盘上只剩1.1G空间了,你却还要复制进1G的文件,那么唯一可行的办法就是把这个文件掰碎成无数的碎片,每一个犄角旮旯里都塞一点点,当要读取的时候,自然要去各个角落里寻找,这样就慢了。

重新复制的时候由于是个空白盘,这些文件自然是连续写入在磁盘的其它地方的,速度不会慢。
[12 楼] ColorPig [资深泡菜]
22-6-14 19:15
CATWK 发表于 2022-6-14 12:43
CPU在等I/O


yifanker 发表于 2022-6-14 17:00
这两块硬盘都是64MB缓存与CMR,2TB的7200RPM,早期三碟装、后期两碟装,4TB的5920转,三碟装,两者持续读写外圈200上下,内圈90上下。
复制大文件,速度应该不低于90,短时间内速度慢,原因可能有:
1,某个硬盘突然被其它程序占用读写资源,比如页面文件放置、个别程序的缓存等等。\\在PE下复制应该不存在这个问题。
2,文件的碎片过多,磁头来回频繁移动,时间耗费在寻道上。  \\用免费的Defraggler简单查看下碎片占用情况。
3,文件占用的个别扇区延迟过大(大于100毫秒),造成读写等待耗时,读写性能受影响。\\PE下用Victoria扫描看看扇区延迟。


nahcooo 发表于 2022-6-14 18:20
几种可能

1. 刚好那段时间有大量别的操作,例如杀毒软件刚好扫描到这块硬盘
2. 源硬盘有性能不佳的区块,虽然还不是坏道,但需要反复尝试才能读取出来
3. 满速的地方文件碎片较多,寻道操作多


补充几个信息:
1、一个重要I/O细节未说,我是在R7000笔记本上用SATA转USB3.0的转接线链接机械硬盘的
(当然每个机械硬盘分别用上一个12v 2A的电源);
2、复制时候,我没在试用这台R7000,除了开着浏览器外,还有发现降速、才打开HD Tune看下硬盘温度;
3、系统是Win 10,没装杀毒软件;
4、整个任务是复制924G(文件数1900+)的影片/电视剧,总体没有太多小文件的,

话说理论上 SATA转USB3.0的转接线可能是降速的原因
但是为何降速只发生在复制国产中的一小段时间?

严重降速的时候我关注了一下,是在复制某国产电视剧集,
虽然单文件平均大小要小一些、1G或不到1G,但远不是几十M照片很小而多那种。。。

我的希捷酷鱼(ST2000DM006)是(深坑)2碟(单碟1T)
下午完成复制后,我将此希捷酷鱼重新格式化(慢速)了,忘了再测一下复制降速时的“某国产电视剧集”
现在重新格式化后,从酷鹰 copy 回 酷鱼这几十G的 “某国产电视剧集”,速度正常在180MB/s

附上重新格式化后测试的读取和写入速度,以供参考:

本帖最后由 ColorPig 于 2022-6-14 19:20 编辑
[11 楼] camson [禁言中]
22-6-14 18:50
因此说,低级格式化一下再用,也许有帮助。规整规整,理顺理顺。
[10 楼] nahcooo [资深泡菜]
22-6-14 18:20
几种可能

1. 刚好那段时间有大量别的操作,例如杀毒软件刚好扫描到这块硬盘
2. 源硬盘有性能不佳的区块,虽然还不是坏道,但需要反复尝试才能读取出来
3. 满速的地方文件碎片较多,寻道操作多
本帖最后由 nahcooo 于 2022-6-14 18:25 编辑
[9 楼] camson [禁言中]
22-6-14 17:46
慢的时候,也许在进行校验,或其他的背后小动作?
[8 楼] yifanker [资深泡菜]
22-6-14 17:00
这两块硬盘都是64MB缓存与CMR,2TB的7200RPM,早期三碟装、后期两碟装,4TB的5920转,三碟装,两者持续读写外圈200上下,内圈90上下。
复制大文件,速度应该不低于90,短时间内速度慢,原因可能有:
1,某个硬盘突然被其它程序占用读写资源,比如页面文件放置、个别程序的缓存等等。\\在PE下复制应该不存在这个问题。
2,文件的碎片过多,磁头来回频繁移动,时间耗费在寻道上。  \\用免费的Defraggler简单查看下碎片占用情况。
3,文件占用的个别扇区延迟过大(大于100毫秒),造成读写等待耗时,读写性能受影响。\\PE下用Victoria扫描看看扇区延迟。

[7 楼] CATWK [泡菜]
22-6-14 12:43
CPU在等I/O
[6 楼] camson [禁言中]
22-6-14 12:33
也不奇怪。安装程序的时候也是么,有时段快,有时段慢。针对背后的具体的各种不同操作/作业,可以理解,不会是恒定速度。
[5 楼] Bohnenkaffee [陈年泡菜]
22-6-14 12:28
我目前用的电脑和nas之间都不太稳定。。。具体什么原因未知。
[4 楼] ColorPig [资深泡菜]
22-6-14 12:22
zhfreal 发表于 2022-6-14 12:15
任务管理器里监控磁盘的占用率,大致看得出来是哪个盘的瓶颈


我记得当时看了,降速时酷鱼100%

但还是不知道,就这一段时间,酷鱼为何就降速了?触动了什么瓶颈?
降速前、降速后,硬盘※※>硬盘鹰 可以实现 180MB/s,
如果是温度(当时点开HD Tune看了,温度也不高),后面速度又回上去了呀。。。
[3 楼] nokia6600 [泡菜]
22-6-14 12:20
如果是大数据量拷贝,我一般会用fastcopy 这个软件。

这个软件的复制速度比较稳定。

[2 楼] zhfreal [泡菜]
22-6-14 12:15
任务管理器里监控磁盘的占用率,大致看得出来是哪个盘的瓶颈