当前位置: 首页 > news >正文

【Linux】time+dd测试硬盘读写速度

dd 是 Linux/UNIX 下的一个非常有用的命令,作用是用指定大小的块拷贝一个文件,并在拷贝的同时进行指定的转换。

dd 命令通用语法格式如下:

dd if=path/to/input_file of=/path/to/output_file bs=block_size count=number_of_blocks
命令简介
主要选项(指定数字的地方若以下列字符结尾乘以相应的数字: b=512, c=1, k=1024, w=2, xm=number m): 
if=file                 输入文件名,缺省为标准输入。 
of=file                 输出文件名,缺省为标准输出。 
ibs=bytes                一次读入 bytes 个字节(即一个块大小为 bytes 个字节)。 
obs=bytes                一次写 bytes 个字节(即一个块大小为 bytes 个字节)。 
bs=bytes                 同时设置读写块的大小为 bytes ,可代替 ibs 和 obs 。 
cbs=bytes                一次转换 bytes 个字节,即转换缓冲区大小。 
skip=blocks               从输入文件开头跳过 blocks 个块后再开始复制。 
seek=blocks                 从输出文件开头跳过 blocks 个块后再开始复制。(通常只有当输出文件是磁盘或磁带时才有效)。 
count=blocks              仅拷贝 blocks 个块,块大小等于 ibs 指定的字节数。 
conv=conversion[,conversion...]    用指定的参数转换文件。 
iflag=FLAGS              指定读的方式FLAGS,参见“FLAGS参数说明”
oflag=FLAGS              指定写的方式FLAGS,参见“FLAGS参数说明”

conv 转换参数:

ascii                  转换 EBCDIC 为 ASCII。 
ebcdic                    转换 ASCII 为 EBCDIC。 
ibm                   转换 ASCII 为 alternate EBCDIC. 
block                  把每一行转换为长度为 cbs 的记录,不足部分用空格填充。 
unblock                 使每一行的长度都为 cbs ,不足部分用空格填充。 
lcase                  把大写字符转换为小写字符。 
ucase                  把小写字符转换为大写字符。 
swab                   交换输入的每对字节。 
noerror                 出错时不停止。 
notrunc                 不截短输出文件。
sync                   把每个输入块填充到ibs个字节,不足部分用空(NUL)字符补齐。

FLAGS 参数说明:

append -append  mode  (makes  sense  only  for output; conv=notrunc sug-gested)

direct                 读写数据采用直接IO方式;
directory              读写失败除非是directory;
dsync                 读写数据采用同步IO;
sync                 同上,但是针对是元数据
fullblock              堆积满block(accumulate full blocks of input )(iflag only);
nonblock               读写数据采用非阻塞IO方式
noatime                读写数据不更新访问时间

 

time+dd 测磁盘读写速度

1、先熟悉两个特殊的设备及一些相关参数:

1) time有计时作用,dd用于复制,从if读出,写到of;

2) if=/dev/zero(产生字符)不产生IO,因此可以用来测试纯写速度

3) 同理of=/dev/null(回收站、无底洞)不产生IO,可以用来测试纯读速度

4) 将/tmp/test拷贝到/var则同时测试了读写速度;

5) bs是每次读或写的大小,即一个块的大小,count是读写块的数量。

当写入到驱动盘的时候,我们简单的从无穷无用字节的源 /dev/zero 读取,当从驱动盘读取的时候,我们读取的是刚才的文件,并把输出结果发送到无用的 /dev/null。在整个操作过程中, DD 命令会跟踪数据传输的速度并且报告出结果。

 

2.测试磁盘写能力(写速度)

time dd if=/dev/zero of=test.dbf bs=8k count=300000

其中/dev/zero是一个伪设备,它只产生空字符流,对它不会产生IO,所以,IO都会集中在of文件中,of文件只用于写,所以这个命令相当于测试磁盘的写能力,上面为每一块大小是8k,共有300000块。

输出的结果类似(因为一般更长测试时间更准确,所以可以设置count大一些):
300000+0 records in
300000+0 records out

real 0m36.669s
user 0m0.185s
sys 0m9.340s

所以写速度为:8*300000/1024/36.669=63.916M/s

 

3、测试磁盘读能力(读速度)

time dd if=/dev/sda1 of=/dev/null bs=8k

因为/dev/sdb1是一个物理分区,对它的读取会产生IO,/dev/null是伪设备,相当于黑洞,of到该设备不会产生IO,所以,这个命令的IO只发生在/dev/sdb1上,也相当于测试磁盘的读能力。(Ctrl+c终止测试)

输出的结果类似:
448494+0 records in
448494+0 records out


real 0m51.070s
user 0m0.054s
sys 0m10.028s

所以sda1上的读取速度为:8*448494/1024/51.070=68.61M/s

上面指的是从if的路径写到of的路径,或者从if的路径输出到of的路径

bs的命令使用形式是:bs=xxx count=mmm

含义:bs=600 count=1,备份第一块为600个字节的区域.(默认大小为512个字节)

           bs=512 count=2,备份前2块总共为1024个字节的区域

dd的输出是:

x+y records in

m+n records out

其中 x和m的含义是 x和m个完整的块(也就是你用bs指定的块大小)被读入和写出。

其中y和n的含义是 y和n个不完整的块(部分块)被读入和写出。

最常见产生的不完整块的读入是由于碰到了读入的文件尾,比如你有一个文件a.log的大小是10个字节,你用下面的命令就会出现1+1的情况,因为第二个块不够6个字节,只有4字节。

dd if=a.log of=b.log bs=6 count=21+1 records in1+1 records out常见的出现0+0的情况是由于被读的文件是空文件(0字节),

比如下面的命令dd if=/dev/null of=b.log bs=6 count=20+0 records in0+0 records out

 

4、测试同时读写能力

time dd if=/dev/sdb of=/testrw.dbf bs=4k

在这个命令下,一个是物理分区,一个是实际的文件,对它们的读写都会产生IO(对/dev/sdb是读,对/testrw.dbf是写),假设它们都在一个磁盘中,这个命令就相当于测试磁盘的同时读写能力。

5、测试纯写入性能

dd if=test of=/dev/null bs=8k count=10000 iflag=direct

命令结尾添加oflag=direct将跳过内存缓存,添加oflag=sync将跳过hdd缓存。

6、测试纯读取性能

dd if=test of=/dev/null bs=8k count=10000 iflag=direct

 

eg1:Router上进行读写测试脚本:

#!/bin/sh
rm /mnt/mmcblk0p1/ddtest     'dev下面的mmcblk0p1的设备,mnt下面的mmcblk0p1是个目录,才可以读写
mytime=1
while [ 1 ]
do
  echo "===NO."$mytime" TEST==="
  time dd if=/dev/zero of=/mnt/mmcblk0p1/ddtest bs=8k count=10240       ’mmcblk0p1下创建ddtest文件夹,往文件夹里写入数据
  sleep 5
  rm /mnt/mmcblk0p1/ddtest   
  sleep 3
  echo ""
  let mytime=mytime+1
done

写一块是8k 一共写了10240块 数据一共是 8k*10240 = 80M

注意:dd 只能提供一个大概的测试结果,而且是连续 I/O 而不是随机 I/O,理论上文件规模越大,测试结果越准确。 同时,iflag/oflag 提供 direct 模式,direct 模式是把写入请求直接封装成 I/O 指令发到磁盘,非 direct 模式只是把数据写入到系统缓存就认为 I/O 成功,并由操作系统决定缓存中的数据什么时候被写入磁盘。(参考链接:http://www.360doc.com/content/15/0906/17/8737500_497292503.shtml)

 

 

【测试说明】

纯读:time dd if=/dev/mmcblk1p3 of=/dev/null bs=8k

纯写:time dd if=/dev/zero of=/ysdisk/iotest bs=8k count=102400

多次测试,取平均值

*******************************************

【特定场景的io分析】

构造特定场景,记录通过命令iostat -zx 1查看并记录当前io情况

转载于:https://www.cnblogs.com/chenxiaomeng/p/9533772.html

相关文章:

  • [洛谷P2801]教主的魔法
  • 共享服务-FTP基础(一)
  • ZYNQ的Linux Linaro系统镜像制作SD卡启动
  • intellij idea 编译 kafka 源码
  • 杂项-Java:Druod Monitor
  • mysql+centos7+主从复制
  • BZOJ1052 [HAOI2007]覆盖问题
  • RabbitMQ消息中介之Python使用
  • Android下的一些命令
  • Xshell连接虚拟机文档教程
  • 2-10 案例4:像素读取写入
  • Python基础之数据类型和变量
  • SpringCloud组件相关
  • 2.进程与程序的关系
  • 【一步一步学习spring】【番外】IOC 设计原理与实现
  • 【Amaple教程】5. 插件
  • co.js - 让异步代码同步化
  • Consul Config 使用Git做版本控制的实现
  • es6--symbol
  • js对象的深浅拷贝
  • Node.js 新计划:使用 V8 snapshot 将启动速度提升 8 倍
  • React+TypeScript入门
  • Spring技术内幕笔记(2):Spring MVC 与 Web
  • vue从创建到完整的饿了么(18)购物车详细信息的展示与删除
  • Vue官网教程学习过程中值得记录的一些事情
  • 从零开始在ubuntu上搭建node开发环境
  • 从重复到重用
  • 对JS继承的一点思考
  • 番外篇1:在Windows环境下安装JDK
  • 翻译--Thinking in React
  • 老板让我十分钟上手nx-admin
  • 数据可视化之 Sankey 桑基图的实现
  • 我与Jetbrains的这些年
  • 怎么把视频里的音乐提取出来
  • 《天龙八部3D》Unity技术方案揭秘
  • ​iOS安全加固方法及实现
  • ​人工智能之父图灵诞辰纪念日,一起来看最受读者欢迎的AI技术好书
  • #### go map 底层结构 ####
  • #Spring-boot高级
  • $().each和$.each的区别
  • $HTTP_POST_VARS['']和$_POST['']的区别
  • (09)Hive——CTE 公共表达式
  • (1)常见O(n^2)排序算法解析
  • (aiohttp-asyncio-FFmpeg-Docker-SRS)实现异步摄像头转码服务器
  • (八)Spring源码解析:Spring MVC
  • (读书笔记)Javascript高级程序设计---ECMAScript基础
  • (附源码)spring boot北京冬奥会志愿者报名系统 毕业设计 150947
  • (切换多语言)vantUI+vue-i18n进行国际化配置及新增没有的语言包
  • (转载)微软数据挖掘算法:Microsoft 时序算法(5)
  • .bat批处理(十):从路径字符串中截取盘符、文件名、后缀名等信息
  • .dwp和.webpart的区别
  • .net 受管制代码
  • .Net 中Partitioner static与dynamic的性能对比
  • .NET中使用Protobuffer 实现序列化和反序列化
  • /etc/fstab 只读无法修改的解决办法