[转帖]dd命令中dsync和fsync区别

dd,命令,dsync,fsync,区别 · 浏览次数 : 0

小编点评

## Summary of dd command parameters: **Sync:** * Uses synchronized I/O for data, reading and writing in one continuous block. * This approach is faster than `fdatasync` but can only be used for data without metadata. **Fsync:** * Reads data from disk into an output file in a single operation. * This approach is faster than `dsync` but can only be used for data with metadata. **Differences between sync and fdatasync:** | Feature | Sync | Fdatasync | |---|---|---| | I/O mechanism | Synchronized | Non-blocking | | Input/Output | One block at a time | Multiple blocks | | Suitable for | Data without metadata | Data with metadata | | Performance | Slower but more reliable | Faster but potentially slower | **Choosing the right option:** * Use `sync` for data without metadata. * Use `fdatasync` for data with metadata. **Remember:** * `oflag` specifies the block size for writing. * `conv` specifies other options like `notrunc`, `nocreat`, and `noatime`.

正文

在Linux系统中经常会使用dd命令来测试硬盘的写入速度,命令会涉及几个常用参数:sync、dsync、fsync与fdatasync

# dd if=/dev/zero of=/tmp/1G bs=4k count=256000 oflag=dsync

# dd if=/dev/zero of=/tmp/1G bs=4k count=256000 oflag=sync

# dd if=/dev/zero of=/tmp/1G bs=4k count=256000 conv=fsync

# dd if=/dev/zero of=/tmp/1G bs=4k count=256000 conv=fdatasync 

上面4个命令都是往硬盘中写入1G的数据,只是oflag=dsync和oflag=sync这两个的速度慢的要命。

dd --help中对各参数作用描述如下:  

Each FLAG symbol may be:

       dsync           use synchronized I/O for data   // 对应oflag=dsync

       sync             likewise, but also for metadata  // 对应oflag=sync

Each CONV symbol may be:

       fdatasync     physically write output file data before finishing  // 对应conv=fdatasync

       fsync            likewise, but also write metadata                       // 对应conv=fsync

区别:
使用dsync/sync,dd会从/dev/zero中,每次读取4Kbytes数据,然后直接写入到硬盘当中,重复此步骤,直到共读取并且写入了1G的数据。
使用fdatasync/fsync,dd会从/dev/zero中一次性读取1G的数据,写入到磁盘的缓存中,然后再从磁盘缓存中读取,一次性写入到硬盘当中。


/dev/在内存当中,和缓存一样,读取速度都非常快,因此两种方式最终的读取速度对最终的写入速度无任何影响。 换种说法,就是此处不管有没有的硬盘缓存,对IO都不产生任何影响。那也就是说,两种方式的主要差异就在于多步与一步。

dsync/sync是一次写一个bs大小的数据,同步写到磁盘后再继续写下一个IO;

fdatasync/fsync是每次写一个bs大小数据到磁盘缓存,dd命令结束前一次性将数据刷入磁盘中,因此IOPS比dsync/sync方式要高的多。

因此可以推断,使用dsync,以1G为blocksize,次数为一的方式往硬盘中写入1 Gbytes的数据,结果将不会与dd if=/dev/zero of=/tmp/1Gbytes bs=4k count=256000 conv=fdatasync有太大的差距。

CONV标识其他参数含义:

1. conv=notrunc,do not truncate the output file

2. conv=nocreat, do not create the output file

3. conv=excl,      fail if the output file already exists

FLAG标识其他参数含义:

1. oflag=direct, use direct I/O for data

2. oflag=nonblock, use non-blocking I/O

3. oflag=noatime, do not update access time

</article>

与[转帖]dd命令中dsync和fsync区别相似的内容:

[转帖]dd命令中dsync和fsync区别

在Linux系统中经常会使用dd命令来测试硬盘的写入速度,命令会涉及几个常用参数:sync、dsync、fsync与fdatasync # dd if=/dev/zero of=/tmp/1G bs=4k count=256000 oflag=dsync # dd if=/dev/zero of=/

[转帖]Linux 中用 dd 命令来测试硬盘读写速度

https://www.cnblogs.com/xiexun/p/13935443.html hdparm -T /dev/sdb iostat 磁盘性能监控 由sysstat包提供 dd 是 Linux/UNIX 下的一个非常有用的命令,作用是用指定大小的块拷贝一个文件,并在拷贝的同时进行指定的转

[转帖]Shell中常用的date时间命令

常用FORMAT %Y YYYY格式的年份(Year) %m mm格式的月份(),01-12 %d dd格式的日期(day of month),01-31 %H HH格式的小时数(),00-23 %M MM格式的分钟数(),00-59 %S SS格式的秒数(),00-59 %F YYYY-mm-dd

[转帖]dd命令祥解

http://blog.chinaunix.net/uid-11728685-id-5825650.html 先简要介绍dd的参数,后边通过几个实例介绍dd的应用,参考了其他网友的资料,在此一并感谢 小菜水平有限文中有什么错误请大家指正,关于dd还有什么好的使用方法,可以贴出来,小菜会及时更新 dd

[转帖]Linux下用dd命令测试硬盘的读写速度

一、测试写速度: time dd if=/dev/zero of=/tmp/test bs=8k count=1000000 测试结果:565 MB/s 二、测试读速度: time dd if=/tmp/test of=/dev/null bs=8k 测试结果:4.7GB/s 三、测试读写速度: t

[转帖]FIO磁盘性能测试工具

https://www.cnblogs.com/lyhabc/p/16708771.html 简介 一般我们测试硬盘或者存储的性能的时候,会用Linux系统自带的dd命令,因为是自带命令,简单易使用,因此一些客户喜欢使用dd命令来测试磁盘的读写性能。 但是用dd命令来测试性能,有如下问题: 1. d

[转帖]FIO磁盘性能测试工具

https://www.cnblogs.com/lyhabc/p/16708771.html 简介 一般我们测试硬盘或者存储的性能的时候,会用Linux系统自带的dd命令,因为是自带命令,简单易使用,因此一些客户喜欢使用dd命令来测试磁盘的读写性能。 但是用dd命令来测试性能,有如下问题: 1. d

[转帖]磁盘性能基准测试

https://baijiahao.baidu.com/s?id=1754630877239636966&wfr=spider&for=pc dd 1. dd if=/dev/zero of=test bs=64k count=16k 这个很不准确的,因为命令结束的时候数据还没有真正写到磁盘上去 2

[转帖]DD硬盘性能相关因素

https://www.jianshu.com/p/a15d7a65c876 本文简单介绍下DD测试硬盘性能时,各个因素的影响 首先列出测试结果 image.png oflag分析--/home dd默认测试会使用buffer io,oflag=direct参数则会跳过buffer I/O,因此通常

[转帖]dd - Linux世界中的搬运工

《存储工具系列文章》主要介绍存储相关的测试和调试工具,包括不限于dd、fio、vdbench、iozone、iometer、cosbench等性能负载工具,及strace等调试工具。 dd,是 device driver 的缩写,它可以称得上是“Linux 世界中的搬运工”,它用来读取设备、文件中的