fdatasync

在学习sync、fsync和fdatasync这三个函数中，很多学者没有用过，不知道区别和使用场景，常常感到抽象和困惑。作为初学者，首先我们得弄清楚每个函数的作用，然后比较它们之间的不同，这样才能在实际编程中正确选择使用哪个函数。让我们先回忆一下之前学过的内容，或者查资料看看这些函数是做什么的。

本文介绍文件数据的同步的几个函数 `sysc`、`syscfs`、`fsync` 和 `fdatasync`。

同步内核缓冲区 转自：https://www.cnblogs.com/bhlsheji/p/5222271.html 1.缓冲区简单介绍 人生三大错觉之中的一个：在调用函数write()时，我们觉得该函数一旦返回，数据便已经写到了文件里.可是这样的概念仅仅是宏观上的.实际上。操作系统实现某些文件I/O时（如磁盘文件）。为了保证I/O的效率，在内核一般会用到一片专门的区域（内存或独立的...

文件IO中的sync/fsync、fdatasync函数，同时简单的介绍了fcntl函数的功能

一、术语解释        脏页:linux内核中的概念，因为硬盘的读写速度远赶不上内存的速度，系统就把读写比较频繁的数据事先放到内存中，以提高读写速度，这就叫高速缓存，linux是以页作为高速缓存的单位，当进程修改了高速缓存里的数据时，该页就被内核标记为脏页，内核将会在合适的时间把脏页的数据写到磁盘中去，以保持高速缓存中的数据和磁盘中的数据是一致的。       内存映射：内存映射文件，

传统的UNIX实现在内核中设有缓冲区高速缓存或页面高速缓存，大多数磁盘I/O都通过缓冲进行。当将数据写入文件时，内核通常先将该数据复制到其中一个缓冲区中，如果该缓冲区尚未写满，则并不将其排入输出队列，而是等待其写满或者当内核需要重用该缓冲区以便存放其他磁盘块数据时，再将该缓冲排入输出队列，然后待其到达队首时，才进行实际的I/O操作。这种输出方式被称为延迟写（delayed write）（Bach

fsync的性能问题，与fdatasync 除了同步文件的修改内容（脏页），fsync还会同步文件的描述信息（metadata，包括size、访问时间st_atime & st_mtime等等），因为文件的数据和metadata通常存在硬盘的不同地方，因此fsync至少需要两次IO写操作，fsync的man page这样说： "Unfortunately fsync() will

ES 里，摒弃了 fsync，嫌它太耗时， 它使用了数据的冗余备份来实现的数据的安全性。 传统的UNIX实现在内核中设有缓冲区高速缓存或页面高速缓存，大多数磁盘I/O都通过缓冲进行。当将数据写入文件时，内核通常先将该数据复制到其中一个缓冲区中，如果该缓冲区尚未写满，则并不将其排入输出队列，而是等待其写满或者当内核需要重用该缓冲区以便存放其他磁盘块数据时，再将该缓冲排入输出队列，...

这里写目录标题延迟写sync、fsync、fdatasync在linux操作系统上，怎样保证对文件的更新内容成功持久化到硬盘？ 延迟写 在使用write函数向文件中写入数据的时候，并不是在调用了函数后数据就被写进了磁盘，操作系统在内核中设置了一块页缓冲区，数据会先被写入到内核的页缓冲区中，等到页缓冲区满了或者系统需要重新利用页缓冲区的时候才会将此缓冲区排入到写队列中去，待到达队首的时候，将数据真正写入到磁盘当中。这就是延迟写，延迟写会造成缓冲区中的数据和磁盘中的数据之间的不同步。 sync、fsync、fd

在linux内核中都有缓冲区或者页面高速缓存，大多数磁盘IO都是通过缓冲写的。当你想将数据write进文件时，内核通常会将该数据复制到其中一个缓冲区中，如果该缓冲没被写满的话，内核就不会把它放入到输出队列中。当这个缓冲区被写满或者内核想重用这个缓冲区时，才会将其排到输出队列中。等它到达等待队列首部时才会进行实际的IO操作。在进行数据库开发时，为了避免缓存中的数据还没有写入到磁盘就宕机导致的数据丢失，就需要使用fsync或这fdatasync来保证数据成功写入磁盘。

Linux系统通过缓存机制提升I/O性能，但存在断电数据丢失风险。为此，系统提供三个文件同步接口：sync全局触发但不等待回写，适用于不严格要求数据持久性的场景；fsync同步单个文件的数据和元数据并等待完成，适合数据库事务等严格场景；fdatasync是fsync的优化版，仅同步必要元数据，适合日志写入等高频操作。选择同步接口需权衡数据持久性要求和性能开销，并结合内核参数优化。通常优先使用fdatasync，避免频繁调用sync，并注意文件系统和磁盘缓存的"伪同步"问题。

对于提供事务支持的数据库，在事务提交时，都要确保事务日志（包含该事务所有的修改操作以及一个提交记录）完全写到硬盘上，才认定事务提交成功并返回给应用层。 一个简单的问题：在*nix操作系统上，怎样保证对文件的更新内容成功持久化到硬盘？ 1. write不够，需要fsync 一般情况下，对硬盘（或者其他持久存储设备）文件的write操作，更新的只是内存中的页缓存（page cache），...

前段时间一直在研究磁盘顺序写和随机写，以及Java直接内存相关的问题，于是在各类资料或者源码中常常看到flush、mmap等概念和相关使用。然后开始各个击破，一个一个去理解其含义。终于都理清楚之后，回来总结却发现，自己越来越糊涂了。于是产生了如下疑问： 1、fsync和fwrite/fflush组合的区别是啥？ 2、mmap和fsync有什么关系？ 3、为什么都说fsync之后数据就不会丢失了，真的不会丢失么？ 4、数据写入磁盘就安全了么？ 5、为什么不能直接close文件，而需要先flush？

Linux 中用 dd 命令来测试硬盘读写速度dd 是 Linux/UNIX 下的一个非常有用的命令，作用是用指定大小的块拷贝一个文件，并在拷贝的同时进行指定的转换。 dd 命令通用语法格式如下： dd if=path/to/input_file of=/path/to/output_file bs=block_size count=number_of_blocks 1 命令简介 1.1 主要选项...

sync, fsync, fdatasync区别