Welcome 微信登录

首页 / 操作系统 / Linux / Linux Direct IO 写文件的问题

很多的时候,在应用层中会做一些文件的cache ,那么绕开linux vfs提高读写文件的性能就显的比较重要,由于Direct IO 中操作文件有buffer地址和大小 页对齐, 那么在copy file 的时候,用direct IO,就会碰到如果文件大小不是页的整数倍的时候,最后一块 block是无法copy的,系统返回-EINVAL。主要是在文件 direct_io.c 中的函数__blockdev_direct_IO() 
  1. if ((addr & blocksize_mask) || (size & blocksize_mask))  {   
  2.              if (bdev)   
  3.                  blkbits = bdev_blkbits;   
  4.              blocksize_mask = (1 << blkbits) - 1;   
  5.              if ((addr & blocksize_mask) || (size & blocksize_mask))    
  6.                  goto out;   
  7.          }   
如何解决这样的问题呢? 一种方法就是把最后一个长度不是和bocksize_mask对齐的buffer直接append到文件的末尾,由于文件的指针刚好在文件的最后,所以可以直接append,但绕不开page cache,会产生页碎片的问题。还有一种方法,就是不需要direct IO 复制文件,只要在copy结束的时候调用   fdatasync(file);
   posix_fadvise(file, 0, 0, POSIX_FADV_DONTNEED);
清除page cache,但有性能影响,不过你当然可以异步去清除page cache.Linux proc 的文件系统的源码分析CentOS 上 关于 SystemTap 安装相关资讯      Linux基础教程 
  • Linux基础教程:对文件打包压缩  (03月08日)
  • 基础教程:Linux 新手应该知道的   (09/06/2015 21:17:20)
  • Linux基础教程:find 与 xargs  (04/05/2015 10:20:11)
  • Linux基础教程:tar 命令使用介绍  (12/03/2015 13:19:47)
  • Linux基础教程(1)操作系统基础   (08/15/2015 20:44:01)
  • Linux基础教程:从源码安装软件  (04/05/2015 10:14:45)
本文评论 查看全部评论 (0)
表情: 姓名: 字数